Dmitri Pavlov - Библиотека имени Эйлера
[Recent Entries][Archive][Friends][User Info]
07:37 pm
[Link] |
Библиотека имени Эйлера
|
|
|
У меня есть скрипт на перле, который знает форматы журнало-хранилищ основных издательств и умеет качать оттуда статьи по ссылкам (в том числе и DOI).
Кроме того, подобная идея уже реализована на fulltext-форуме molbiol.ru. Там есть робот самостоятельно лазающий по запросам статей, выкачивающий статьи с известных (для робота) сайтов и отсылающий их авторам запросов.
Так что, если уж автоматизировать, то проблема тут не в скачиватете, а в нормальном интерфейсе к нему. На molbiol.ru интерфейсом является сам fulltext-форум, робот заточен под его формат и умеет на автомате обрабатывать (просматривать, скачивать, отсылать, закрывать) запросы.
видимо, лучше всего (нужно) сделать скрипт, который будет выкачивать статьи по ключевым словам---так больше похоже на ученого человека, чтоб злые админы сразу не обрубили. может, такой и есть где (он вообще был бы полезен) Ну и такой скрипт не я один мог бы запустить.
Впрочем. скрипт на перле выше моих программистских способностей, особенно сейчас.
Прекрасно! Давайте вы скооперируетесь! А мы это выложим на сервер. Только важно чтобы статьи не складывались в одну кучу, а распределялись по каталогам.
вообще говоря, афайк лучше просто сделать миррор fulltext-форума molbiol.ru , и при желании кэшировать затребованное в библиотеку...небось технически это не сложно.
а так---дайте мне скрипт, и я сохраню землю). но сам я сколько-нибудь нетриально (читай---совсем никак) модифицировать скрипт не смогу, а потому и кооперироваться никак) дадут---попробую запустить.
о любом скрипте: который будет скачивать журнал сам, без моего участия. впрочем, не только я один мог бы его запустить. лучше --- статьи по ключевым словам.
если бы такой скрипт был, было бы хорошо.
Админы, я думаю, могут следить разве что за тем, в каком порядке выкачиваются журналы и выкачиваются ли тома целиком. Поэтому я бы качал статьи в случайном порядка, а последние статьи из каждого тома отдельно и тоже в случайном порядке.
| From: | relf@lj |
Date: | June 5th, 2007 - 04:20 pm |
---|
| | для скачивания журнала целиком | (Link) |
|
1. Рекурсивно пробежаться по сайту и составить список прямых ссылок для скачивания.
2. Опросить и собрать людей с доступом к данному журналу.
3. Отсортировать список ссылок в случайном порядке и поровну распределить между подписавшимися на скачку.
From: | (Anonymous) |
Date: | June 8th, 2007 - 01:39 am |
---|
| | Re: для скачивания журнала целиком | (Link) |
|
Предлагаю скоординироваться.
kombainer, колхозник. Тоже занимаюсь журналами, и часть их уже есть и раздаётся.
(Может эта рекомендация лишняя, но не рекомендую о наиболее важном писать в открытую, livejournal индексируется поисковиками. Когда и если дело дойдёт до дела, :) предлагаю переместится на колхозный форум).
| From: | relf@lj |
Date: | June 8th, 2007 - 01:50 am |
---|
| | Re: для скачивания журнала целиком | (Link) |
|
Колхозный форум - это где?
From: | (Anonymous) |
Date: | June 8th, 2007 - 02:22 am |
---|
| | Re: для скачивания журнала целиком | (Link) |
|
ht_tp://forum.ru-board.com/topic.cgi?forum=93&topic=1085&start=1760#lt
From: | kombai@lj |
Date: | June 8th, 2007 - 03:35 pm |
---|
| | Re: для скачивания журнала целиком | (Link) |
|
сработаемся :)
> У меня есть скрипт на перле,
Не будешь ли ты так добр заделиться вышеупомянутым скриптом?
спасибо!
combine.operator эт gmail дот com
молбиоловский смотрел, а твой основан на нём?
отправил емайл с подробностями.
мой скрипт с молбиоловским никак не связан, это совершенно независимый и не имеющий прямого отношения к molbiol.ru скрипт |
|