Dmitri Pavlov - Библиотека имени Эйлера
June 3rd, 2007
07:37 pm

[Link]

Библиотека имени Эйлера

(120 comments | Leave a comment)

Comments
 
[User Picture]
From:[info]relf@lj
Date:June 4th, 2007 - 11:48 am
(Link)
У меня есть скрипт на перле, который знает форматы журнало-хранилищ основных издательств и умеет качать оттуда статьи по ссылкам (в том числе и DOI).

Кроме того, подобная идея уже реализована на fulltext-форуме molbiol.ru. Там есть робот самостоятельно лазающий по запросам статей, выкачивающий статьи с известных (для робота) сайтов и отсылающий их авторам запросов.

Так что, если уж автоматизировать, то проблема тут не в скачиватете, а в нормальном интерфейсе к нему. На molbiol.ru интерфейсом является сам fulltext-форум, робот заточен под его формат и умеет на автомате обрабатывать (просматривать, скачивать, отсылать, закрывать) запросы.
[User Picture]
From:[info]bbixob@lj
Date:June 4th, 2007 - 12:37 pm
(Link)
видимо, лучше всего (нужно) сделать скрипт, который будет выкачивать статьи по ключевым словам---так больше похоже на ученого человека, чтоб злые админы сразу не обрубили.
может, такой и есть где (он вообще был бы полезен) Ну и такой скрипт не я один мог бы запустить.

Впрочем. скрипт на перле выше моих программистских способностей, особенно сейчас.
From:[info]dmitri_pavlov@lj
Date:June 4th, 2007 - 01:26 pm
(Link)
Прекрасно!
Давайте вы скооперируетесь!
А мы это выложим на сервер.
Только важно чтобы статьи не складывались в одну кучу, а распределялись по каталогам.
[User Picture]
From:[info]bbixob@lj
Date:June 5th, 2007 - 05:32 am
(Link)
вообще говоря, афайк лучше просто сделать миррор fulltext-форума molbiol.ru ,
и при желании кэшировать затребованное в библиотеку...небось технически это не сложно.

а так---дайте мне скрипт, и я сохраню землю). но сам я сколько-нибудь нетриально (читай---совсем никак) модифицировать скрипт не смогу, а потому и кооперироваться никак)
дадут---попробую запустить.
[User Picture]
From:[info]relf@lj
Date:June 5th, 2007 - 04:21 pm
(Link)
О каком скрипте речь?
[User Picture]
From:[info]bbixob@lj
Date:June 6th, 2007 - 07:46 am
(Link)
о любом скрипте: который будет скачивать журнал сам, без моего участия. впрочем, не только я один мог бы его запустить. лучше --- статьи по ключевым словам.

если бы такой скрипт был, было бы хорошо.

From:[info]dmitri_pavlov@lj
Date:June 5th, 2007 - 11:59 am
(Link)
Админы, я думаю, могут следить разве что за тем, в каком порядке выкачиваются
журналы и выкачиваются ли тома целиком.
Поэтому я бы качал статьи в случайном порядка, а последние статьи из каждого
тома отдельно и тоже в случайном порядке.
[User Picture]
From:[info]relf@lj
Date:June 5th, 2007 - 04:20 pm

для скачивания журнала целиком

(Link)
1. Рекурсивно пробежаться по сайту и составить список прямых ссылок для скачивания.

2. Опросить и собрать людей с доступом к данному журналу.

3. Отсортировать список ссылок в случайном порядке и поровну распределить между подписавшимися на скачку.

From:(Anonymous)
Date:June 8th, 2007 - 01:39 am

Re: для скачивания журнала целиком

(Link)
Предлагаю скоординироваться.

kombainer, колхозник.
Тоже занимаюсь журналами, и часть их уже есть и раздаётся.

(Может эта рекомендация лишняя, но не рекомендую о наиболее важном писать в открытую, livejournal индексируется поисковиками. Когда и если дело дойдёт до дела, :) предлагаю переместится на колхозный форум).
[User Picture]
From:[info]relf@lj
Date:June 8th, 2007 - 01:50 am

Re: для скачивания журнала целиком

(Link)
Колхозный форум - это где?
From:(Anonymous)
Date:June 8th, 2007 - 02:22 am

Re: для скачивания журнала целиком

(Link)
ht_tp://forum.ru-board.com/topic.cgi?forum=93&topic=1085&start=1760#lt
From:[info]kombai@lj
Date:June 8th, 2007 - 03:35 pm

Re: для скачивания журнала целиком

(Link)
сработаемся :)
From:[info]kombai@lj
Date:June 17th, 2007 - 06:07 pm
(Link)
> У меня есть скрипт на перле,

Не будешь ли ты так добр заделиться вышеупомянутым скриптом?
[User Picture]
From:[info]relf@lj
Date:June 17th, 2007 - 08:52 pm
(Link)
дайте емайл - вышлю.

а молбиоловский скрипт берется тут: http://molbiol.ru/forums/index.php?showtopic=65765
From:[info]kombai@lj
Date:June 18th, 2007 - 04:57 am
(Link)
спасибо!

combine.operator эт gmail дот com

молбиоловский смотрел, а твой основан на нём?
[User Picture]
From:[info]relf@lj
Date:June 28th, 2007 - 01:15 am
(Link)
отправил емайл с подробностями.

мой скрипт с молбиоловским никак не связан, это совершенно независимый и не имеющий прямого отношения к molbiol.ru скрипт
From:[info]kombai@lj
Date:June 21st, 2007 - 08:38 am
(Link)
кхе-кхе
My Website Powered by LJ.Rossia.org