Добрый день, ищу литературу, документацию, статью
хочу реализовать следующее:
Все наверно в курсе такого сервиса как yandex xml который без капчи не искажая поиск выдает позиции и другую инфу (на каждый сайт в день дается определенное количество запросов)
у меня в данный момент более 10 сайтов с которых необходимо снимать позиции (лимит разный от 90 запросов до 900), хочется написать на nodejs скрипт который будет работать постоянно на сервере и каждый день снимать позиции и писать в базу. Сервер есть на debian.
необходимо использовать как я понимаю потоки чтобы это делать одновременно по нескольким сайтам, а так же реализовать задержку по запросам так как у яндекса куча условий использования (не более стольки то запросов в час по одному сайту), буду благодарен любой инфе или напутствию
|