Здравствуйте!
Стоит задача переноса картинок с одного сайта партнера на другой.
Картинки располагаются по одной на детальной страницы, этих страниц около 80.
Задача сохранить картинки в папку.

Если брать парсер simple dom, то с него удобно парсить информацию с одной станицы, которая передается в file_get_htm, а если их 80, получается надо передавать в метод file_get_htm все страницы по очереди.

Подскажите, можно ли как - нибудь гибко решить данную задачу?

Дело не в инструменте, а в способе. Организуйте очередь и будет вам счастье.

Напишите, пожалуйста, небольшой пример как это можно организовать

слишком простая задача для очереди
file_get_htm принимает и строку html насколько помню
решение multi_curl попроще
http://php.net/manual/ru/functio...l-multi-init.php
(Добавление)
с очередями не получится небольшого))
(Добавление)
хотя 80 страниц можно и тупо в цикле обработать если скорость не сверхкритична

Спасибо большое, посмотрю материал, да и изучить очереди не помешает

Вот статейка про парсинг на NodeJS если вам вдруг php не взлетит. https://habrahabr[dot]ru/post/301426/

Да, интересно тоже ознакомиться, noda я косался, возможно даже будет удобнее, попытаю)
Спасибо!

Еще один выстрел из пушки по воробьям
Viper ты прям мастер преувеличения на этой теме
В чем сила ноды?
Неумирающий процесс + ассинхронность библиотеки типа libevent
Viper акстись
После очередей нода
Фуууфф
(Добавление)
Mikle1989 очереди хороши для фоновых процессов
Чтоб ответ сервера не тормозить
Не путать с менеджером сообщений типа rabbit
он больше для связи компонентов soa архитектуры
Но фондовые процессы тоже может исполнять
Короче для гугления rabbit, gearman, и еще в каждом фреймворке есть свое решение..дешевое и сердитое
(Добавление)
AMPQ...просто положил сюда...кому надо погуглит

LIME где ты увидел про очереди в ноде? Не фантазируй

Сам не фантазируй
Я сказал что ты заставляешь курить то очереди то ноду
Впрочем пофиг
Ответы получились на любой вкус