Отладка сайта

Здравствуйте.
Столкнулся со следующей проблемой.
Есть 8 сайтов с разными товарами. На каждом из сайтов, примерно по 250 товаров.
Я спарсил все товары только с одного сайта. По полученной ссылки на товар я спарсил описание и адрес. Отправил все в базу данных.
Проделывая вышеупомянутые действия вылетала ошибка: Fatal error: Allowed memory size of 73400320 bytes exhausted (tried to allocate 72 bytes) in...
Решил данную проблему с помощью файла .htaccess (php_value memory_limit 128M). Далее мне нужно провести геокодирование полученных адресов, что еще сожрет памяти. Также остается проделать тоже самое еще с 7-ю сайтами. Я еще не пробовал, но думаю, что хостинг, на котором лежит сайт, не выдержит.
Как можно выйти из подобной ситуации?
Можно ли все действия разбить на отдельные файлы и подключить потом их через include или require (есть ли в этом смысл)??
Или нужно покупать выделенный хостинг??
Буду очень благодарен всем, кто решит помочь ))

разбейте просто парсинг на этапы, например, по 50 штук

-----
Just do it

Я пользовался simpleHTMLdom
Это может повлиять?

если страницы сайта большие и вы не удаляете созданные объекты, а только создаете, то конечно вам никакой памяти не хватит

-----
Just do it

А как тогда можно удалить созданный объект??

если вы действительно используете много "$newobject = new simpleHTMLdom;" то после попробуйте использовать "unset($newobject);"

-----
Just do it

Что-то unset не очень помог
А если все действия разбить на отдельные файлы и подключить потом их через include или require (есть ли в этом смысл)?

(Отредактировано автором: 12 Декабря, 2011 - 15:15:49)

http://xdebug[dot]ru

-----
Когда всматриваешься в тёмную бездну, учти, что кто-то может смотреть на тебя из неё...