Обработка xlsx прайса

Есть прайс в экселе на 680000 строк (35Мб), необходимо в этом прайсе выбрать товары определенного производителя и определенным образом их преобразовать.
Попробовал сделать все это с помощью PHPExcel. Когда строк немного, то работает все нормально, но если грузить файл полный, со всеми строками, то на сервере не хватает памяти (memory_limit 128M) для выполнения скрипта, даже без необходимых преобразований. Пробовал увеличивать лимит до 1024M, выдает 500 ошибку.
Подскажите, что не так делаю, я в этих делах нуб. Может вообще не через PHPExcel делать надо, или можно сделать как-то по частям?

(Отредактировано автором: 30 Марта, 2015 - 16:38:47)

Какой результат ты хочешь получить?
Не проще ли запихнуть файл в базу данных и там уже сортировать и преобразовывать как тебе надо?

как его запихнуть в базу лучше?

Самый простой вариант это сохранить Excel в текстовом формате с разделителем табуляция, а скриптом считывать одну строку, разбивать ее и вставлять в базу данных.
Другой вариант это на локальном компьютере распарсить этот файл "PHPExcel" (тут ограничения памяти сам выставляешь), вставляешь в базу данных и phpmyadmin делаешь экспорт таблице, а на сервере импортируешь.

Тут как ни крути данных очень много, в массив это все не запихнешь, 1 гига памяти даже не хватит.

(Отредактировано автором: 31 Марта, 2015 - 12:02:05)

нужна автоматизация процесса, без ручной закачки и разбора.
Прайс в xlsx приходит на почту от поставщика, нужно вычленить отдельные позиции и поменять артикулы и названия... По окончанию, должен получиться файл одного из форматов xlsx, csv, txt. Для небольших прайсов до 15000 строк PHPExcel подходит нормально, но в данном случае очень много строк. Сейчас подумал распаковать исходный файл и спарсить в базу xml-ку.

Берем любую утилиту для парсинга xlsx->csv.
Например, такую https://github[dot]com/dilshod/xlsx2csv (с xls не умеет работать).
На больших объемах работает достаточно шустро.
На выходе получаем csv-файл.

Загружаем этот файл в mysql с помощью load data local infile (очень быстро загружает данные).
И уже работаем с таблицей в бд, если нужны преобразования.