Добрый день.
Подскажите как лучше сделать чтобы передавать данные изlocalhost на сервер ежедневно.
Суть в том что при парсинге слишком большая нагрузка на сервер.
Как бы это реализовать если учесть что база данные будет пополняться каждый день.
На сервере есть доступ к SSH.
1. kappa - 10 Января, 2013 - 16:50:46 - перейти к сообщению
2. YMaker - 11 Января, 2013 - 23:08:02 - перейти к сообщению
как по мне, не совсем понятно, чего вы, собственно, хотите.
давайте определимся с понятиями.
localhost - локальный сервер на вашем компьютере?
сервер - удаленный сервер хостинг-провайдера? или просто удаленный сервер?
передавать данные - резервное копирование? какие именно данные? в каком виде эти данные хранятся?
давайте определимся с понятиями.
localhost - локальный сервер на вашем компьютере?
сервер - удаленный сервер хостинг-провайдера? или просто удаленный сервер?
передавать данные - резервное копирование? какие именно данные? в каком виде эти данные хранятся?
3. spsu - 11 Января, 2013 - 23:21:13 - перейти к сообщению
Цитата:
Как бы это реализовать если учесть что база данные будет пополняться каждый день.
Если данные предназначены для добавления в БД, то открыть доступ к ней из вне, подкл. с локальной машины к серверу с БД, и добавлять данные через БД.
4. kappa - 12 Января, 2013 - 15:39:40 - перейти к сообщению
spsu
Я к такому решению сперва тоже пришел.
Но буду делать с помощью питона.
После того как парсер отработал на домашнем ПК, сделать дамп данных и передать
по FTP на удаленный сервер хостинг провайдера, а далее уже с помощь крона вызывать нужный скрипт чтобы добавить данные в БД.
Я к такому решению сперва тоже пришел.
Но буду делать с помощью питона.
После того как парсер отработал на домашнем ПК, сделать дамп данных и передать
по FTP на удаленный сервер хостинг провайдера, а далее уже с помощь крона вызывать нужный скрипт чтобы добавить данные в БД.
5. spsu - 12 Января, 2013 - 16:43:41 - перейти к сообщению
Цитата:
Но буду делать с помощью питона.
Яп значения не имеет особо хотя со схемой через FTP будет быстрее да, у меня был парсер данных на питоне и надо было добавлять все в дле сайт, генерировался дамп и чел. сам через phpmyadmim добаавлял его в БД.