парсер яндекса

Приветствую

много прочел про парсеры выдачи поисковика, но у меня вопрос другой - парсинг яндекс-карт, а именно вывода организаций, расположенных по апределенному адресу.
т.к. я новичек, проблем много - подскажите, куда смотреть?
1) file_get_contents ничего не получает с адреса http://maps[dot]yandex[dot]ru/
2) введение поискового запроса в поля поиска никак не меняет этот адрес - http://maps[dot]yandex[dot]ru/ . Как формировать запрос из парсера?
3) яндекс выдает ссылку на результатты поиска в виде http://maps[dot]yandex[dot]ru/-/CBQAm2Nq
но в исходном коде этой ссылки нет, она формируется только при запросе в соответствующем поле... как ее получить? Т.е. как парсером сформировать клик на определенном поле?


много хочу, я понимаю Но если хотя бы один ответ на один вопрос решит - поделюсь результатом со всеми.

Спасибо!

я так понимаю, что яндекс совершает асинхронные запросы к серверу. отслеживайте их и курл вам в помощь

Алекс2011 смотрите api карт. честно говорю запаритесь парсить без него результаты.

1) file_get_contents ничего и не получит т.к.
1а) нужно отправлять координаты либо адрес
1б) отсылать API ключ. т.к. без него геокодер не даст вам ничего
2) И не будет, т.к. обратно вы получите jsonp
3) Несколько непонятно, но скорее всего после $_POST и перезагрузки страницы

AdMeen в обратку он получит тайлы карты.

(Отредактировано автором: 31 Марта, 2011 - 11:47:33)

-----
Список фильмов с описанием, блекджеком и... для Joomla? -> https://киноархив[dot]com
Демо нового движка для сайта php.su -> php[dot]su, проект на гитхабе

Я всего лишь предположил

Алекс2011 В качестве возможного варианта для осуществления решения предполагаемой задачи, заключающеся в проведении анализа и эффективного действенного извлечения объектов клиентской web-страницы, размещение которых производится в совмещенном пониженном базовом элементном уровня трактования относительно реального потока исполнения, допустимо использование технологии HTA основанной на платформе браузера Internet explorer, которая позволяет осуществлять внедрения предшествующий управляющих функциональных объектов в сопоставленные группированные базовые элеметные уровни трактования, на основании которого допустимо выполнения приоритетного действенного анализа целевой web-страницы

-----
Сделать можно все что угодно - нужно только старание, терпение и хороший поисковик
Безлимитный web-хостинг от 15 рублей за 40 МБ дискового пространства - http://ihost[dot]oks71[dot]ru/

А смысл в парсере Яндекса? Когда-то парился, парился. Плюнул скачал уже готовый парсер - программу. Ну, запустил, ну напарсил несколько сот килобайтов с горячего эфира Яндекса. Но, всё это ничего не даёт!

Поскольку желающих парсить выдачу Яндекса очень много (причем -- в корыстных целях), поисковик защищается. Чтобы получить выдачу (и извлечь нужную информацию) надо "замаскироваться" под браузер. Выдавать с помощью CURL разный User-Agent, разные IP (с помощью прокси-серверов) и т.п. В этом тебе поможет плагин для браузера, позволяющий просматривать заголовки. Твоя задача -- скопировать эти заголовки полностью. Твои запросы из скрипта не должны отличаться от запросов, которые задает обычный пользователь. Не части, маскируйся, будь типичным пользователем -- и Яндекс к тебе потянется...
Когда научишься обманывать Яндекс -- приходи (спроси разрешения у модераторов форума), задавай вопрос, как извлечь нужную информацию...
P.S. Отвечая на твой вопрос, я, скорее всего, заработаю (бан) неодобрение от модераторов forum.php.su (во всяком случае, на SQL.RU мне за подобные советы навешали ...)
P.P.S. Будет на твоей совести

-----
Форум для тех, кто делает сайты

Класная цытата!
А вобще сложно боротся с тем чего не знаешь. Если бы знать по каким имено критериям тот же яндекс различает пользователяот бота. А гадать сложновато.

(Отредактировано автором: 01 Апреля, 2011 - 01:33:19)

-----
Если вы хотя бы 3-4 раза не решите всё выкинуть и начать заново - вы явно что-то делаете не так.

Хм... Знал бы прикуп -- жил бы в Сочи (Русская пословица)

(Отредактировано автором: 01 Апреля, 2011 - 01:45:38)

-----
Форум для тех, кто делает сайты