А под парсинг блогов к примеру сможешь ?

Запросто :) Только нужна четкая задача: что на входе и что на выходе + какие параметры настройки?

Смотри. Мне к примеру нужено чтобы из ретинга станционарных блогов выдирал все имеющиеся ссылки блогов. То есть на входе у нас: http://blogs.yandex.ru/top/standalone/ а на выходе что то виде http://blog.blog.com и все. Если не затрудни то на нулледе в той же теме отпишись о результатх. Буду признателен ) Заранее спс. Только хайд ставь не менее 500

Хорошо, сделаем… а зачем такой большой хайд ставить, ведь пару человек всего скачать смогут?! =)

Да мало, зато яндекс не будет ничего менять и куча школьников не кинется парсить для спама

Спасибо кстати=)

нормально так украл скрипт

Спасибо. очень полезно

Скачаю, нада как раз спарсить сайты из Яки
Спасибо)

А можно ли весь каталог сразу запарсить?

Супер плагин. Очень помогли! Ставлю на Вас вечную ссылку :)

Скажите, а парсить выдачу Я.каталога он может? а то у меня что-то не получилось… ввел страничку с выдачей, процесс вроде пошел, только файл не создался с урлами.

PS все в кракозябрах было.

Сергей, большое спасибо за скрипт!
Единственное чего не хватает, т.к. это поддержка работы с прокси.
Не планируете сделать?

Огромное спасибо!

Огромное пасиба за парсер, буду мучать яндекс =)

Сергей отлично!

Как раз такой скрипт искал на той недели, но скачивал глючные.
Ваш работает.

Спарсил около 4000 ссылок. Поставил задержку в 150 сек. И IP добавил в сервис хороших роботов Яндекса. Не банит :).

Хорошая штука, спасибо. Имхо, это в первую очередь для тИЦа, потом для выдачи, как думаете?

Отличный парсер. Отпарсил нужную категорию из каталога без проблем. У кого есть голова сможет и региональную выдачу посмотреть. Огромное спасибо.

а под какой движок этот парсер?

Хороший парсер. На Денвере не заработал, но вот на дешевеньком хостинге вполне хорошо отработал. Установить и заюзать данный парсер каталога Яндекса сможет даже ребенок :) Порекомендовал на своей блоге. Спасибо.

Что-то перестал работать. Белый экран и все. В чем может быть проблема?

Здравствуйте Сергей Анатольевич!
Огромное спасибо Вам за отличный парсер!
тока на Денвере не заработал… и не подскажите, как переделать это скрипт на “www.uz” узбекский каталог!
Огромное спасибо.

И у меня что то перестал работать
Сразу пишет после задания категории “вы можете скачать файл”
В чем может быть дело?

Здравствуйте! Действительно чего то перестал парсер работать, думаю не только я был бы вам признателен за исправление сего полезного инструмента.

Ребята, спасибо за обратную связь. Поверю и исправлю проблему в ближайшее время. Видимо, Яндекс поменял формат сниппетов после снежинска.

Подключаюсь к просящим, было бы очень хорошо подправить скрипт

С новым годом!
Заодно присоединяюсь к просьбе подправить скрипт)

Да уж, пожалуйста подправьте!

Похоже скрипт до сих пор не работает. Сразу после указания категории и нажатия кнопки получить, выдает – “теперь вы можете скачать файл” (и битая ссылка). Исправьте пожалуйста.

К сожалению, скрипт до сих пор не работает.
Автор, когда можно ждать апдейт?

Парсер не работает, почему?

Похоже у Сергея просто пока не хватает времени подправить скрипт. Будем надеяться.

тоже хотелось бы чтобы скрипт заработал

Серегааа, услышь наши молитвы )))

А у меня заработал. Настроил у себя на http://buzzman.ru/parser-yandeks-kataloga/ – используйте на здоровье =)

На деле больше времени ушло на разбор чужого кода нежели на исправление – проблема была в регулярных выражениях.

Спасибо, Devaka

Я уже сам починил его)) Фантазию то врубите уже

Devaka, скажи, а почему мой комментарий то не опубликовал. Я сделал что-то неправомерное починив твой скрипт и выложив у себя в блоге?

buzzman, все в порядке, комментарий одобрен (он должен был пройти модерацию из-за ссылки, а я сейчас за границей).

В скрипте загвоздка только в регулярном выражении в конфиге, так как яша поменял внутреннюю структуру серпа яка.

Не работает :(

frebasic, выше же сказали уже об этом и ссылку дали на рабочую версию.

Спасибо Всем!

А когда эту версию скрипта отремонтируют? Или как самому ее отремонтировать? Что и где поменять :)?

Если использовать этот парсер только для отбора сайтов в сапе, то не проще ли в сапо-фильтре указывать “сайты в ЯК” и выбирать категорию?

Devaka, ты написал в статье про Поиск контактной информации с сайтов (часто с помощью специальных программ). Не подскажешь какие это могут быть программы?

Dzedx, обычно это email грабберы (еще бывает грабят телефоны, ICQ и т.п.). В простом случае можно просто искать страницы с контактными формами, ну и другие способы есть для более продвинутых)))))

Доработайте и выложите плз рабочий скрипт, очень нужен

у меня тоже не работает(

Народ, читайте комменты прежде чем писать очередное “у меня тоже…”

В скрипте надо изменить шаблон парсера в связи с изменениями выдачи Яндекса.

Форма парсера есть на http://buzzman.ru/parser-yandeks-kataloga/
Автор изменит как время появится. А пока есть видно более важные дела.

Да видимо со скриптом проблема :(

У меня тоже чет не пошел..

В файле: src/config.php
Заменить содержимое на:
<?
    // base url to yaca category
    define("YACA_URL_BASE", "http://yaca.yandex.ru/yca/ungrp/cat/");
    // regular expression of website url in list of websites in any category
    define("YACA_URL_EXPRESSION", "#<a href=\"(.+?)\" class=\"b-result__name\"#i");
    // regular expression for websites count
    define("YACA_SITESCNT_EXPRESSION", "#<h2[^>]+>([0-9]+).*?<\/h2>#ms");
?>

Уважаемый Komyak, может еще немного поколдуете над кодом? Парсит, но не все. Допустим, категория Sports/Hockey/, Ваш код парсит только 91 урл, а должно быть 163. Заранее спасибо!

Это, конечно, старая тема, но можно сделать чтобы выводились все сайты. Для этого надо в файле src/class.Grabber.php в 41 строке вместо $this->Maximum….]/20); поставить $this->Maximum…/10);

никуя твой парсер не работает и работать не мог…

Да, что-то не работает парсер. Уважаемый Devaka, не могли бы выложить обновленную рабочую версию, пожалуйста?