Популярные парсеры

В эту категорию попали наиболее востребованные парсеры. Наверняка, здесь вы найдёте что-нибудь полезное и для себя.
  • Отслеживать цены заданных товаров на нескольких сайтах конкурентов.
    Выделить цветом цены, где у конкурентов цена ниже / выше заданной.

  • Собрать данные о товарах с сайта vamsvet.ru (люстры, светильники, лампы, и т.п.), и скачать изображения товаров, разложив их в отдельные папки по брендам

  • Собрать сведения о среднесписочной численности работников организации из XML файлов с сайта nalog.ru
    (вывести наименование организации, ИНН, и количество работников)

  • Загрузить информацию о товарах с сайта lamoda.ru
    Вывести максимум информации по каждому товару

  • Загрузить сведения о должниках (банкротах) из Единого федерального реестра сведений о банкротстве bankrot.fedresurs.ru
    Вывести все объявления о проведении торгов по заданному региону

  • Выгрузить информацию с сайта Росаккредитации о заявителях и изготовителях продукции за заданный период.

  • Выгрузить всю информацию по товарам с сайта dns-shop.ru из заданных разделов.
    Вывести на лист: название товара, категорию и подкатегории, код товара, ссылку на фото и имя скачанного изображения, информацию о гарантии и производителе, цену, описание товара, и все его характеристики (в отдельные столбцы)

  • Перебрать на яндекс-маркете список артикулов, вывести минимальную и вторую цену, название компании, торгующей по минимальной цене, среднюю цену для первых 6 цен, ссылку на товар для проверки.

  • Собрать информацию о всех земельных участках с сайта росреестра в рамках заданного в настройках округа.

  • Получить на сайте ati.su список грузов, удовлетворяющих заданным критериям поиска, вывести информацию по этим грузам в файл, после чего найти и вывести в файл грузоперевозчиков, которые могут доставить эти грузы.

  • Реализовать обработку банковских выписок формата 1CClientBankExchange (из программы 1С) с выводом данных в Excel.
    Вывести в отдельные столбцы: название файла с выпиской, дату операции, номер документа, сумму (дебет и кредит - в отдельные столбцы), назначение платежа, тип документа, данные по контрагенту и компании, чья выписка обрабатывается (наименование организации, ИНН, расчетный счет, название банка, БИК банка)
    Из всех выписок 1С в папке, создать единый файл Excel.

  • В статье описано 2 способа работы с сайтом vk.com - через API (предпочтительный) и через браузер (стандартный с точки зрения настройки).

    Для работы через API задача - выгрузить комментарии к записям на стене указанных групп и сообщения из обсуждений указанных групп.

    Для работы через браузер задача - для заданного альбома ВКонтакте спарсить комментарии к фотографиям, указать автора комментария, дату, текст комментария, ссылку на фото.

  • Собрать данные из резюме кандидатов на сайте hh.ru в автоматическом режиме, вывести информацию о желаемой должности, поле, возрасте кандидата, последнем месте работы, первом образовании, перечисляемых в резюме навыках и т.д.

  • Сформировать таблицу со списком организаций с сайта bus.gov.ru по выбранному региону и сферам деятельности.
    Необходимые данные: Категория, Регион, Название учреждения, Адрес, Телефон, Должность руководителя, ФИО руководителя, Email (адрес электронной почты), ИНН, КПП, Коды ОКВЭД, Виды деятельности по ОКВЭД, Вид учреждения, Тип учреждения.

  • Скачать информацию о торгах из раздела Аренда сайта torgi.gov.ru, вывести основную информацию по каждым торгам, гиперссылку на страницу события.

  • По заданной ссылке на город собрать информацию о предложениях размещения в городе (отели, хостелы, апартаменты и т.д.) и вывести информацию в таблицу в структурированном виде.

  • Получать данные о ценах и наличии запчастей и их аналогов у разных поставщиков на сайте zzap.ru "Система поиска запчастей"

  • Пройти парсером по списку сайтов, и попытаться найти адрес электронной почты (email) на каждом сайте.

  • Проставить отметки "Мне нравится" для фотографий, найденных по определенному хештегу или локации в сети Инстаграм.

  • Получить с базы электронного правосудия kad.arbitr.ru по определенному запросу (например, ИНН или наименование организации) список дел, в которых фигурировала данная компания.

  • Собрать данные о закупках в стадии подачи заявок на Едином информационном портале zakupki.gov.ru по заданному слову, вывести информацию об объекте закупки, заказчике, дате публикации и о начальной цене контракта.

  • Собрать комментарии к заданному ссылкой фотоальбому на сайте ОК.ru. Имя пользователя, текст комментария, описание фотографии.

    Используется в основном организаторами Совместных покупок на сайте Одноклассники, когда надо оперативно собрать все комментарии к фотографиям.

  • Настроить парсер avito.ru, собрать данные по объявлениям о продаже недвижимости (описание квартиры, адрес, цена, контактные данные продавца, включая контактный телефон).

  • По исходной таблице, содержащей список названий и кодов ОКПО организаций, сформировать таблицу по данным сайта Контур.Фокус со следующими столбцами:
    ИНН, КПП, ОГРН, ОКПО, Адрес организации, Руководитель, Должность руководителя, Уставный капитал, Баланс, Выручка, Чистая прибыль, Телефоны (до 3 шт), Виды деятельности.

  • Собрать сведения об адресах, телефонах, е-мейлах и сайтах организаций с одного из крупнейших сайтов, который занимается сбором подобной информации - 2gis.ru

  • Выгрузить с сайта ozon.ru наименование товара, его цену, описание, ссылки на изображения и характеристики товара.

  • Организовать сбор информации с одного из крупнейших сайтов частных объявлений Украины - Olx.ua

  • Скачать информацию об электронных аукционах, найденных по определенным фильтрам с сайта rts-tender.ru/auctionsearch

  • Среди множества сайтов, заказываемых посетителями нашего сайта, довольно часто заказывается парсинг сайта MyScore.ru
    В конкретном примере разбирается следующая задача:
    На главной странице сайта указаны футбольные матчи на сегодняшний день. Необходимо зайти в каждый матч, перейти на вкладку H2H и вывести информацию о 5 последних встречах данных команд. На скриншоте это таблица «Очные встречи: ШАЛЬКЕ – ХОФФЕНХАЙМ»

  • Загрузить список товаров с сайта mvideo.ru из заданных разделов
    (список интересующих разделов задаётся в настройках, товары каждого раздела выводятся на отдельный лист),
    и сформировать на листе Excel таблицу со столбцами:
    название товара, код товара, цена, доступность (наличие товара в 5 заданных магазинах), доставка на дом, старая цена (без скидки).