История обновлений парсера wildberries

В этой статье сообщается об изменениях в настройках парсера wildberries, в связи с обновлением сайта.

Сайт WB достаточно активно развивается, и иногда происходят изменения, в результате которых парсер перестаёт работать полностью или частично. Могут перестать выводиться значения в 1-2 столбца, или же, в редких случаях, парсер вообще перестаёт выводить данные в таблицу.

За последние 3 года (2018-2021) было около 10 обновлений на сайте, из которых 4 обновления повлекли серьезные переделки парсера, а остальные влияли лишь на пару столбцов либо только на некоторые разделы каталога.

Обновления настроек (после покупки парсера) выполняются на платной основе, и обычно стоят около 500 рублей для основного парсера (который покупают 95% пользователей), или от 1500 руб для модификаций этого парсера (если вы заказывали нестандартное решение под этот сайт)

 

 

18 июля 2021

В очередной раз переделали начинку сайта. На сайте добавили новый API, и изменили механизм поиска.
Убраны столбцы «Теги» (теги недавно убрали с сайта) и «Процент довольных качеством» (давно на сайте нет этих данных)
Добавлены новые столбцы «ИНН продавца», «Адрес продавца» (данные появились в новом API)
Для некоторых товаров стали заполняться столбцы «Подраздел», где раньше не было данных (но не для всех товаров на сайте сейчас есть эти данные)
 

20 мая 2021

Исправлены мелкие ошибки в настройках парсера.
 

13 мая 2021

Реализована возможность выводить все отзывы по товарам.
Инструкция по включению режима вывода отзывов (ВНИМАНИЕ: в этом режиме на лист выводится НАМНОГО больше строк)
 

6 мая 2021

Доработаны настройки парсера с целью исключения ошибок, когда в исходной ссылке присутствует параметр page=1.
Кроме того, на первой странице некоторых разделов выводится не 100 товаров, а больше (внедряются несколько рекламных товаров). Раньше парсер эти товары не выводил, теперь же выводится всё в точности как на страницах сайта.
 

18 апреля 2021

Изменение API сайта (часть страниц выводится не как раньше).
 

30 марта 2021

Отключение старого API сайта (теперь по ID товара не получить полную информацию о товаре).
В связи с этим парсер перестал выводить основные данные (в том числе цены) для всех товаров (кроме товаров с ID>20.000.000, данные по которым уже месяц как брались со страниц товаров, а не по API). Теперь все данные приходится получать со страниц товаров, что заметно замедляет работу парсера (приходится прогружать страницы товаров, а раньше этого можно было избежать, используя API, получая одним запросом данные сразу по 100 товарам)
Отключены столбцы (теперь эти данные не доступны): Цвета по фильтрам, Название 2
 

18 марта 2021

Изменения API сайта (старые версии настроек не выводят данные). Это повлияло на парсинг любых разделов / поисковых фраз (кроме парсинга по списку ID товаров).
Добавлен столбец ОГРН продавца.
 

22 февраля 2021

Не выводятся данные для новых товаров (ID>20.000.000)
Это связано с тем, что недокументированное API wildberries, которое используется парсером, не работает для товаров с кодами от 20.000.000
Для любого товара с ID до 19999999 данные выводятся, а данные по новым товарам видимо хранятся в отдельной базе, и при запросе данных по этим товарам вылетает ошибка :

{"state":-1,"data":{"errorMsg":"lookup catalog-backend-part20.wbx on 10.10.112.10:53: no such host"}}

Это не временная ошибка (прошел месяц, а ситуация не меняется), и товары с ID>20.000.000 всё чаще появляются в результатах поиска.
Для новых товаров данные приходится брать со страницы товара, но там есть не всё, что было доступно через API.
Для товаров с ID>20.000.000 не выводятся:

  • столбец «Цвета по фильтрам»
  • значения остатков по складам

Для старых товаров есть данные, сколько товаров каждого размера есть на каждом из складов, а для новых  мы можем получить лишь список складов, где есть в наличии этот товар.
Т.е. раньше по каждому размеру данные были в таком виде: склад Коледино - 10 шт., склад Подольск - 5 шт, склад Казань - 24 шт., а для новых товаров сейчас данные идут в таком виде: всего 39 шт, склады: Коледино, Подольск, Казань.

 

22 ноября 2020

мелкая доработка (перестал выводиться столбец «Продавец»)
 

18 ноября 2020

Серьезное изменение начинки сайта (парсер пришлось перенастраивать чуть ли ни «с нуля»)
Часть сайта перевели на новое API, другую часть оставили на старом. Итого 2 разных механизма запросов, для разных разделов
(хотя внешне выглядит всё одинаково)

5 августа 2020

добавлено несколько новых столбцов

 

PS: Ранее история изменений парсера WB не велась (парсер поддерживается и продаётся с сентября 2017 года)

Комментарии

Отправить комментарий

Содержание этого поля является приватным и не предназначено к показу.
CAPTCHA
Подтвердите, пожалуйста, что вы - человек:
  _       _   _   ___   ____    ____    _____ 
| |__ | \ | | |_ _| | ___| / ___| |_ _|
| '_ \ | \| | | | |___ \ \___ \ | |
| | | | | |\ | | | ___) | ___) | | |
|_| |_| |_| \_| |___| |____/ |____/ |_|
Введите код, изображенный в стиле ASCII-арт.