Cookbook по скрапингу · Электронная коммерция

Скрапинг сайтов категории электронная коммерция

20 сайтов в этой категории, измерено на трафике Crawlbase за August 2026. На каждой странице есть рабочий запрос и цифры за ним.

Универсальные ритейлеры с большими каталогами, среди них walmart.com, target.com, kohls.com и sears.com. Здесь сосредоточены антибот-уровни: несколько сайтов тарифицируются выше стандартного, и примерно половине нужен JavaScript-токен для поиска и категорий. 9 из 20 сайтов отвечают на обычный токен. Цены от 1 кредит до 4.5 кредитов за страницу.

kohls.comЭлектронная коммерция

Рабочий запрос, важные параметры, получаемые поля и что ломается.

Успех · Aug99.0%
БраузерНет
Цена2 кредитов
walmart.comЭлектронная коммерция

92.1% запросов к walmart.com успешны. страницы товаров, JavaScript-токен, медианный ответ 12.2s.

Успех · Aug92.1%
Браузер19% вызовов
Цена4.5 кредитов
target.comЭлектронная коммерция

Как получить страницы товаров с target.com: без браузера, 96.4% успеха, один запрос на страницу.

Успех · Aug96.4%
БраузерНет
Цена1 кредит
costco.comЭлектронная коммерция

Страницы товаров на costco.com: JavaScript-токен, 90.8% успешных запросов за Aug 2026.

Успех · Aug90.8%
Браузер71% вызовов
Цена1 кредит
staples.comЭлектронная коммерция

Как получить страницы товаров с staples.com: без браузера, 92.9% успеха, один запрос на страницу.

Успех · Aug92.9%
Браузер21% вызовов
Цена1 кредит
macys.comЭлектронная коммерция

94.0% запросов к macys.com успешны. страницы категорий, JavaScript-токен, медианный ответ 15.2s.

Успех · Aug94.0%
Браузер23% вызовов
Цена1 кредит
lego.comЭлектронная коммерция

Страницы категорий на lego.com: без браузера, выход DE, 94.9% успешных запросов за Aug 2026.

Успех · Aug94.9%
БраузерНет
Цена1 кредит
woolworths.co.zaЭлектронная коммерция

Страницы товаров на woolworths.co.za: без браузера, 99.9% успешных запросов за Aug 2026.

Успех · Aug99.9%
Браузер90% вызовов
Цена1 кредит
elcorteingles.esЭлектронная коммерция

Страницы товаров на elcorteingles.es: JavaScript-токен, выход ES, 93.0% успешных запросов за Aug 2026.

Успех · Aug93.0%
Браузер82% вызовов
Цена1 кредит
sears.comЭлектронная коммерция

Как получить страницы товаров с sears.com: JavaScript-токен, выход US, 94.2% успеха, один запрос на страницу.

Успех · Aug94.2%
БраузерДа
Цена1 кредит
jcpenney.comЭлектронная коммерция

Как получить страницы товаров с jcpenney.com: без браузера, выход US, 94.1% успеха, один запрос на страницу.

Успех · Aug94.1%
Браузер11% вызовов
Цена1 кредит
action.comЭлектронная коммерция

Как получить страницы товаров с action.com: без браузера, 92.5% успеха, один запрос на страницу.

Успех · Aug92.5%
БраузерНет
Цена1 кредит
officeworks.com.auЭлектронная коммерция

96.3% запросов к officeworks.com.au успешны. страницы категорий, JavaScript-токен, медианный ответ 10.6s.

Успех · Aug96.3%
Браузер56% вызовов
Цена1 кредит
dillards.comЭлектронная коммерция

99.8% запросов к dillards.com успешны. страницы pages, без браузера, медианный ответ 1.1s.

Успех · Aug99.8%
БраузерНет
Цена1 кредит
jomashop.comЭлектронная коммерция

97.6% запросов к jomashop.com успешны. результаты поиска, JavaScript-токен, медианный ответ 16.0s.

Успех · Aug97.6%
БраузерДа
Цена1 кредит
waltons.co.zaЭлектронная коммерция

Как получить страницы buy с waltons.co.za: без браузера, 98.2% успеха, один запрос на страницу.

Успех · Aug98.2%
БраузерНет
Цена1 кредит
harrods.comЭлектронная коммерция

Как получить страницы товаров с harrods.com: без браузера, 95.6% успеха, один запрос на страницу.

Успех · Aug95.6%
БраузерНет
Цена1 кредит
jacksonsart.comЭлектронная коммерция

Как получить страницы товаров с jacksonsart.com: браузер только там, где требует шаблон, 97.6% успеха, один запрос на страницу.

Успех · Aug97.6%
Браузер44% вызовов
Цена1 кредит
cassart.co.ukЭлектронная коммерция

Страницы товаров на cassart.co.uk: без браузера, 99.8% успешных запросов за Aug 2026.

Успех · Aug99.8%
БраузерНет
Цена1 кредит
myer.com.auЭлектронная коммерция

99.9% запросов к myer.com.au успешны. страницы категорий, без браузера, медианный ответ 2.1s.

Успех · Aug99.9%
БраузерНет
Цена1 кредит
Названия сайтов обозначают страницы, которые запрашивает рецепт. Crawlbase не аффилирован ни с одним из перечисленных сайтов. Используйте рецепты в рамках политики допустимого использования.Измеренные цифры за August 2026, обновляются ежемесячно