Скрапинг сайтов категории электронная коммерция
20 сайтов в этой категории, измерено на трафике Crawlbase за August 2026. На каждой странице есть рабочий запрос и цифры за ним.
Универсальные ритейлеры с большими каталогами, среди них walmart.com, target.com, kohls.com и sears.com. Здесь сосредоточены антибот-уровни: несколько сайтов тарифицируются выше стандартного, и примерно половине нужен JavaScript-токен для поиска и категорий. 9 из 20 сайтов отвечают на обычный токен. Цены от 1 кредит до 4.5 кредитов за страницу.
Рабочий запрос, важные параметры, получаемые поля и что ломается.
92.1% запросов к walmart.com успешны. страницы товаров, JavaScript-токен, медианный ответ 12.2s.
Как получить страницы товаров с target.com: без браузера, 96.4% успеха, один запрос на страницу.
Страницы товаров на costco.com: JavaScript-токен, 90.8% успешных запросов за Aug 2026.
Как получить страницы товаров с staples.com: без браузера, 92.9% успеха, один запрос на страницу.
94.0% запросов к macys.com успешны. страницы категорий, JavaScript-токен, медианный ответ 15.2s.
Страницы категорий на lego.com: без браузера, выход DE, 94.9% успешных запросов за Aug 2026.
Страницы товаров на woolworths.co.za: без браузера, 99.9% успешных запросов за Aug 2026.
Страницы товаров на elcorteingles.es: JavaScript-токен, выход ES, 93.0% успешных запросов за Aug 2026.
Как получить страницы товаров с sears.com: JavaScript-токен, выход US, 94.2% успеха, один запрос на страницу.
Как получить страницы товаров с jcpenney.com: без браузера, выход US, 94.1% успеха, один запрос на страницу.
Как получить страницы товаров с action.com: без браузера, 92.5% успеха, один запрос на страницу.
96.3% запросов к officeworks.com.au успешны. страницы категорий, JavaScript-токен, медианный ответ 10.6s.
99.8% запросов к dillards.com успешны. страницы pages, без браузера, медианный ответ 1.1s.
97.6% запросов к jomashop.com успешны. результаты поиска, JavaScript-токен, медианный ответ 16.0s.
Как получить страницы buy с waltons.co.za: без браузера, 98.2% успеха, один запрос на страницу.
Как получить страницы товаров с harrods.com: без браузера, 95.6% успеха, один запрос на страницу.
Как получить страницы товаров с jacksonsart.com: браузер только там, где требует шаблон, 97.6% успеха, один запрос на страницу.
Страницы товаров на cassart.co.uk: без браузера, 99.8% успешных запросов за Aug 2026.
99.9% запросов к myer.com.au успешны. страницы категорий, без браузера, медианный ответ 2.1s.