Cookbook·Спорт и отдых·dickssportinggoods.com
Скрапинг: страницы товаров на dickssportinggoods.com
Запрос, который сегодня возвращает страницы товаров с dickssportinggoods.com, с параметрами, шаблонами и типами ошибок из лога запросов с 14 августа 2026. Последняя проверка 6 сентября 2026.
99.3% успеха · авг 2026Браузер не нуженЦена Стандартный · 1 кредит
О dickssportinggoods.com
Его sitemap перечисляют 171 463 URL в 11 файлов (seo_sitemap_main, seo_sitemap_products_1, seo_sitemap_products_2, seo_sitemap_products_3, seo_sitemap_products_4, seo_sitemap_products_5).
Его robots.txt называет 1 sitemap и запрещает 12 путей.
Измерено на Crawlbase
Доля успеха по каждому запросу каждого аккаунта за август 2026: 99.3%. Шаблоны, страны и сбои взяты из лога запросов с 14 августа 2026; 1.1% успешных вызовов использовали JavaScript-токен, медианный ответ занял 2.3s.
Среди 20 сайтов категории спорт и отдых в Cookbook dickssportinggoods.com занимает 9 место из 20 по доле успеха; медиана категории 99.2%. Его медианный ответ 2.3s быстрее медианы категории 7.1s. 12 из 20 принимают обычный токен, и этот сайт тоже.
Вызов
Страницы товаров здесь запрашивают чаще всего, со страной и токеном, которые успешны чаще всего. Замените путь-заполнитель настоящим URL товара с сайта.
curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.dickssportinggoods.com%2Fp%2Fn-a-25qsqanccrmthgmtfnca%2F25qsqanccrmthgmtfnca"from crawlbase import CrawlingAPI api = CrawlingAPI({'token': 'YOUR_TOKEN'}) r = api.get('https://www.dickssportinggoods.com/p/n-a-25qsqanccrmthgmtfnca/25qsqanccrmthgmtfnca') html = r['body']
const { CrawlingAPI } = require('crawlbase'); const api = new CrawlingAPI({ token: 'YOUR_TOKEN' }); const r = await api.get('https://www.dickssportinggoods.com/p/n-a-25qsqanccrmthgmtfnca/25qsqanccrmthgmtfnca');
Важные параметры
| Параметр | Значение | Зачем |
|---|---|---|
country | не задавать | Большинство успешных вызовов не задают country (77.5%) и срабатывают с долей успеха 99.2%. |
javascript | не задавать | Вызовы с обычным токеном срабатывают с долей успеха 99.2% и составляют 99.8% трафика. Браузер стоит дороже и на этом сайте ничего не даёт. |
Шаблоны URL, которые запрашивают аккаунты
| Шаблон | Доля успехов | JavaScript-токен | Страна | Параметры запроса |
|---|---|---|---|---|
/p/{slug}/{slug} | 36.5% | 4.8% | US | нет |
/fl/{slug}/{id} | 5.8% | 0.0% | US | нет |
/tx/{slug}/{id} | 5.0% | 0.0% | US | нет |
/ny/{slug}/{id} | 3.5% | 0.0% | US | нет |
/nc/{slug}/{id} | 3.3% | 0.0% | US | нет |
/in/{slug}/{id} | 3.0% | 0.0% | US | нет |
/il/{slug}/{id} | 2.8% | 0.0% | US | нет |
/tn/{slug}/{id} | 2.3% | 0.0% | US | нет |
Поля, которые вы получаете
Структурированные данные, которые Crawlbase нашёл на dickssportinggoods.com, по типам страниц. Это типы schema.org на странице, поля, которые ваш парсер может читать прямо из блока JSON-LD:
- Страница объекта:
ProductGroup
Что ломается и как починить
На сбои с 14 августа 2026 сайт отвечал:
400: 39.8% сбоев 400 значит, что сайт отклонил запрос. Считайте это блокировкой: повторите один раз с JavaScript-токеном и страной успешных вызовов, затем остановитесь.
403: 21.0% сбоев 403 означает, что сайт отказал точке выхода. Задайте country, который используют успешные вызовы, и повторите один раз; второй 403 означает, что защищён сам URL.
0: 16.7% сбоев Статус 0 означает запрос, который так и не получил ответа в пределах таймаута. Повторите один раз с JavaScript-токеном, если шаблону нужен браузер.
418: 12.5% сбоев 418 значит, что сайт отклонил запрос. Считайте это блокировкой: повторите один раз с JavaScript-токеном и страной успешных вызовов, затем остановитесь.
Запуск по расписанию
Обновление каталога это список URL товаров. Отправьте его в Crawler с callback-адресом, дайте ему распределить вызовы и повторить то, что сайт отклонил, и читайте результаты из Cloud Storage. Медианный ответ на этом сайте 2.3s.
Вопросы
Нужен ли браузер для скрапинга dickssportinggoods.com?
Нет. 99.2% вызовов с обычным токеном срабатывают, и аккаунты отправляют 99.8% своего трафика без браузера.
Сколько стоит страница dickssportinggoods.com на Crawlbase?
1 кредит без браузера. dickssportinggoods.com относится к уровню стандартный.
Какой country задать для dickssportinggoods.com?
Никакой не нужен: большинство успешных вызовов оставляют его незаданным.
Другие страницы на dickssportinggoods.com
Страницы, которые dickssportinggoods.com указывает в своих sitemap, запрошены Crawlbase 6 сентября 2026 и подтверждены в 2 прогонах подряд. В каждой строке самый дешёвый вызов, вернувший страницу с содержимым.
| Страница | Пример | Токен | Страна | Медиана |
|---|---|---|---|---|
Главная/ | dickssportinggoods.com/ | Обычный | нет | 4.8s |
Поиск/s/{slug} | dickssportinggoods.com/s/expired | Обычный | нет | 7.4s |
Страница объекта/p/{slug}/{slug}Структурированные данные: ProductGroup | dickssportinggoods.com/p/n-a-25qsqanccrmthgmtfnca/25qsqanccrmthgmtfnca | Обычный | нет | 7.5s |
Список/c/{slug} | dickssportinggoods.com/c/mlb-fan-shop | Обычный | нет | 6.3s |
Другое/{slug}/{slug} | нет | JavaScript | нет | 21.5s |
Названия сайтов обозначают страницы, которые запрашивает рецепт. Crawlbase не аффилирован ни с одним из перечисленных сайтов. Используйте рецепты в рамках политики допустимого использования.Измеренные цифры за август 2026, обновляются ежемесячно