Скрапинг: страницы товаров на myprotein.com
Запрос, который сегодня возвращает страницы товаров с myprotein.com, с параметрами, шаблонами и типами ошибок из лога запросов с 14 августа 2026. Последняя проверка 6 сентября 2026.
О myprotein.com
myprotein.com описывает себя так: «Почувствуйте силу с Myprotein. Покупайте премиальные добавки и одежду для зала и тренировок от спортивного бренда питания №1 в Великобритании для достижения ваших целей».
Главная страница объявляет 12 языков: de-at, ro-ro, cs-cz, hu-hu, nb-no, ru-kz, sk-sk, es-es, en-hk, nl-nl, nl-be, sv-se.
Его sitemap перечисляют 3 943 URL в 9 файлов (product-0, list-0, department-0, post-sitemap1, post-sitemap2, page-sitemap). 57 из 1 077 датированных записей изменились за последние 30 дней, самая свежая 3 сентября 2026.
Его robots.txt называет 4 sitemap и запрещает 12 путей.
Измерено на Crawlbase
Доля успеха по каждому запросу каждого аккаунта за август 2026: 99.7%. Шаблоны, страны и сбои взяты из лога запросов с 14 августа 2026; 59.9% успешных вызовов использовали JavaScript-токен, медианный ответ занял 14.3s.
Среди 20 сайтов категории спорт и отдых в Cookbook myprotein.com занимает 7 место из 20 по доле успеха; медиана категории 99.2%. Его медианный ответ 14.3s медленнее медианы категории 7.1s. 12 из 20 принимают обычный токен; этот сайт только на части страниц.
Вызов
Страницы товаров здесь запрашивают чаще всего, со страной и токеном, которые успешны чаще всего. Замените путь-заполнитель настоящим URL товара с сайта.
curl "https://api.crawlbase.com/?token=YOUR_TOKEN&url=https%3A%2F%2Fwww.myprotein.com%2Fexample-section%2Fexample-page%2Fexample-page"from crawlbase import CrawlingAPI api = CrawlingAPI({'token': 'YOUR_TOKEN'}) r = api.get('https://www.myprotein.com/example-section/example-page/example-page') html = r['body']
const { CrawlingAPI } = require('crawlbase'); const api = new CrawlingAPI({ token: 'YOUR_TOKEN' }); const r = await api.get('https://www.myprotein.com/example-section/example-page/example-page');
Важные параметры
| Параметр | Значение | Зачем |
|---|---|---|
country | не задавать | Большинство успешных вызовов не задают country (66.7%) и срабатывают с долей успеха 100%. |
javascript | не задавать | Вызовы с обычным токеном срабатывают с долей успеха 100% и составляют 50.0% трафика. Браузер стоит дороже и на этом сайте ничего не даёт. |
Шаблоны URL, которые запрашивают аккаунты
| Шаблон | Доля успехов | JavaScript-токен | Страна | Параметры запроса |
|---|---|---|---|---|
/{slug}/{slug}/{slug} | 75.0% | 0.0% | нет | нет |
/c/{slug}/{slug} | 25.0% | 100% | нет | нет |
Поля, которые вы получаете
Структурированные данные, которые Crawlbase нашёл на myprotein.com, по типам страниц. Это типы schema.org на странице, поля, которые ваш парсер может читать прямо из блока JSON-LD:
- Главная:
WebSite, Organization - Страница объекта:
Product, SaleEvent, BreadcrumbList - Список:
CollectionPage, BreadcrumbList - Статья:
BreadcrumbList, Organization, WebSite, ImageObject, WebPage, Article, Person - Профиль:
BreadcrumbList
Что ломается и как починить
На сбои с 14 августа 2026 сайт отвечал:
Запуск по расписанию
Обновление каталога это список URL товаров. Отправьте его в Crawler с callback-адресом, дайте ему распределить вызовы и повторить то, что сайт отклонил, и читайте результаты из Cloud Storage. Медианный ответ на этом сайте 14.3s.
Вопросы
Нужен ли браузер для скрапинга myprotein.com?
Нет. 100% вызовов с обычным токеном срабатывают, и аккаунты отправляют 50.0% своего трафика без браузера.
Сколько стоит страница myprotein.com на Crawlbase?
1 кредит без браузера. myprotein.com относится к уровню стандартный.
Какой country задать для myprotein.com?
Никакой не нужен: большинство успешных вызовов оставляют его незаданным.
Другие страницы на myprotein.com
Страницы, которые myprotein.com указывает в своих sitemap, запрошены Crawlbase 6 сентября 2026 и подтверждены в 2 прогонах подряд. В каждой строке самый дешёвый вызов, вернувший страницу с содержимым.
| Страница | Пример | Токен | Страна | Медиана |
|---|---|---|---|---|
Главная/Структурированные данные: WebSite, Organization | myprotein.com/ | Обычный | нет | 3.2s |
Страница объекта/p/{slug}/{slug}Структурированные данные: Product, SaleEvent, BreadcrumbList | myprotein.com/p/technology/nutribullet-juicer/17615111/ | Обычный | нет | 3.2s |
Список/c/{slug}/{slug}Структурированные данные: CollectionPage, BreadcrumbList | myprotein.com/c/pro/sign-up/ | Обычный | нет | 2.1s |
Статья/{slug}/{slug}/{slug}Структурированные данные: BreadcrumbList, Organization, WebSite, ImageObject, WebPage, Article, Person | нет | Обычный | нет | 9.0s |
Профиль/{slug}/author/{slug}Структурированные данные: BreadcrumbList | нет | Обычный | нет | 2.5s |