Веб-данные,
это просто.
Выведите свои скраперы на новый уровень.
Всё, что вы хотели знать
Если вашего вопроса здесь нет, напишите нашей команде, она отвечает быстро.
Что такое Crawlbase?
Crawlbase это инфраструктура веб-данных для разработчиков, компаний и LLM. Один аккаунт и один токен покрывают Crawling API, асинхронный Enterprise Crawler, Smart AI Proxy, Cloud Storage и Web MCP для AI-агентов, со встроенными резидентными прокси, рендерингом JavaScript и обходом анти-бот защиты. Смотрите полную документацию.
Нужна ли банковская карта для старта?
Нет. Каждый новый аккаунт получает до 10,000 бесплатных успешных запросов без банковской карты, так что сначала можно протестировать любой формат вывода (HTML, JSON, Markdown и скриншоты). Карта нужна, только когда потребуется больший объём; тарифы с оплатой по использованию есть на странице цен.
Какие языки и SDK поддерживаются?
API это обычный HTTP, поэтому подойдёт любой язык, умеющий делать запросы. Мы выпускаем официальные SDK для Python, Node, Ruby, PHP и Go, а сообщество поддерживает библиотеки для других языков. Смотрите все библиотеки.
Что происходит, если запрос не удался?
Вы платите только за успешные запросы. При мягком сбое Crawling API автоматически повторяет запрос с другими прокси и заголовками, и запрос списывается из квоты только когда он успешен: таймауты, блокировки и ошибки 5xx на стороне сайта бесплатны, поэтому повторять безопасно. Подробности в документации Crawling API.
Можно ли привязать запросы к конкретной стране?
Да. Добавьте параметр country с двухбуквенным ISO-кодом (например, country=US или country=DE), и запрос пойдёт через резидентные выходные узлы этого региона, более чем в двух десятках стран. Crawlbase может автоматически выбрать лучший прокси для конкретного сайта, чтобы удерживать высокий процент успеха. Смотрите параметр country в документации Crawling API.