# Как это работает?

Если вы хотите использовать API-интерфейс через прокси-сервер, обратитесь к документации. Умный прокси-сервер ИИ (открывается новое окно) (открывается новое окно) Если вы не хотите приобретать подписку на Smart AI Proxy или хотите использовать все функции Crawling API без ограничений и более высокие лимитные ставки, то, пожалуйста, продолжайте читать следующий абзац.

Все Crawling API в режиме прокси-сервера звонки должны идти smartproxy.crawlbase.com Используйте свой токен доступа в качестве имени прокси-сервера пользователя. Вы можете использовать HTTPS (порт 8001, рекомендуется) или HTTP (порт 8000) в зависимости от ваших предпочтений. Обратите внимание, что эти порты отличаются от портов, входящих в Smart AI Proxy, поэтому убедитесь, что используются порты портов. Все остальное, что упоминается в документации Smart AI Proxy, остается без изменений.

Поэтому сделать свой первый звонок так же просто, как запустить одну из следующих строк в терминале. попробуйте!

Использование HTTPS (рекомендуется):

curl -x "https://[email protected]:8001" -k "https://httpbin.org/ip"

Использование альтернативного HTTP:

curl -x "http://[email protected]:8000" -k "https://httpbin.org/ip"

Чтобы выполнить запросы JavaScript (headless-браузер) вместо обычного запроса, выполните настройку конфигурации в терминале следующим образом:

Использование HTTPS (рекомендуется):

curl -x "https://[email protected]:8001" -k "https://httpbin.org/ip"

Использование альтернативного HTTP:

curl -x "http://[email protected]:8000" -k "https://httpbin.org/ip"

# Предел скорости

По умолчаню Crawling API в режиме прокси скорость ограничена 20 запросами в секунду (1.728 млн запросов в день). Если ваше решение по управлению прокси работает с параллельными запросами/потоками вместо запросов в секунду, важно отметить, что 20 запросов в секунду преобразуются в гораздо большее количество параллельных запросов в целом. Например, если вы сканируете Amazon с помощью Crawbase, средний запрос занимает около 4 секунд, поэтому 20 запросов в секунду преобразуются в 80 параллельных потоков. Если сканируемый вами веб-сайт отвечает быстро, вам нужно меньше параллельных запросов. Если вы ограничите параллельные запросы, пожалуйста, обратитесь в службу поддержки, (открывается новое окно) (открывается новое окно) с вашим использованием для увеличения параллелизма.