Crawling API / Product Hunt

Скрапер Product Hunt.
Любая страница, полностью отрендеренная.

Отправьте любой URL Product Hunt и получите обратно полностью отрендеренный HTML через резидентные прокси со встроенной обработкой защиты от ботов.
Или получите структурированный JSON с помощью скраперов producthunt-leaderboard и producthunt-product.

99% успешных запросов140M резидентных IP30 регионов
URL Product HuntСтруктурированный JSONproducthunt.com/posts/notionCrawlbaseМаршрутРендерингРазборJSON рейтингаJSON продуктаproducthunt-leaderboardproducthunt-productproducthunt.com · проверка на бота пройдена · 200
Живой поток обхода · Product Hunt1.24M req/minСтриминг
200producthunt.com/topics/productivityGB77ms
200producthunt.com/products/notionCA58ms
200producthunt.com/posts/notionUS102ms
200producthunt.com/posts/raycastES87ms
200producthunt.com/CA178ms
200producthunt.com/@rrhooverSG104ms
200producthunt.com/posts/notionGB193ms
200producthunt.com/leaderboard/daily/2024/1/15GB147ms
200producthunt.com/products/figmaBR41ms
200producthunt.com/topics/developer-toolsBR147ms
200producthunt.com/products/figmaUS139ms
200producthunt.com/leaderboard/weekly/2024/3DE70ms
301producthunt.com/posts/arc-browserUS142ms
200producthunt.com/topics/artificial-intelligenceSG157ms
200producthunt.com/products/figmaES101ms
301producthunt.com/@kevinwhDE78ms
200producthunt.com/topics/productivityFR121ms
200producthunt.com/leaderboard/daily/2024/1/15AU189ms
200producthunt.com/@kevinwhNL84ms
200producthunt.com/products/notionFR144ms
301producthunt.com/posts/raycastES127ms
200producthunt.com/posts/notionJP180ms
200producthunt.com/posts/raycastJP86ms
200producthunt.com/leaderboard/daily/2024/1/15GB64ms
200producthunt.com/@kevinwhUS218ms
200producthunt.com/posts/raycastCA119ms
200producthunt.com/topics/productivityGB77ms
200producthunt.com/products/notionCA58ms
200producthunt.com/posts/notionUS102ms
200producthunt.com/posts/raycastES87ms
200producthunt.com/CA178ms
200producthunt.com/@rrhooverSG104ms
200producthunt.com/posts/notionGB193ms
200producthunt.com/leaderboard/daily/2024/1/15GB147ms
200producthunt.com/products/figmaBR41ms
200producthunt.com/topics/developer-toolsBR147ms
200producthunt.com/products/figmaUS139ms
200producthunt.com/leaderboard/weekly/2024/3DE70ms
301producthunt.com/posts/arc-browserUS142ms
200producthunt.com/topics/artificial-intelligenceSG157ms
200producthunt.com/products/figmaES101ms
301producthunt.com/@kevinwhDE78ms
200producthunt.com/topics/productivityFR121ms
200producthunt.com/leaderboard/daily/2024/1/15AU189ms
200producthunt.com/@kevinwhNL84ms
200producthunt.com/products/notionFR144ms
301producthunt.com/posts/raycastES127ms
200producthunt.com/posts/notionJP180ms
200producthunt.com/posts/raycastJP86ms
200producthunt.com/leaderboard/daily/2024/1/15GB64ms
200producthunt.com/@kevinwhUS218ms
200producthunt.com/posts/raycastCA119ms
01 Живое демо

Два скрапера Product Hunt, вживую.

Crawling API, набираемый вживую. Смотрите, как скраперы producthunt-leaderboard и producthunt-product каждый возвращают структурированный JSON. Наведите курсор, чтобы приостановить и прочитать.

готово
клавиши 1-2 переключают · клик для паузызапустите свой URL
Выполните свой первый запрос за считанные минуты. До 20,000 бесплатных запросов, без кредитной карты.Начать бесплатно
02 Возможности

Один API для всего, что подбрасывает Product Hunt.

Product Hunt загружает свои ленты запусков, апвоуты и комментарии из GraphQL после отрисовки страницы и жёстко защищает главную страницу и страницы продуктов. Crawling API рендерит её в настоящем браузере, обращается к ней через резидентные IP и отдаёт вам чистый HTML или JSON.

render

Полный рендеринг JavaScript

Настоящий браузер исполняет страницу, поэтому загруженные через GraphQL запуски, счётчики апвоутов, комментарии и медиа захватываются целиком, а не только исходный HTML.

proxies

140M резидентных IP

Каждый запрос ротирует резидентный IP по 30 регионам, поэтому вы обращаетесь к Product Hunt как настоящий локальный посетитель.

anti-bot

Блокировки обрабатываются за вас

CAPTCHA, стены защиты от ботов и лимиты частоты снимаются автоматически. Ничего решать, ничего поддерживать.

format

HTML или JSON

Получите полный отрендеренный HTML или добавьте scraper=producthunt-leaderboard или producthunt-product, чтобы вернуть лидерборды и запуски в виде структурированного JSON.

extras

Скриншоты и асинхронность

Тот же вызов может сделать скриншот всей страницы или выполниться асинхронно с вебхуками и облачным хранилищем.

one token

Один API для любого сайта

Crawling API работает с любым URL, поэтому один и тот же токен покрывает Product Hunt и всё остальное, что вы обходите. Посмотреть живое демо.

03 Вывод

Каждое поле лидерборда, как чистый JSON.

Отправьте URL лидерборда с scraper=producthunt-leaderboard, и лидерборд вернётся в виде типизированного JSON. Переключитесь на producthunt-product, чтобы сделать то же самое для отдельного запуска.

{ "period": "daily", "date": "2026-07-14", "url": "https://www.producthunt.com/leaderboard/daily/2026/7/14/", "productCount": 20, "products": [ { "name": "Acme Analytics", "tagline": "Product analytics that ship themselves", "slug": "acme-analytics", "position": 1, "rank": 1, "upvotes": 842, "commentsCount": 96, "topics": [ "..." ], "makerCount": 3, "thumbnail": "https://ph-files.imgix.net/acme-thumb.png", "isPromoted": false } ] }

Leaderboard

period · string  date · string  url · string  productCount · number

Products

products · array  products[].name · string  products[].tagline · string  products[].slug · string

Ranking

products[].position · number  products[].rank · number

Engagement

products[].upvotes · number  products[].commentsCount · number  products[].topics · array

Meta

products[].makerCount · number  products[].thumbnail · string  products[].isPromoted · boolean

04 Как это работает

От URL к данным за один вызов.

Каждый запрос к Product Hunt проходит по одному и тому же пути. Вы отправляете URL, мы управляем всем, что между.

01

Отправьте URL

Передайте любой публичный URL Product Hunt со своим токеном: ленту главной страницы, продукт, тему или профиль мейкера.

02

Ротируйте прокси

Резидентный IP и регион, которые чисто обращаются к Product Hunt, выбираются из 140M IP по 30 регионам.

03

Отрендерьте страницу

Настоящий браузер загружает страницу, поэтому ленты запусков GraphQL, счётчики апвоутов и комментарии отрисовываются перед захватом.

04

Снимите защиту от ботов

Агрессивная детекция ботов Product Hunt на главной странице и страницах продуктов обрабатывается автоматически. Ничего решать, ничего поддерживать.

05

Верните HTML или JSON

Возвращается полностью отрендеренный HTML или типизированный JSON, когда вы добавляете producthunt-leaderboard или producthunt-product.

05 Сценарии использования

Что команды строят на данных Product Hunt.

USE / 01Запуски

Отслеживание запусков

Собирайте ежедневные запуски с апвоутами, мейкерами и комментариями, чтобы отслеживать, что выходит и как это заходит.

USE / 02Тренды

Мониторинг трендов и тем

Следите за страницами тем и лидербордов, чтобы рано замечать растущие продукты, категории и нарративы.

USE / 03Лиды

Лиды по мейкерам и продуктам

Собирайте мейкеров, продукты и профили, чтобы строить списки потенциальных клиентов и конкурентные карты.

USE / 04Бренд

Мониторинг бренда и конкурентов

Отслеживайте, как ваш продукт и конкуренты запускаются, ранжируются и обсуждаются по всей ленте.

USE / 05Исследования

Исследование рынка и продукта

Анализируйте тексты запусков, слоганы и ветки комментариев, чтобы задавать позиционирование и дорожные карты.

USE / 06Охват

Любой URL, один API

Обходите ленту главной страницы, посты, темы, лидерборды и профили мейкеров, а также любой другой сайт, который вам нужен.

06 Примечания

Что полезно знать при скрапинге Product Hunt.

Отрендерено как в настоящем браузере

Product Hunt загружает запуски, апвоуты и комментарии из GraphQL после отрисовки; Crawling API запускает настоящий браузер, поэтому они все отрисовываются перед захватом.

HTML по умолчанию, JSON по запросу

Вы получаете полный отрендеренный HTML. Добавьте scraper=producthunt-leaderboard или scraper=producthunt-product для распарсенного типизированного JSON или распарсьте HTML самостоятельно.

Только публичные страницы

Crawling API читает публично видимые страницы без входа в систему, поэтому вы получаете то, что видит незалогиненный посетитель.

Обращайтесь к Product Hunt откуда угодно

Геотаргетинг по 30 регионам и 140M резидентных IP означают стабильный доступ без управления прокси.

07 Почему Crawlbase

Создано для обхода Product Hunt в масштабе.

Crawling API работает в той же сети, которая обслуживает более 46,000 платящих клиентов и более 70,000 разработчиков. Никаких прокси для покупки, никаких браузеров для запуска, ничего чинить, когда Product Hunt меняется.

99%
Средний процент успешных запросов
140M
Резидентных IP, плюс 98M датацентровых
30
Регионов для точных локальных результатов
20/s
Запросов в секунду по умолчанию, больше по запросу

Один токен, официальные SDK для Python, Node и Ruby и сеть с аптаймом 99.99% под капотом.

08 FAQ

Вопросы о скрапинге Product Hunt.

Отправьте URL Product Hunt в Crawlbase Crawling API со своим токеном. Crawlbase ротирует резидентный прокси, рендерит страницу в настоящем браузере, снимает проверки на ботов и возвращает полностью отрендеренный HTML. Добавьте scraper=producthunt-leaderboard или scraper=producthunt-product, чтобы вместо этого получить структурированный JSON.
Да. По умолчанию Crawling API возвращает отрендеренный HTML; добавьте scraper=producthunt-leaderboard для ранжированных лидербордов или scraper=producthunt-product для отдельного запуска, чтобы получить типизированный JSON, или распарсьте HTML самостоятельно.
Да. Настоящий браузер исполняет страницу, поэтому отрендеренная через JavaScript лента запусков, счётчики апвоутов и комментарии захватываются, а не только исходный HTML.
Crawlbase направляет каждый запрос через ротирующиеся резидентные IP по 30 регионам и снимает проверки на ботов автоматически. Вы не управляете прокси и не решаете CAPTCHA, и нечего поддерживать, когда Product Hunt меняет свою конфигурацию.
Нет. Crawling API читает только публично видимые страницы, без входа в систему, поэтому вы получаете то, что увидел бы незалогиненный посетитель.
Любой публичный URL: ленту главной страницы, страницы продуктов и постов, страницы тем и лидербордов, а также профили мейкеров. Тот же API работает и с любым другим сайтом.
Начните бесплатно, до 20,000 запросов и без кредитной карты. Платные планы масштабируются с использованием, и тот же токен работает через Crawling API и каждый скрапер Crawlbase.

Начните скрапить Product Hunt.
Пропустите прокси и блокировки.

Бесплатно для старта, до 20,000 запросов. Один токен для Crawling API и каждого скрапера.