Crawling API / OLXOLX Scraper.
OLX Scraper.
Списки и объявления в виде JSON.
Два специализированных скрапера превращают любую страницу поиска, категории или объявления OLX в чистый типизированный JSON через резидентные прокси со встроенным обходом анти-бот систем.
olx-serp ранжирует списки, olx-item возвращает объявление целиком.
Живой поток обхода · OLX1.24M req/minСтриминг
200www.olx.in/mumbaiGB120ms
200www.olx.com.br/item/apartamento-2-quartos-iid-552043871SG164ms
301www.olx.pl/d/oferta/rower-gorski-trek-iid-7741209.htmlDE60ms
200www.olx.in/mumbaiGB150ms
200www.olx.in/items/q-iphone-13AU161ms
200www.olx.in/real-estate_c84AU139ms
200www.olx.com.pk/mobile-phones_c1453AU175ms
301www.olx.com.br/items/q-notebook-dellBR202ms
200www.olx.in/mumbaiJP143ms
200www.olx.com.pk/lahoreCA61ms
200www.olx.in/electronicsFR193ms
200www.olx.com.br/item/apartamento-2-quartos-iid-552043871SG80ms
200www.olx.in/items/q-royal-enfieldES90ms
200www.olx.com.br/sao-paulo-e-regiaoDE130ms
200www.olx.in/item/honda-civic-2020-iid-1234567890CA154ms
200www.olx.in/mumbaiNL56ms
200www.olx.com.pk/lahoreDE176ms
200www.olx.in/cars_c84JP100ms
200www.olx.in/cars_c84FR146ms
301www.olx.in/mumbaiIN184ms
200www.olx.com.pk/item/toyota-corolla-2019-iid-998877665SG98ms
200www.olx.in/mumbaiAU171ms
200www.olx.in/item/honda-civic-2020-iid-1234567890US205ms
200www.olx.in/mumbaiES128ms
200www.olx.in/electronicsFR208ms
200www.olx.pl/elektronikaDE217ms
200www.olx.in/mumbaiGB120ms
200www.olx.com.br/item/apartamento-2-quartos-iid-552043871SG164ms
301www.olx.pl/d/oferta/rower-gorski-trek-iid-7741209.htmlDE60ms
200www.olx.in/mumbaiGB150ms
200www.olx.in/items/q-iphone-13AU161ms
200www.olx.in/real-estate_c84AU139ms
200www.olx.com.pk/mobile-phones_c1453AU175ms
301www.olx.com.br/items/q-notebook-dellBR202ms
200www.olx.in/mumbaiJP143ms
200www.olx.com.pk/lahoreCA61ms
200www.olx.in/electronicsFR193ms
200www.olx.com.br/item/apartamento-2-quartos-iid-552043871SG80ms
200www.olx.in/items/q-royal-enfieldES90ms
200www.olx.com.br/sao-paulo-e-regiaoDE130ms
200www.olx.in/item/honda-civic-2020-iid-1234567890CA154ms
200www.olx.in/mumbaiNL56ms
200www.olx.com.pk/lahoreDE176ms
200www.olx.in/cars_c84JP100ms
200www.olx.in/cars_c84FR146ms
301www.olx.in/mumbaiIN184ms
200www.olx.com.pk/item/toyota-corolla-2019-iid-998877665SG98ms
200www.olx.in/mumbaiAU171ms
200www.olx.in/item/honda-civic-2020-iid-1234567890US205ms
200www.olx.in/mumbaiES128ms
200www.olx.in/electronicsFR208ms
200www.olx.pl/elektronikaDE217ms
01 Живое демо
На входе любой URL OLX. На выходе структурированный JSON.
Два специализированных скрапера, набираемых вживую. olx-serp ранжирует страницу поиска или категории; olx-item возвращает одно объявление целиком. Наведите курсор, чтобы поставить на паузу и прочитать.
Запустите свой первый запрос за считанные минуты. До 20,000 бесплатных запросов, без банковской карты.Начать бесплатно
02 Возможности
Всё, что OLX подкидывает скраперу, обработано.
OLX рендерит списки, цены и данные продавцов с помощью JavaScript, ограничивает доступ к страницам по геолокации и защищает их детекцией ботов. Специализированные скраперы рендерят каждую страницу в реальном браузере, обращаются к ней через резидентные IP и разбирают её в типизированный JSON.
рендеринг
Полный рендеринг JavaScript
Реальный браузер выполняет страницу, поэтому отрендеренные через JavaScript цены, данные продавцов и лениво загружаемые изображения разбираются полностью, а не только исходный HTML.
прокси
140M резидентных IP
Каждый запрос меняет резидентный IP по 30 регионам, поэтому вы обращаетесь к каждому рынку OLX как настоящий местный посетитель.
анти-бот
Блокировки решаем за вас
CAPTCHA, бот-стены и ограничения частоты запросов на страницах поиска и объявлений устраняются автоматически. Ничего решать, ничего поддерживать.
два скрапера
olx-serp и olx-item
Добавьте scraper=olx-serp для ранжированных списков поиска и категорий, или scraper=olx-item для одного объявления целиком. Оба возвращают типизированный JSON.
масштаб
Страницы, скриншоты, асинхронность
Пролистывайте длинные списки результатов, делайте скриншот всей страницы или выполняйте асинхронно с вебхуками и облачным хранилищем.
один токен
Один API для любого сайта
Один и тот же токен запускает olx-serp, olx-item и любой другой скрапер Crawlbase, плюс сырой Crawling API на любом URL. Смотреть живое демо.
03 Вывод
Типизированный JSON, готовый к хранению.
olx-item возвращает одно объявление как структурированную запись: заголовок, цену, атрибуты, местоположение, продавца и фотографии. Добавьте scraper=olx-serp для ранжированного потока поиска и категорий.
{
"title": "BMW 320d F30 2016 xDrive - pełen serwis",
"adId": 915581849,
"price": { "displayValue": "45 900 zł", "negotiable": true },
"params": [ { "key": "fuel", "value": "Diesel" }, "..." ],
"location": { "city": "Warszawa", "region": "Mazowieckie" },
"seller": { "name": "Auto Komis Premium", "type": "business" },
"photos": [ "..." ]
}
Объявление
title · string adId · number price.displayValue · string price.negotiable · bool
Атрибуты
params[].key · string params[].value · string
Местоположение
location.city · string location.region · string
Продавец
seller.name · string seller.type · string
Медиа
photos · array
04 Как это работает
От URL к структурированным данным за один вызов.
Каждый запрос к OLX проходит один и тот же путь. Вы отправляете URL и имя скрапера, мы обеспечиваем всё, что между.
01
Отправьте URL
Передайте любой публичный URL OLX со своим токеном и скрапером: olx-serp для поиска или категории, olx-item для одного объявления.
02
Ротация прокси
Резидентный IP и геолокация, которые чисто достигают нужного рынка OLX, выбираются из 140M IP по 30 регионам.
03
Рендеринг страницы
Реальный браузер загружает страницу, поэтому отрендеренные через JavaScript цены, данные продавцов и лениво загружаемые изображения присутствуют до разбора.
04
Обход анти-бот систем
Бот-проверки OLX и ограничения частоты на страницах поиска и объявлений обрабатываются автоматически. Ничего решать, ничего поддерживать.
05
Возврат типизированного JSON
Скрапер разбирает страницу и возвращает структурированный JSON: ранжированные элементы от olx-serp или полную запись объявления от olx-item.
05 Сценарии использования
Что команды строят на данных OLX.
USE / 01Маркетплейс
Агрегация маркетплейсов
Собирайте списки по категориям, городам и рынкам OLX в один нормализованный JSON-поток.
USE / 02Цены
Мониторинг цен
Отслеживайте запрашиваемые цены на автомобили, электронику и недвижимость во времени, чтобы выявлять тренды и аномалии.
USE / 03Исследования
Исследование объявлений
Анализируйте заголовки, атрибуты и типы продавцов, чтобы оценить предложение, спрос и охват категорий.
USE / 04Лиды
Генерация лидов
Собирайте данные продавцов и дилеров из публичных объявлений, чтобы формировать списки для поиска клиентов.
USE / 05Гео
Охват нескольких рынков
Обращайтесь к olx.pl, olx.ua, olx.pt, olx.ro, olx.bg, olx.kz и olx.uz из соответствующих регионов для точных локальных результатов.
USE / 06Охват
Любой URL, один API
Скрапьте страницы поиска, категорий и объявлений, а также любой другой сайт через один и тот же токен.
06 Заметки
Полезно знать при скрапинге OLX.
Специализированные парсеры
olx-serp и olx-item разбирают предварительно отрисованное состояние страницы, поэтому цены, атрибуты и данные продавцов возвращаются типизированными полями, а не сырым HTML.
Два скрапера, один токен
Используйте scraper=olx-serp для списков поиска и категорий и scraper=olx-item для одного объявления. Оба работают на одном и том же токене Crawling API.
Охват рынков OLX
Скраперы работают на рынках платформы OLX - olx.pl, olx.ua, olx.pt, olx.ro, olx.bg, olx.kz и olx.uz - с геотаргетингом для локальных результатов.
Страницы поиска и объявлений обработаны
Детекция ботов на страницах поиска и объявлений устраняется автоматически по 30 регионам и 140M резидентным IP, без прокси, которыми нужно управлять.
07 Почему Crawlbase
Создан для скрапинга OLX в масштабе.
Специализированные скраперы работают в той же сети, что обслуживает 46,000+ платящих клиентов и 70,000+ разработчиков. Не нужно покупать прокси, запускать браузеры или что-либо чинить, когда OLX меняется.
99%
Средняя доля успешных запросов
140M
Резидентных IP, плюс 98M датацентровых
30
Регионов для точных локальных результатов
20/s
Запросов в секунду по умолчанию, больше по запросу
Один токен, официальные SDK для Python, Node и Ruby, а в основе сеть с аптаймом 99.99%.
08 FAQ
Вопросы о скрапинге OLX.
Отправьте URL OLX в Crawlbase Crawling API со своим токеном и скрапером. Используйте scraper=olx-serp для страницы поиска или категории и scraper=olx-item для одного объявления. Crawlbase меняет резидентный прокси, рендерит страницу, устраняет бот-проверки и возвращает структурированный JSON.
olx-serp разбирает страницу поиска или категории в ранжированный список элементов с заголовком, ценой, местоположением и флагами продвижения, плюс итоги для пагинации. olx-item разбирает одно объявление в полную запись: заголовок, описание, цену, атрибуты, местоположение, продавца и фотографии.
Да. Реальный браузер выполняет страницу, поэтому отрендеренные через JavaScript цены, данные продавцов и лениво загружаемые изображения разбираются, а не только исходный HTML.
Скраперы работают на рынках платформы OLX, включая olx.pl, olx.ua, olx.pt, olx.ro, olx.bg, olx.kz и olx.uz. Геотаргетинг достигает каждого из соответствующего региона, и один и тот же токен работает на каждом рынке.
Crawlbase направляет каждый запрос через ротируемые резидентные IP по 30 регионам и автоматически устраняет бот-проверки на страницах поиска и объявлений. Вам не нужно управлять прокси или решать CAPTCHA, и нечего поддерживать, когда OLX меняет свою конфигурацию.
Результаты поиска, списки категорий и городов через olx-serp, и любое отдельное объявление через olx-item. Сырой Crawling API работает и с любым другим URL.
Начните бесплатно, до 20,000 запросов и без банковской карты. Платные тарифы масштабируются с использованием, и один и тот же токен работает в Crawling API и с каждым скрапером Crawlbase.
Начните скрапить OLX.
Забудьте про прокси и блокировки.
Бесплатный старт, до 20,000 запросов. Один токен для olx-serp, olx-item и каждого скрапера.