# Сборщики данных
При истории Crawling API вы получите обратно полную HTML-страницу, но если вы хотите получить обратно скопированные критерии, вы можете использовать любые из доступных скребков, которые у нас есть. Для отсутствия скребков вам придется получить обратно полный HTML и скопировать критерии самостоятельно.
Наши доступные скраперы позволяют вам получать данные непосредственно с веб-сайта без необходимости создания HTML-парсеров при использовании наших. Crawling API.
Скребки необязательны., и вы всегда можете получить полный HTML-код страницы, если используете API без какого-либо скрапера.
Начать, выберите скребок на задней панели для получения данных. Пожалуйста обратитесь в службу поддержки, Если у вас есть вопросы или вам нужна помощь.
# Amazon
Чтобы использовать скраперы Amazon, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Получите цену, название, наличие, описание, изображение, обзоры и предложения, а также много другой информации для любого товара на Amazon.
Получите структурированную поисковую выдачу и отформатированные результаты поиска бестселлеров с Amazon.
# amazon-product-details
Скрейпер для получения информации о странице продукта Amazon
Использование API:
&scraper=amazon-product-details
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.amazon.com/Apple-iPhone-Silicone-Case-MagSafe/dp/B0CHX2XFLN
Пример вывода:
# amazon-serp
Скрейпер для страниц поиска результатов Amazon, возвращает массив продуктов
Использование API:
&scraper=amazon-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.amazon.com/s?k=games
Пример вывода:
# amazon-offer-listing
Скрейпер для сбора информации о страницах предложений Amazon.
Использование API:
&scraper=amazon-offer-listing
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.amazon.com/gp/offer-listing/B01KJEOCDW
Пример вывода:
# amazon-product-reviews
Примечание:
Обзоры продуктов Amazon Скребок в настоящее время недоступен из-за изменений, внесенных Amazon. Мы работаем над этой проблемой, но пока не знаем, когда она появится.
Скрейпер для получения сведений о страницах с обзорами товаров Amazon.
Использование API:
&scraper=amazon-product-reviews
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.amazon.com/hz/reviews-render/ajax/medley-filtered-reviews/get/ref=cm_cr_dp_d_fltrs_srt?scope=reviewsAjax0&asin=B08PN7R2MZ&pageNumber=10
Пример вывода:
# Amazon-бестселлеры
Скрейпер для страницы результатов «Лучшие продавцы Amazon» возвращает массив товаров.
Использование API:
&scraper=amazon-best-sellers
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.amazon.com/Best-Sellers-Electronics/zgbs/electronics
Пример вывода:
# amazon-новые-релизы
Скрейпер для страниц новых релизов Amazon возвращает массив продуктов.
Использование API:
&scraper=amazon-new-releases
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.amazon.com/new-releases/handmade
Пример вывода:
Чтобы использовать Google-скрейперы, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
- Получите структурированные результаты поиска от Google, включая основные разделы (реклама, похожие результаты поиска, люди также спрашивают, упаковка закусок).
# google-serp
Скрейпер для страницы результатов поиска Google, массив возвращает результаты
Использование API:
&scraper=google-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.google.com/search?q=samsung+social+accounts
Пример вывода:
# google-product-offers
Скрейпер для страниц предложений товаров Google Shopping, верните полученные предложения с ценами, рейтингами и информацией о продавце для определения URL-адреса цвета.
Использование API:
&scraper=google-product-offers
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.google.com/shopping/product/7015446445080090940/offers
Пример вывода:
Совет
Следующие скрипты Facebook могут лучше работать с вашим токеном JavaScript (JS). Если вы внезапно пустой ответ с вашим токеном TCP, пожалуйста, переключитесь на использование токена JS.
Чтобы использовать скраперы Facebook, вскормите API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Извлеките названия публичной группы, описания, изображения, ленты и соответствующие комментарии, а также другие сведения со страниц группы Facebook.
Получите структурированные и отформатированные данные страницы Facebook.
Извлеките имя профиля, профиль изображения и обложки, работу и образование, количество друзей и другие профили с похожими именами.
# facebook-группа
Скрейпер для сбора данных о странице группы Facebook
Использование API:
&scraper=facebook-group
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.facebook.com/groups/198722650913932
Пример вывода:
# facebook-страница
Скрейпер для общих данных страницы Facebook
Использование API:
&scraper=facebook-page
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.facebook.com/Amazon/
Пример вывода:
# facebook-профиль
Скрейпер для общего профиля Facebook
Использование API:
&scraper=facebook-profile
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.facebook.com/zuck
Пример вывода:
# facebook-хэштег
Скребок для хэштега Facebook
Использование API:
&scraper=facebook-hashtag
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.facebook.com/hashtag/robots
Пример вывода:
# facebook-событие
Скребок для мероприятия Facebook
Использование API:
&scraper=facebook-event
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.facebook.com/events/1543404119289643
Пример вывода:
Совет
Следующие скрипты Instagram могут лучше работать с вашим токеном JavaScript (JS). Если вы внезапно пустой ответ с вашим токеном TCP, пожалуйста, переключитесь на использование токена JS.
Чтобы использовать Instagram-скрейперы, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Получайте данные о публикациях и профилях, медиафайлах, хэштегах, мобильной сети, состоянии и ответах из публикаций в Instagram.
Извлекайте информацию о публикациях на страницах хэштегов.
# instagram-reel
Скребок для сбора данных о роликах Instagram
Использование API:
&scraper=instagram-reel
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.instagram.com/reels/DHq4bFpID1_/
Пример вывода:
# instagram-пост
Скрейпер для обнаружения сведений о постах в Instagram
Использование API:
&scraper=instagram-post
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.instagram.com/p/B5LQhLiFFCX
Пример вывода:
# instagram-профиль
Скрейпер для базы данных профиля Instagram
Использование API:
&scraper=instagram-profile
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.instagram.com/apple/
Пример вывода:
# instagram-хэштег
Примечание:
Instagram-хэштег В настоящее время скребок недоступен из-за изменений в Instagram. Мы работаем над исправлением, но на данный момент у нас нет точного времени.
Скрейпер для общих страниц хэштегов Instagram
Использование API:
&scraper=instagram-hashtag
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.instagram.com/explore/tags/love/
Пример вывода:
# instagram-reels-аудио
Собранные данные для роликов Instagram по упрощенному URL-адресу аудио
Использование API:
&scraper=instagram-reels-audio
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.instagram.com/reels/audio/430642407673774
Пример вывода:
# TikTok
Чтобы использовать скребки TikTok, вскормите API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
- Извлекайте комплексные данные о продуктах TikTok Shop, включая цены, варианты, показатели продавцов, отзывы покупателей и соответствующие видеоролики авторов.
# тикток-продукт
Скрейпер для получения информации о странице продукта TikTok
Использование API:
&scraper=tiktok-product
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.tiktok.com/view/product/1729493620818874839
Пример вывода:
# тикток-магазин
Скрейпер для определения данных страницы магазина TikTok
Использование API:
&scraper=tiktok-shop
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.tiktok.com/shop/store/medcursor/7495198098029185725
Пример вывода:
# тикток-профиль
Скрейпер для получения данных страницы профиля TikTok
Использование API:
&scraper=tiktok-profile
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.tiktok.com/@loveyourboka
Пример вывода:
# Шеин (Шеин)
Чтобы использовать скребки Шеина, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
- Извлеките информацию о продукте Шеин, включая название, цену, изображения, отзывы, рейтинги, информацию о доставке и магазине данных.
# стрессин-продукт
Скребок для получения общей информации о продукте Шеин
Использование API:
&scraper=shein-product
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://us.shein.com/Baby-Stroller-With-A-Stroage-Bag-Newborn-Stroller-Without-Latch-Base-Multi-Functional-Toddler-Stroller-Thick-Cotton-Seat-Cushion-Suitable-For-Travel-With-Four-Wheel-Baby-Stroller-p-68951130.html
Пример вывода:
Чтобы использовать скраперы LinkedIn, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Извлеките из профиля информацию об опыте, образовании, деятельности, публикациях, волонтерстве и всех остальных разделах профиля из LinkedIn.
Получите описание компании, основные данные о сотрудниках, местонахождении и многие другие сведения из LinkedIn.
# linkedin-профиль
Скрейпер для базы данных профиля LinkedIn
Использование API:
&scraper=linkedin-profile
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.linkedin.com/in/kaitlyn-owen
Пример вывода:
# linkedin-компания
Скрейпер для определения сведений о компании LinkedIn
Использование API:
&scraper=linkedin-company
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.linkedin.com/company/amazon
Пример вывода:
# linkedin-канал
Скрейпер для общей ленты LinkedIn, преобразующий таблицу в данные JSON, что позволяет проводить эффективный анализ и принимать решения на основе данных.
Использование API:
&scraper=linkedin-feed
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.linkedin.com/feed/update/urn:li:activity:7022155503770251267
Пример вывода:
# Quora
Чтобы использовать скребки Quora, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Получите отформатированные результаты поиска вопросов из Quora.
Извлекайте информацию о происходящем, включая рекламу, вики, теги, ответы и сопутствующие вопросы из Quora.
# quora-serp
Примечание:
Quora-serp В настоящее время парсер недоступен из-за изменений со стороны Quora. Мы работаем над исправлением, но на данный момент у нас нет точного времени выхода.
Совет
Чтобы получить дополнительные данные с помощью этого скребка, введите параметр &css_click_selector=.q-text.qu-cursor--pointer. Это позволит вам максимально эффективно использовать данные.
Скрейпер для страниц поиска результатов Quora, возвращает массив вопросов
Использование API:
&scraper=quora-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.quora.com/search?q=websitevoice
Пример вывода:
# quora-вопрос
Скрейпер для обнаружения обнаружений Quora вместе со всеми ответами
Использование API:
&scraper=quora-question
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.quora.com/Which-is-the-best-tool-for-scraping-customer-reviews
Пример вывода:
# Airbnb
Чтобы использовать скриншоты Airbnb, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Получите отформатированные результаты поиска на Airbnb.
Получите список жителей Airbnb с указанием названия, местоположения, размещения, удобств, рейтинга, стоимости и т. д. д.
# airbnb-serp
Скрейпер для страницы результатов поиска Airbnb, возвращает массив города
Использование API:
&scraper=airbnb-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.airbnb.com/s/Beirut/homes
Пример вывода:
# Ebay
Совет
Некоторые элементы данных на Ebay загружаются в iframe или требуют выполнения JavaScript. Для оптимальных результатов мы рекомендуем использовать токен JavaScript (JS). Если вы сталкиваетесь с неполными данными с токеном TCP, переключение на токен JS обеспечит полное извлечение данных.
Чтобы использовать скребки Ebay, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Получите цену, название, наличие, описание, изображение, сводку по доставке и многое другое для любого товара на Ebay.
Получите структурированную поисковую выдачу с Ebay.
# ebay-serp
Скрейпер для страницы результатов поиска Ebay, возвращает массив продуктов
Использование API:
&scraper=ebay-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.ebay.com/sch/i.html?_nkw=iphone+x
Пример вывода:
# ebay-продукт
Скребок для получения информации о странице продукта на Ebay
Использование API:
&scraper=ebay-product
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.ebay.com/itm/156078647276
Пример вывода:
# ebay-продавец-магазин
Скребок для просмотра деталей страницы магазина на eBay
Использование API:
&scraper=ebay-seller-shop
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.ebay.com/str/watcheshalfprice
Пример вывода:
# AliExpress
Совет
Следующие скребки AliExpress могут лучше работать с вашим токеном JavaScript (JS). Если вы внезапно пустой ответ с вашим токеном TCP, пожалуйста, переключитесь на использование токена JS.
Чтобы использовать скребки AliExpress, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Получите цену, название, наличие, описание, изображение, отзывы, сведения о доставке и многие другие сведения о любом товаре AliExpress.
Получите структурированную поисковую выдачу от AliExpress.
# aliexpress-продукт
Скребок для деталей страницы товара AliExpress
Использование API:
&scraper=aliexpress-product
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.aliexpress.com/item/1005008227636051.html
Пример вывода:
# aliexpress-serp
Скрейпер для страницы результатов поиска AliExpress, массив возвращает товар
Использование API:
&scraper=aliexpress-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.aliexpress.com/wholesale?SearchText=water+bottle
Пример вывода:
# Bing
Чтобы использовать скраперы Bing, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
- Получите структурированные результаты поиска из Bing, включая ссылки на видео и соответствующие ссылки на результаты поиска.
# бинг-серп
Скрейпер для страницы поиска результатов Bing, возвращает массив результатов
Использование API:
&scraper=bing-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.bing.com/search?q=iphone
Пример вывода:
# Иммобилиенскаут24
Чтобы использовать скраперы Immobilienscout24, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
- Получите структурированную информацию о недвижимости от Immobilienscout24.
# immobilienscout24-недвижимость
Скрейпер для получения информации на странице недвижимости immobilienscout24.
Использование API:
&scraper=immobilienscout24-property
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.immobilienscout24.de/expose/158649507
Пример вывода:
# Walmart
Чтобы использовать скребки Walmart, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Получите цену, название, описание, изображения, обзоры и рейтинги, а также много другой информации для любого продукта Walmart.
Получите отформатированные результаты поиска по страницам результатов поиска Walmart.
Получите сформированные данные по категориям категорий Walmart.
# walmart-serp
Скрейпер для страницы результатов поиска Walmart.
Использование API:
&scraper=walmart-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.walmart.com/search?q=samsung+galaxy
Пример вывода:
# walmart-product-details
Скребок для деталей страницы товара Walmart
Использование API:
&scraper=walmart-product-details
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.walmart.com/ip/Meta-Quest-3-512GB-Breakthrough-Mixed-Reality-Powerful-Performance-Asgard-s-Wrath-2/3551794083
Пример вывода:
# walmart-категория
Скрейпер для страниц категорий Walmart.
Использование API:
&scraper=walmart-category
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.walmart.com/browse/home/dorm-decor/4044_1225301_1225229_7471338
Пример вывода:
# BestBuy
Чтобы использовать скребки BestBuy, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
Получите отформатированные результаты поиска со страницы результатов поиска BestBuy.
Получите цену, название, описание, изображения, обзоры и рейтинги, а также много другой информации для любого продукта BestBuy.
# bestbuy-серп
Скрейпер для страницы результатов поиска BestBuy.
Использование API:
&scraper=bestbuy-serp
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.bestbuy.com/site/searchpage.jsp?st=gaming+chair
Пример вывода:
# bestbuy-product-details
Скребок для получения подробной информации о странице продукта BestBuy
Использование API:
&scraper=bestbuy-product-details
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.bestbuy.com/site/meta-quest-3-512gb-the-most-powerful-quest-ultimate-mixed-reality-experiences-get-batman-arkham-shadow-white/6596938.p
Пример вывода:
# G2
Для использования скребков G2 викор API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
- Получите название, описание, рейтинги, изображения, обзоры и видеообзоры, а также много другой информации для любого продукта G2.
# g2-product-reviews
Скребок для страниц обзоров продукции G2.
Использование API:
&scraper=g2-product-reviews
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.g2.com/products/zoom/reviews
Пример вывода:
# Eventbrite
Чтобы использовать скребки Eventbrite, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
- Извлеките список событий или подробную информацию о событии, включая название события, изображение, цену, скидку, описание, дату/время, организатора, слоты и многое другое.
# eventbrite-события-список
Скрейпер для поиска результатов событий Eventbrite.
Использование API:
&scraper=eventbrite-events-list
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.eventbrite.com/d/ny--new-york/ai/
Пример вывода:
# eventbrite-событие-подробности
Скрейпер для страницы с подробностями событий Eventbrite.
Использование API:
&scraper=eventbrite-event-details
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://www.eventbrite.com/e/marketing-essentials-1-day-training-in-new-york-city-ny-tickets-814175078577
П��имерный результат:
# Общий
Чтобы использовать универсальные скребки, воспользуйтесь API как вы это делали по расписанию и по спискам &scraper= параметр для получения HTML, проанализированный в формате JSON.
- Общий сбор ссылок, изображений, электронных писем и другого контента с любых страниц веб-сайта.
# универсальный экстрактор
Универсальный скрапер для извлечения контента с любой страницы веб-сайта.
Использование API:
&scraper=generic-extractor
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://stackoverflow.com/
Пример вывода:
# email-экстрактор
Универсальный инструмент для получения адресов электронной почты с любой страницы веб-сайта.
Использование API:
&scraper=email-extractor
Пример входного URL-адреса (убедитесь, что URL-адрес закодирован):
https://letsencrypt.org/contact/
Пример вывода: