Quora Question · Документация Crawlbase

Использование API

Добавьте &scraper=quora-question к запросу Crawling API. URL-кодируйте целевой URL в параметре url.

curl 'https://api.crawlbase.com/?token=YOUR_TOKEN' \
  --data-urlencode 'url=https://www.quora.com/Which-is-the-best-tool-for-scraping-customer-reviews' \
  --data-urlencode 'scraper=quora-question' -G
from crawlbase import CrawlingAPI

api = CrawlingAPI({'token': 'YOUR_TOKEN'})
res = api.get(
    'https://www.quora.com/Which-is-the-best-tool-for-scraping-customer-reviews',
    {'scraper': 'quora-question'}
)

import json
data = json.loads(res['body'])
const { CrawlingAPI } = require('crawlbase');
const api = new CrawlingAPI({ token: 'YOUR_TOKEN' });

const res = await api.get(
  'https://www.quora.com/Which-is-the-best-tool-for-scraping-customer-reviews',
  { scraper: 'quora-question' }
);
const data = JSON.parse(res.body);
require 'crawlbase'
api = Crawlbase::API.new(token: 'YOUR_TOKEN')

res = api.get('https://www.quora.com/Which-is-the-best-tool-for-scraping-customer-reviews', scraper: 'quora-question')
data = JSON.parse(res.body)

Пример входного URL

URL, передаваемый в параметре url (URL-декодирован для читаемости):

https://www.quora.com/Which-is-the-best-tool-for-scraping-customer-reviews

Структура ответа

Тело JSON-ответа. Типы полей могут быть null, когда исходная страница не содержит значения.

question_title

string

Заголовок вопроса.

question_details

string | null

Дополнительные сведения о вопросе.

Пример ответа

{
  "question_title": "Which is the best tool for scraping customer reviews?",
  "answer_count": 14,
  "follower_count": 42,
  "answers": [
    {
      "author_name": "John Smith",
      "author_credentials": "Data Engineer",
      "upvotes": 218
    }
  ]
}