Crawlbase Cloud Storage, это безопасное, масштабируемое решение для хранения данных, собранных через сервисы Crawlbase. Вместо управления собственными серверами или базами данных вы можете сохранять все краулированные HTML, JSON или другие извлечённые данные прямо в облаке Crawlbase. Это обеспечивает удобный доступ, организацию и интеграцию с вашими рабочими процессами.
Да! Crawlbase предлагает бесплатный тариф, который позволяет сохранять до 10 000 документов, где 1 документ равен 1 успешному запросу. Срок хранения для бесплатного хранилища составляет 30 дней. Если вам нужно больше ёмкости и более длительный срок хранения, вы можете выполнить апгрейд в любое время.
Чтобы сохранить ваши данные, просто добавьте параметр &store=true к вашему запросу Crawling API или используйте Cloud Storage в качестве вебхука для вашего Crawler.
Вы можете получить доступ к сохранённым данным двумя способами:
Our team answers scraping and infrastructure questions every day. Reach out and we will help you find the right setup.
Try it free. No credit card required. Instant setup.