Никита АлимпиевNikAlimp

Diffbot или ScraperAPI: что выбрать

Diffbot и ScraperAPI — сервисы одной категории «Парсинг и сбор данных». Diffbot — data-командам, которым нужны структурированные данные с множества разных сайтов и граф знаний о компаниях. ScraperAPI — разработчикам, которые парсят защищённые зарубежные сайты и не хотят возиться с прокси.

DiffbotScraperAPI
ЦенаБесплатный план с ограниченным числом кредитов в месяцПодписка по кредитам: Hobby — $49 в месяц за 100 000 кредитов, Startup —…
Бесплатный планестьпробный период
Работа из РоссииВ России: нужна зарубежная картаВ России: нужна зарубежная карта
Русский языкнетнет
ПлатформыВеб, APIВеб, API
ИтогМощный автоматический парсинг и граф знаний, но дорогой и только для зарубежной карты.Простой API для скрапинга с прокси и обходом блокировок, но недешёвый при больших объёмах.
Diffbot

Diffbot — это сервис, который с помощью машинного обучения превращает веб-страницы в структурированные данные: статьи, товары, обсуждения, организации и людей. Кроме API парсинга, у него есть собственный граф…

Кому подходит: Data-командам, которым нужны структурированные данные с множества разных сайтов и граф знаний о компаниях.

Кому не подходит: Фрилансерам и небольшим проектам с разовым парсингом одного сайта.

Плюсы

  • Извлечение данных без написания селекторов
  • Собственный граф знаний о компаниях и людях
  • Обход целых сайтов через Crawlbot
  • Бесплатный план для тестов

Минусы

  • Высокая цена платных тарифов
  • На нестандартной вёрстке автоматика ошибается
  • Не принимает российские карты

Тарифы

ТарифЦенаЧто входит
FreeбесплатноОграниченное число кредитов в месяц
Платные тарифыот нескольких сотен $ в месяцБольше кредитов, Crawlbot, Knowledge Graph
Enterpriseпо запросуКрупные объёмы и выделенная поддержка
diffbot.com
ScraperAPI

ScraperAPI — API для веб-скрапинга: вы отправляете адрес страницы, а сервис возвращает её HTML, сам подбирая прокси, обходя капчи и блокировки.

Кому подходит: Разработчикам, которые парсят защищённые зарубежные сайты и не хотят возиться с прокси.

Кому не подходит: Тем, кто парсит в основном российские сайты или работает без программиста.

Плюсы

  • Прокси, капчи и повторы запросов на стороне сервиса
  • Рендеринг JavaScript
  • Готовые JSON-ответы для популярных площадок
  • Пробный период без карты

Минусы

  • Защищённые сайты быстро съедают кредиты
  • Геотаргетинг ограничен на младших тарифах
  • Оплата только зарубежной картой

Тарифы

ТарифЦенаЧто входит
Пробный$0 на 7 дней5000 кредитов, без карты
Hobby$49 в месяц100 000 кредитов, 20 потоков
Startup$149 в месяц1 млн кредитов, 50 потоков
Business$299 в месяц3 млн кредитов, 100 потоков
Enterpriseпо запросуОт 22 млн кредитов
scraperapi.com

Подробно — на страницах Diffbot и ScraperAPI.

Веб-сервис

Личный кабинет, админка или MVP под ключ

Next.js и Supabase, спецификация до старта и фиксированная цена. MVP — от 4 недель, клиентская часть — от 300 000 ₽.

Или написать в Telegram

Удобнее голосом? Запишитесь на 30 минут в Zoom — разберём задачу и решим, с чего начать.