ScrapeGraphAI
API для веб-скрейпинга: возвращает страницы в виде markdown, скриншотов или структурированных данных, описанных в промпте.
ScrapeGraphAI — это API для веб-скрейпинга, которое загружает веб-страницы и возвращает их в виде markdown, HTML, скриншотов или структурированных данных, описанных обычным языком в промпте. Работать с ScrapeGraphAI нужно через его эндпоинты scrape, extract, search, crawl и monitor, а каждый запрос оплачивается из баланса кредитов API, который зависит от выбранного тарифа.
Подходит для Разработчики и команды данных, которым нужно получать содержимое сайтов в виде чистого markdown или структурированных полей через API, а не поддерживать собственные скрейперы.
- Платформы
- API, Web
- Модель оплаты
- Freemium
- Бесплатный тариф
- Да
- API
- Да
- Разработчик
- ScrapeGraphAI, Inc.
- Добавлен
Последняя проверка: . Источник информации: scrapegraphai.com.
Что такое ScrapeGraphAI?
ScrapeGraphAI — это API-сервис для сбора данных с сайтов без написания селекторов и без собственных прокси. Его эндпоинты решают разные задачи. Scrape превращает URL в markdown, HTML, скриншот или анализ брендинга. Extract возвращает структурированные поля, которые вы описываете в промпте. Search выполняет поиск в вебе и может извлекать данные из каждого результата. Crawl обходит сайт целиком и обрабатывает каждую страницу, а Monitor следит за страницей и вызывает вебхук, когда её содержимое меняется. Можно обрабатывать и PDF-файлы; они тарифицируются постранично. Использование измеряется в кредитах, а необязательный режим stealth добавляет защиту от антибот-систем за несколько дополнительных кредитов. Тарифы идут от бесплатного уровня с единоразовым начислением кредитов до месячных подписок и индивидуальных условий для предприятий.
Ключевые возможности
Эндпоинт Scrape
Преобразует один URL в markdown, HTML, скриншот или анализ брендинга; стоимость в кредитах зависит от запрошенного формата.
Извлечение по промпту
Возвращает структурированные данные со страницы по описанию на обычном языке, а не по CSS-селекторам.
Поиск и извлечение
Выполняет поиск в вебе и, если передан промпт, в том же вызове извлекает данные из каждого результата.
Обход сайтов
Переходит по ссылкам по всему сайту и применяет выбранный формат скрейпинга к каждой посещённой странице.
Мониторинг изменений
Проверяет страницу за вас и уведомляет вебхук, когда обнаруживает отличия.
Режимы рендеринга и stealth
Предлагает стратегии загрузки auto, fast и JavaScript без дополнительной платы, а также переключатель stealth, который добавляет обход антибот-защиты.
Сценарии использования
- Подача страниц языковым моделям
- Преобразуйте документацию или статьи в markdown, который можно передать LLM.
- Создание структурированных наборов данных
- Опишите нужные поля и собирайте их со многих страниц в едином виде.
- Слежение за обновлениями страниц
- Получайте вебхук, когда отслеживаемая страница меняется, вместо того чтобы опрашивать её самим.
- Индексация всего сайта
- Обойдите все страницы сайта, чтобы загрузить его содержимое в систему поиска или извлечения.
- Чтение PDF-документов
- Отправляйте PDF-файлы через API и платите за каждую обработанную страницу.
Что важно знать
- Стоимость зависит от эндпоинта и формата
- Скрейпинг в markdown стоит 1 кредит, скриншот — 2, анализ брендинга — 25, а извлечение начинается от 5 кредитов за запрос.
- Stealth оплачивается отдельно
- Выбор режима рендеринга бесплатен, но включение опции stealth добавляет к запросу 5 кредитов.
- Лимиты растут вместе с тарифом
- Число запросов в минуту, количество мониторов и параллельных обходов различаются на бесплатном уровне и на тарифах Starter, Growth и Pro.
- PDF оплачиваются постранично
- Обработка PDF стоит 1 кредит за каждую обработанную страницу, при этом по умолчанию при резервировании действует предел в 25 страниц.
Вопросы и ответы
Что такое ScrapeGraphAI?
ScrapeGraphAI — это API для веб-скрейпинга, которое возвращает содержимое сайтов в виде markdown, HTML, скриншотов или структурированных данных, заданных промптом.
Для чего используется ScrapeGraphAI?
ScrapeGraphAI используют, чтобы из кода приложения скрейпить отдельные страницы, извлекать структурированные поля, искать в вебе, обходить сайты целиком и отслеживать изменения страниц.
ScrapeGraphAI бесплатный?
У ScrapeGraphAI есть бесплатный тариф, который включает 500 кредитов API, начисляемых один раз, и более низкие лимиты запросов, чем на платных уровнях. Большие ежемесячные пакеты кредитов требуют подписки.
Сколько стоит ScrapeGraphAI?
ScrapeGraphAI продаёт подписки Starter, Growth и Pro, индивидуальный вариант Enterprise и разовые пакеты кредитов. Актуальные цены смотрите на официальной странице с ценами.
Как работают кредиты ScrapeGraphAI?
ScrapeGraphAI списывает кредиты за каждый запрос в зависимости от эндпоинта и формата результата: например, скрейпинг в markdown стоит 1 кредит, а извлечение по промпту — 5. Включение stealth добавляет 5 кредитов.
Сгорают ли докупленные кредиты ScrapeGraphAI?
Нет. ScrapeGraphAI заявляет, что купленные пакеты кредитов не сгорают и добавляются к ежемесячному объёму по подписке.
Кому подойдёт
- Разработчики
- Инженеры данных
- Создатели ИИ-приложений
- Стартапы
- Команды данных
Комментарии
Комментариев пока нет. Если вы пользовались ScrapeGraphAI, расскажите другим читателям, как всё прошло.
Аналоги ScrapeGraphAI
| Инструмент | Бесплатный тариф | Начальная цена | API |
|---|---|---|---|
 Context.devAPI для веб-скрейпинга для ИИ-агентов: возвращает страницы в виде Markdown, HTML, скриншотов или структурированных данных, с обходом сайтов и мониторингом. |
Да | — | Да |
 CrawlbaseИнфраструктура для веб-краулинга и скрейпинга: API для краулинга, ротируемые прокси, готовые скрейперы и MCP-сервер. |
Да | — | Да |
 FirecrawlAPI для веб-данных: ищет, собирает, обходит сайты и взаимодействует с ними, а затем возвращает чистый результат для ИИ-приложений. |
Да | 16 $/мес | Да |
 OxylabsИнфраструктура веб-данных: API для поиска и скрейпинга для ИИ-агентов, прокси-сети, браузер и наборы данных. |
— | 30 $/мес | Да |
 Axiom.aiИнструмент для автоматизации браузера и веб-скрапинга: расширение для Chrome без кода, API для разработчиков и MCP-сервер. |
— | — | Да |
Из тех же категорий, что и ScrapeGraphAI. Начальная цена указана, только если мы проверили её на странице цен разработчика; прочерк означает, что цена не проверена или не опубликована. Все инструменты в категории «Веб-скрапинг и извлечение данных»