Pусский
ВойтиТестовый Период
Продукты

Webpage

Превратите публичные веб-страницы в готовый контент с Webpage

Получайте читаемый контент страниц и, при необходимости, Markdown через простой API — без отдельной логики очистки для каждого сайта.

Для поддерживаемых публичных веб-страниц. Результат зависит от структуры страницы и настроек.

Webpage content extraction

Веб-контент, готовый к работе

Webpage извлекает и структурирует контент поддерживаемых публичных страниц, чтобы его было проще использовать в сборе данных, исследованиях, мониторинге и AI-приложениях.

Извлечение читаемого контента

Получайте полезный контент страниц в более чистом и удобном формате.

Markdown по желанию

Включайте Markdown, когда нужен читаемый и хорошо структурированный формат.

Простой доступ через API

Выберите API-токен, укажите URL и выполните запрос по стандартной схеме.

Предпросмотр запроса и ответа

Проверьте запрос до запуска и посмотрите результат на вкладке Output.

Готовые примеры запросов

Смотрите и копируйте примеры на доступных в Playground языках.

Статистика использования

Отслеживайте объём запросов, успешность и время ответа в панели управления.

Выберите подходящий тариф Webpage

Покупайте кредиты Webpage под ожидаемый объём. Тарифы разовые и действуют указанный срок.

Мы принимаем эти методы оплаты: pay icon

Индивидуальные тарифы Webpage для корпоративных задач

  • Гибкий объём запросов
  • Индивидуальные тарифы
  • Читаемый контент и Markdown
  • Гибкий срок действия
  • Статистика использования
  • Выделенная техподдержка

Для исследований, мониторинга, поиска и AI

Используйте Webpage, когда нужен читаемый контент публичных страниц для анализа или дальнейшей обработки.

AI-приложения и ассистенты

Дают читаемый контент страниц для исследований, ответов на вопросы и анализа.

RAG и базы знаний

Используйте контент страниц для создания, обновления и поиска по базе знаний.

Внутренний поиск и обнаружение контента

Добавляйте публичный контент во внутренние системы поиска.

Исследование рынка и конкурентов

Собирайте публичные страницы товаров, статьи и данные компаний.

Мониторинг контента

Регулярно получайте страницы и отслеживайте изменения контента.

Суммаризация и классификация

Передавайте структурированный контент в системы суммаризации и разметки.

Webpage или Web Unlocker?

Выбор зависит от того, нужен готовый контент страницы или доступ к исходному ответу.

Webpage

Web Unlocker

Назначение
Получение читаемого контента страниц.
Доступ к страницам и их разблокировка.
Основной результат
Читаемый контент и Markdown по желанию.
Исходные ответы страниц согласно настройкам.
Для чего подходит
Исследования, мониторинг, поиск и AI.
Свой сбор данных и разбор страниц.
Нагрузка на пользователя
Меньше очистки и обработки контента.
Разбор и извлечение полей выполняет пользователь.
Нужен готовый контент? Выберите Webpage.
Нужна исходная страница для своего разбора? Выберите Web Unlocker.

От URL к готовому контенту

1234

Выберите тариф

Купите нужный объём кредитов Webpage.

Заполните запрос

Выберите API-токен и укажите поддерживаемый публичный URL.

Включите Markdown при необходимости

Включите Include Markdown, если Markdown нужен в ответе.

Выполните запрос

Нажмите Start Scraping и проверьте результат на вкладке Output.

Интеграция для разработчиков

Используйте примеры из Playground или документации, чтобы подключить Webpage к хранилищу, поиску, мониторингу или AI-системам.

webpage.py
import requests

url = "https://scraperapi.thordata.com/v1/webpage"
headers = {"Authorization": "Bearer YOUR_TOKEN"}
payload = {
    "url": "https://example.com/article",
    "markdown": True,
}
resp = requests.post(url, json=payload, headers=headers)
print(resp.json())

Частые вопросы

Что такое Webpage?

Webpage — продукт Thordata для извлечения веб-контента: через API возвращает читаемый контент и, при необходимости, Markdown с поддерживаемых публичных страниц.

Для чего можно использовать Webpage?

Для сбора данных, исследований, мониторинга, внутреннего поиска, баз знаний и AI-приложений.

Поддерживает ли Webpage Markdown?

Да. Включите Include Markdown, если Markdown нужен в ответе.

Как тарифицируется Webpage?

Кредиты покупаются разовым тарифом и списываются по оплачиваемому объёму каждого запроса.

Всегда ли один запрос расходует один кредит?

Нет. В зависимости от оплачиваемого объёма запрос может расходовать больше одного кредита.

Чем Webpage отличается от Web Unlocker?

Webpage даёт читаемый контент, Web Unlocker — доступ к исходному ответу страницы.

Можно ли использовать кредиты Webpage в Web Unlocker?

Нет. У продуктов отдельные тарифы, балансы, история и статистика.

Есть ли подписка или автосписание?

В текущей версии нет — тарифы Webpage разовые.

Работает ли Webpage с любым сайтом?

Webpage рассчитан на поддерживаемые публичные страницы; результат зависит от структуры страницы и настроек.

Встройте веб-контент в свой процесс

Начните с нескольких публичных URL, проверьте результат и выберите подходящий тариф.

Используйте Webpage только для публичных или разрешённых данных. Соблюдайте законы, условия сайтов и разумные лимиты запросов.