从谷歌、必应等搜索引擎获取精准、实时的搜索结果。
覆盖全球190+国家/地区,拥有1亿+真实住宅IP。
Webpage 从受支持的公开网页中提取并整理内容,让抓取、调研、监控与 AI 应用更易接入。
以更干净、更易用的格式获取有价值的网页内容。
当工作流需要可读、结构良好的内容格式时,可开启 Markdown。
选择 API Token、填入 URL,即可通过标准 API 流程发起请求。
运行前检查请求,并在 Output 标签页查看返回内容。
查看并复制 Playground 中已提供的多语言请求示例。
在控制台跟踪请求量、成功率与响应时间。
根据预计用量购买 Webpage 次数。套餐均为单次购买,并在页面显示的有效期内使用。
当您需要从公开网页持续获取可读内容用于分析或下游应用时,选择 Webpage。
为调研、问答与内容分析提供可读的网页内容。
用网页内容构建、更新并检索知识库。
将公开网页内容接入内部搜索与内容发现系统。
采集公开的产品页、文章与公司信息用于分析。
定期抓取公开页面,识别内容随时间的变化。
将整理后的网页内容送入下游系统做摘要、打标与分类。
取决于您需要可用的网页内容,还是需要拿到原始页面响应。
购买符合预估用量的 Webpage 额度。
选择 API Token,并填入受支持的公开网页 URL。
需要响应中包含 Markdown 时,开启 Include Markdown。
点击 Start Scraping,并在 Output 标签页查看返回内容。
import requests
url = "https://scraperapi.thordata.com/v1/webpage"
headers = {"Authorization": "Bearer YOUR_TOKEN"}
payload = {
"url": "https://example.com/article",
"markdown": True,
}
resp = requests.post(url, json=payload, headers=headers)
print(resp.json())Webpage 是 Thordata 的网页内容提取产品,可通过 API 从受支持的公开网页中获取可读内容与可选 Markdown。
可用于抓取、调研、监控、内部搜索、知识库与 AI 应用等场景。
支持。需要响应中包含 Markdown 时,开启 Include Markdown 即可。
通过一次性套餐购买 Webpage 额度,按每次请求计算的可计费用量扣减额度。
不一定。根据该次请求的可计费用量,可能会消耗多于一个额度。
Webpage 侧重可读内容,Web Unlocker 侧重访问并返回原始页面响应。
不能。两个产品拥有独立套餐、余额、使用记录与统计数据。
当前版本不支持,Webpage 套餐均为一次性购买。
Webpage 面向受支持的公开网页,结果可能因页面结构与配置而不同。