网页链接爬取
GET
/crawl爬取给定网页中的链接,不支持相对链接。
:::danger
请不要滥用本服务,一旦发现滥用立即永久下线该接口!
:::
请求参数
Query 参数
url
string
待爬取的网页地址
示例值:
https://www.baidu.com/
返回响应
成功(200)
HTTP 状态码: 200
内容格式: JSONapplication/json
数据结构
code
integer
状态
msg
string
状态信息
content
array[string]
内容
示例
{
"code": 200,
"msg": "抓取成功! 耗时 976 ms",
"content": [
"https://free-for.dev",
"https://github.com/ripienaar/free-for-dev",
"https://raw.githubusercontent.com/ripienaar/free-for-dev/master/logo.webp",
"https://www.googletagmanager.com/gtag/js?id=G-DLYKZXPL9J"
]
}
最后修改时间: 6 个月前