批量提交任务

请求URL

POST https://scrapeapi.pangolinfo.com/api/v1/scrape/batch

请求头

参数名参数值类型说明
Content-Typeapplication/jsonstring数据格式
AuthorizationBearer xxxstring认证凭证

请求参数

参数必填类型说明
urlsYesstring[]目标网页URLs
formatYesstringrawHtml, markdown
timeoutNoint超时时间,单位ms

响应值

返回值类型说明
codeint状态码
messagestring信息
dataobject返回数据

返回参数 data 说明

返回值类型说明
jsonstring[]返回json数据
urlstring任务URL
taskIdstring任务ID

请求示例

curl --request POST \
  --url https://scrapeapi.pangolinfo.com/api/v1/scrape/batch \
  --header 'Authorization: Bearer <token>' \
  --header 'Content-Type: application/json' \
  --data '{
  "urls": [
    "https://www.amazon.com/dp/B0B41YH9B6"
  ],
  "format": "rawHtml",
  "timeout": 40000
}'

返回示例

{
  "code": 0,
  "message": "ok",
  "data": [
    {
      "status_code": "200",
      "method": "GET",
      "rawHtml": [
        "<html><head>...</head><body><div class=\"content\">Example content</div></body></html>"
      ],
      "url": "https://www.amazon.com/dp/B0B41YH9B6",
      "taskId": "ac6e32c0554244fe865ff2c0379a307e"
    }
  ]
}

积点消耗说明

format参数消耗积点数
获取源文件rawHtmlmarkdown1个/次