886it.cn

创建抓取任务api-url：http://www.886it.cn/api/spiderout/push_task (POST)

参数名	参数含义	类型	是否必须
need_crawle_url	你需要抓取的亚马逊页面url	string	必须
key	api的密钥可注册本系统用户，系统自动分配密钥	string	必须
task_id	你定义的task_id。用于下方	string	必须
many_datas	批量插入任务[{"task_id": "99","call_back_url": "https://xxx", "need_crawle_url": "https://xxx"},......]	string	可选
call_back_url	回调地址，任务抓取完成后系统通过回掉地址通知你。比如你设置回掉地址xxx.com/call_back。则回调时候我们将添加task_id,new_file_url两个参数,构建成xxx.com/call_back?task_id=12&oss_url=xxx.com/xx.zip(get 发送),其中oss_url会urlcode编码,抓取成功后只回调一次。如果没有等到回调通知，可以使用另外API查询抓取结果。	string	可选
city	收货城市,亚马逊设置物流城市，一般用于关键词搜索页	string	可选

成功返回示例：{"error": 0, "msg": "Success"}

参数名	参数含义
error	识别成功返回0,失败为1
msg	如果识别失败返回的错误描述

读取任务结果api-url：http://www.886it.cn/api/spiderout/pull_task (POST)

成功返回示例：{"error": 0, "msg": "Success","data":"xxxxxxxxxx"}

参数名	参数含义
error	识别成功返回0,失败为1
msg	如果识别失败返回的错误描述
data	{"task_id":23,"oss_url":"xxxx",.....} 任务的详细信息，真实回掉地址，oss_url下载地址等

Amazon高性能爬虫API (异步)