caijihome 发表于 2014-1-9 13:41:25

POST批量查询,希望记录查询失败的记录,同样的GET采集一样。

第一步采集网址,希望有记录失败记录按钮,这样当第一次采集完之后缺少丢失(大多因网络或者访问失败)的部分,我就不用反复全部扫描了。
适合POST批量查询, 以及固定数量的采集。

caijihome 发表于 2014-1-9 14:08:08

断点续采检测功能。
http://bbs.locoy.com/data/attachment/forum/201311/07/105341r3icdm37tdnvch35.jpg

网址漏采续采功能。
自定义附件后缀功能。
http://bbs.locoy.com/data/attachment/forum/201311/07/105524vzlymnp7pmko7onh.jpg

语法表达式网址 支持数字运算。{{$0}+1}

zhuge 发表于 2014-3-21 10:50:21

我也需要这个功能 ,同时还需要一个合适的功能来处理“发布未知”,现在的方式是不是成功就是失败,导致每次都要手动去检查或重新采集检查,   这就像是性别除了男和女,还是人妖,老师脱了脱了他们裤子去检查一下,如果有小雀雀就归为男,没有就归为女, 我就需要一个检查的功能

zhuge 发表于 2014-3-21 10:53:57

发布出现未知的时候,一般是服务器宕机,或者网络出现问题,建立加个功能,一旦出现这个情况就停下来,这样也是好方法,就不会出现大面积的“发布未知”
页: [1]
查看完整版本: POST批量查询,希望记录查询失败的记录,同样的GET采集一样。