sky3918 发表于 2013-6-9 09:05:26

采集网址和时间的一些建议

1.多级网址获取,建议加上类似断点续采的功能,不然几万页的列表,遇到什么意外情况或者想换个时间采集,想停都停不下来。
2.采集内容时,获取系统时间的选项,建议加上随机获取有固定范围的时间段。
例如:随机时间范围:2010.5.5-2013.5.5 ,可以自动从这里面自动随机获取、正序获取、倒序获取 采集时间。

lbjyuer 发表于 2016-2-10 16:14:54

历史帖子回顾中。
页: [1]
查看完整版本: 采集网址和时间的一些建议