列表懒加载和起始网页批量多页不知道详细数量的问题

jun0120cn

各位大神，请教2个问题：
1、列表页面有懒加载的情况，如初始化50条，上下滚动条到底时再加载50条，这样的情况怎么办？
http://zj.meituan.com/category/meishi/all/page1 这是一个例子
2、起始页有规则是等差数列，如 http://zj.meituan.com/category/meishi/all/page1，page后面的数字是等差的。但不知道究竟一共多少页，这种情况怎么配置？

kuhabe

1.一般瀑布流形式的采集，需要借助抓包工具分析  教程 http://faq.locoy.com/q-755.html
2.具体多少页 这个，如果源码里不直接显示，那么就建议设置个最大的量。
3.有些复杂瀑布流地址是无法用采集器设置规则实现，那么可以考虑火车浏览器 采集
http://www.locoyposter.com/

kuhabe

1.一般瀑布流形式的采集，需要借助抓包工具分析  教程 http://faq.locoy.com/q-755.html
2.具体多少页 这个，如果源码里不直接显示，那么就建议设置个最大的量。
3.有些复杂瀑布流地址是无法用采集器设置规则实现，那么可以考虑火车浏览器 采集
http://www.locoyposter.com/