对于分页中使用脚本控制分页的采集方法

rq204

我们以 http://post.she.tom.com/C600093857.html 为例,这里是用脚本来控制分页的,具体的有关分页的代码

1. //current page of append
   
2. var cur_append_page = 1;
   
3. var total_append_page = 3 ;

复制代码

这里的3是总页数.我们看一下分页的特点.第二页http://post.she.tom.com/C600093857_2.html ,第三页http://post.she.tom.com/C600093857_3.html ,第一页另一个表示是http://post.she.tom.com/C600093857_1.html

目前程序处理这个还是不便,所以我们写些小程序,将分页代码弄成明文形式,再交给程序去处理.

目前,对于这个页面,我们用php写个小程序.代码如下:

1. 
   
2. <?php
   
3. include "Snoopy-1.2.4/Snoopy.class.php";
   
4. $tom=new Snoopy;
   
5. $URI='http://post.she.tom.com/C600093857.html';
   
6. $c=$tom->fetch($URI);
   
7. $content=$tom->results;
   
8. preg_match("/var total_append_page = (\d+) ;/",$content,$pagenum);
   
9. $num=$pagenum['1'];
   
10. echo '<div id=locoypages>';
    
11. for($i=1;$i<$num+1;$i++){
    
12. echo '<a href="'.str_replace('.html','_'.$i.'.html',$URI).'">'.$i.'</a>';
    
13. }
    
14. echo '</div>';
    
15. ?>

复制代码

然后用火车采集,就可以得到所有内容.


基本原理就这样,你可以自己想出更好的办法.

aven

good!!!!!!!!!!!!!!!!!!!!!

xiongyujie37

可是 我看不懂。。。

chenfy

正在学习php编程，还能看懂一点点，呵呵，努力中，争取也来写接口！

songtao

没有发布类文件...没用.

5949772

谢谢!
希望楼主能够说明一下,遇到类似的情况那些可以修改.PHP不大懂,实在不好意思!

zhwxc

唉  努力学习  争取早日成为老鸟

ahligaoming

不是很懂，顶吧！

8qzone

你写完这个代码放到哪里啊，怎么也不说明一下怎么用啊？

fetionclub

是啊，没有说明白啊。