| | 1 | 2 | 3 | 4 | 5 | 6 | | 7 | 8 | 9 | 10 | 11 | 12 | 13 | | 14 | 15 | 16 | 17 | 18 | 19 | 20 | | 21 | 22 | 23 | 24 | 25 | 26 | 27 | | 28 | 29 | 30 | | | | | |
|
比如采集http://xxx.com/?p=297#comments类似的文章该怎么设置??因为http://xxx.com/?p=297和 http://xxx.com/?p=297#comments在有的文章中都是超级链接, 然后火车比较文章规则,符合,于是就采集了http://xxx.com/?p=297和 http://xxx.com/?p=297#comments ,但文章都是相同的,就导致了重复.请问这个该怎么解 ...
|
|