申请会员
登录
搜索
帮助
火车采集器|信息数据采集论坛
»
采集器讨论区
» 大家看一下这个网站如何采集
‹‹ 上一主题
|
下一主题 ››
发新话题
发布投票
发布商品
发布悬赏
发布活动
发布辩论
发布视频
打印
[3.2版]
大家看一下这个网站如何采集
气吞万里如虎
新手上路
UID
87882
帖子
20
活跃度
89 点
火车车厢
1 节
注册时间
2008-6-26
个人空间
发短消息
加为好友
当前离线
1楼
大
中
小
发表于 2008-7-12 15:28
只看该作者
大家看一下这个网站如何采集
http://www.sdggc.com/
这个钢材网帮我看一下这个网站的标题和内容应该如何截取吗?这是我有史以来见过最难写规则的一个站了,内容很难采,达人求教了。
UID
87882
帖子
20
精华
0
积分
89
活跃度
89 点
火车车厢
1 节
阅读权限
20
在线时间
55 小时
注册时间
2008-6-26
最后登录
2008-7-26
查看详细资料
TOP
soarb
金牌会员
UID
28394
帖子
658
活跃度
1394 点
火车车厢
58 节
注册时间
2007-4-26
个人空间
发短消息
加为好友
当前离线
2楼
大
中
小
发表于 2008-7-12 16:46
只看该作者
全站采集?还是采某个栏目?
专踩牛B站,js封装,flash调用,多重防踩;定制智能采集接口,自动化接口,数据翻译,伪原创策略组合,价格比对,验证码识别,口碑等图片样式电话识别。。。。
QQ:肆零肆叁叁肆捌玖柒
(最低消费200元)
UID
28394
帖子
658
精华
0
积分
1394
活跃度
1394 点
火车车厢
58 节
阅读权限
70
在线时间
1970 小时
注册时间
2007-4-26
最后登录
2008-12-1
查看详细资料
TOP
气吞万里如虎
新手上路
UID
87882
帖子
20
活跃度
89 点
火车车厢
1 节
注册时间
2008-6-26
个人空间
发短消息
加为好友
当前离线
3楼
大
中
小
发表于 2008-7-12 17:31
只看该作者
采集整个站点,能帮忙吗?规则我研究了三天也摸不透,大家都帮我看看。我会感谢你们的。
UID
87882
帖子
20
精华
0
积分
89
活跃度
89 点
火车车厢
1 节
阅读权限
20
在线时间
55 小时
注册时间
2008-6-26
最后登录
2008-7-26
查看详细资料
TOP
siting
思亭
嘉宾
UID
82733
帖子
138
活跃度
413 点
火车车厢
42 节
注册时间
2008-3-30
个人空间
发短消息
加为好友
当前离线
4楼
大
中
小
发表于 2008-7-12 17:53
只看该作者
楼主,说清楚你的采集意图,我没明白你的意思
是一个栏目,一个栏目的采集吗?
简单SEO
女人是衣服
女性健康网站
UID
82733
帖子
138
精华
0
积分
413
活跃度
413 点
火车车厢
42 节
阅读权限
40
在线时间
10 小时
注册时间
2008-3-30
最后登录
2008-11-16
查看详细资料
TOP
siting
思亭
嘉宾
UID
82733
帖子
138
活跃度
413 点
火车车厢
42 节
注册时间
2008-3-30
个人空间
发短消息
加为好友
当前离线
5楼
大
中
小
发表于 2008-7-12 17:55
只看该作者
如果采集这个页面:
http://www.sdggc.com/html/price/2008711016.htm
通过源代码可看到<title>内容为:
<title>上海无缝管价格下降100元 - 钢管|无缝钢管|无缝管-聊城盛大金属有限公司-电话:0635-2117751</title>
那么你可以这样设置规则:
<title>* - 钢管|无缝钢管|无缝管-聊城盛大金属有限公司-电话:0635-2117751</title>
其内容部分也很简单,你学着自己想吧:)
简单SEO
女人是衣服
女性健康网站
UID
82733
帖子
138
精华
0
积分
413
活跃度
413 点
火车车厢
42 节
阅读权限
40
在线时间
10 小时
注册时间
2008-3-30
最后登录
2008-11-16
查看详细资料
TOP
气吞万里如虎
新手上路
UID
87882
帖子
20
活跃度
89 点
火车车厢
1 节
注册时间
2008-6-26
个人空间
发短消息
加为好友
当前离线
6楼
大
中
小
发表于 2008-7-14 09:10
只看该作者
楼上的谢谢你的回复!标题是截取出来了。其实最难采集的是内容区域,内容根本就截取不到,怎么截在测试栏中显示的都是一大堆代码,楼上的如果能截取到内容麻烦你发个代码过来,谢谢你了。
UID
87882
帖子
20
精华
0
积分
89
活跃度
89 点
火车车厢
1 节
阅读权限
20
在线时间
55 小时
注册时间
2008-6-26
最后登录
2008-7-26
查看详细资料
TOP
siting
思亭
嘉宾
UID
82733
帖子
138
活跃度
413 点
火车车厢
42 节
注册时间
2008-3-30
个人空间
发短消息
加为好友
当前离线
7楼
大
中
小
发表于 2008-7-14 17:51
只看该作者
朋友,很难吗,那天看到你发的这个帖子,我随机打开了一个目标网页,
原本以为有多难,结果根本就没经过思考,按照很常规的方法,按部就搬地,就测试成功.
我怀疑你没有动脑筋,或者完全不会写规则,
内容部分的规则,你自己实践吧。
简单SEO
女人是衣服
女性健康网站
UID
82733
帖子
138
精华
0
积分
413
活跃度
413 点
火车车厢
42 节
阅读权限
40
在线时间
10 小时
注册时间
2008-3-30
最后登录
2008-11-16
查看详细资料
TOP
‹‹ 上一主题
|
下一主题 ››
论坛管理及公告
论坛记事、活动、培训区
火车采集器交流与讨论
程序发布
悬赏求助区
采集器讨论区
原1.X版本子讨论区
原2.0版本子讨论区
使用教程区
模块资源区
原1.2.0/1.2.1版本模块保留区
站点任务规则资源区
原1.X版本规则保留区
原2.0版本规则保留区
BUG报告
采集器资源求购区
程序建议区
各种CMS,论坛讨论区(与3.2发布同时开设)
Discuz! | & Supsite
PHPWind & VeryCMS
PHPCMS
DedeCMS
Powereasy动易
Foosun风讯
HBCMS
Dvbbs & DvPHP
WordPress 等Blog程序
Joomla等国外程序
ECMS帝国
新云程序
站长交流区
建站交流
网站赚钱
SEO技术交流
网站系统经验分享
火车域名注册
控制面板首页
编辑个人资料
积分交易
积分记录
公众用户组
个人空间管理
基本概况
流量统计
客户软件
发帖量记录
版块排行
主题排行
发帖排行
积分排行
交易排行
在线时间
管理团队
管理统计
Powered by
Discuz!
6.0.0
© 2001-2007
Comsenz Technology Ltd
Processed in 0.189556 second(s), 6 queries, Gzip enabled
当前时区 GMT+8, 现在时间是 2008-12-2 00:35
皖ICP备06000549
清除 Cookies
-
联系我们
-
火车采集器官方站
-
静态归档
>
界面风格
----------
默认风格
喝彩奥运
深邃永恒
粉妆精灵
诗意田园
春意盎然