阅读698 返回首页    go gooseeker集搜客


采集网页html源码

一、操作步骤

对于学习网页设计的人来说,有时候遇到了自己很喜欢的网页,却得不到它的html代码,或者得到的代码不完整。下面用网易新闻采集作为案例,教大家采集html源码,具体操作步骤如下:


二、案例规则+操作步骤

  • 采集规则:网易新闻源码采集(可点击下载)
  • 样本网址:https://news.163.com/16/1019/07/C3NO1BS100014SEH.html
  • 采集内容:某模块节点的html代码

第一步:打开网页

1.1,打开GS爬虫浏览器,输入网址并ENTER,加载出网页后再点击“定义规则”;

1.2,在工作台中输入主题名,并点击“查重”看主题名是否被占用。


第二步:标注信息

2.1,双击要抓取的目标信息,输入整理箱名和标签名,并勾上关键内容。


2.2,双击字段名,给抓取内容设置高级选项,勾选“高级设置”,选择“网页片段”,保存。


第三步:存规则,抓数据

3.1,规则测试成功后,点击“存规则”;

3.2,点击“爬数据”,弹出DS打数机,开始抓数据。


Tips:想要网页的整个html源码,可以直接对html节点做映射,然后高级设置里选择网页片段,最后保存规则。操作如下图:


上篇文章:《数据规则怎么看》


若有疑问可以或集搜客爬虫软件

最后更新:2017-01-09 14:08:12

  上一篇:go 中级教程
  下一篇:go 【第32期】美团网店铺信息采集