阅读932 返回首页    go 火车采集器


页面缓存功能的使用介绍

页面缓存功能的使用介绍

作者:小文 发布于:2013-8-12 15:03 Monday 分类:功能介绍

如果有多个任务要对同一个网页的不同位置进行采集,那么,很容易出现这个页面访问过多的问题,而多次的请求中,原页面可能并不存在任何的更新,白白浪费时间和带宽。现在我们开发了页面缓存功能,可以解决这个问题。

用户需要打开二级代理程序 ProxyModule.exe 就可以看到。只需要开启,然后设置一下网址必须包含和内容必须包含,则符合条件的内容会缓存在本地。在指定的时间内是可以不去访问网站,直接读取本地数据文件。

点击查看原图

标签: 代理

相关日志:

网站抓取精灵火车采集器如何定时自动运行?

网页抓取工具 火车采集器版本选择攻略

学会网页数据抓取让互联网成为你的私人数据库

使用网站采集软件必备伪原创秘笈

火车采集器V9:网页抓取工具成图文数据获取捷径

« 添加或执行SQL语句让批量操作更快捷 | POST网址部分增加使用文本数据提交功能»

发表评论:

最后更新:2017-05-09 01:06:01

  上一篇:go 利用语法表达式生成网址
  下一篇:go 关于Web发布时提交纯文本POST数据的设置方式