閱讀932 返回首頁    go 火車采集器


頁麵緩存功能的使用介紹

頁麵緩存功能的使用介紹

作者:小文 發布於:2013-8-12 15:03 Monday 分類:功能介紹

如果有多個任務要對同一個網頁的不同位置進行采集,那麼,很容易出現這個頁麵訪問過多的問題,而多次的請求中,原頁麵可能並不存在任何的更新,白白浪費時間和帶寬。現在我們開發了頁麵緩存功能,可以解決這個問題。

用戶需要打開二級代理程序 ProxyModule.exe 就可以看到。隻需要開啟,然後設置一下網址必須包含和內容必須包含,則符合條件的內容會緩存在本地。在指定的時間內是可以不去訪問網站,直接讀取本地數據文件。

點擊查看原圖

標簽: 代理

相關日誌:

網站抓取精靈火車采集器如何定時自動運行?

網頁抓取工具 火車采集器版本選擇攻略

學會網頁數據抓取讓互聯網成為你的私人數據庫

使用網站采集軟件必備偽原創秘笈

火車采集器V9:網頁抓取工具成圖文數據獲取捷徑

« 添加或執行SQL語句讓批量操作更快捷 | POST網址部分增加使用文本數據提交功能»

發表評論:

最後更新:2017-05-09 01:06:01

  上一篇:go 利用語法表達式生成網址
  下一篇:go 關於Web發布時提交純文本POST數據的設置方式