水淼關鍵詞網址采集器是一款網絡輔助工具,能讓你設置相對應的搜索引擎,選擇自己適合的模板,然后完成各種去除結果設置,就能夠開始采集。你可以輸入關鍵詞,然后按照自己的需求進行搜索,模板包含了標題、網址等,你還能自動去除重復結果,提高采集的準確性。
軟件功能
采集網頁信息,相關如下:
#網址#:采集的原始網址
#標題#:網址對應的網頁標題
#域名#:原始網址的域名部分,如“http://test.shuimiao.net/123.htm”中的“test.shuimiao.net”
#頂級域名#:取原始網址的頂級域名部分,如“http://test.shuimiao.net/123.htm”中的“shuimiao.net”
#描述#:網頁標題下面的一段描述文字
常見問題
為什么采集一段時間之后,無法采集?
這可能采集多了被搜索引擎限制,重啟軟件可繼續采集,如果不換,只能等待搜索引擎取消屏蔽之后才能繼續采集。百度的屏蔽時間通常半小時到數小時。
不過,現在即使出現驗證碼屏蔽,軟件也會彈出驗證碼手動輸入的(百度、谷歌)
不同批次關鍵詞采集的結果為什么會存在部分網址重復?
尤其是只引用了 #域名# 或 #頂級域名# 之后,這種部分網址重復的情況比較多。這也是正常的,因為每個網站的內頁可能包含很多主題,不同關鍵詞都可能采集到該網站的不同內頁,當引用域名后,相同網站的不同內頁的域名結果自然就相同了。
另外,軟件里的自動去重,是針對本次采集的結果內部進行去重,以前采集的結果是不在本次去重范圍的。如果兩次采集的結果存在部分網址重復,可以把他們合并一起,使用軟件去重(水淼·文本去重打亂器)。
為什么采集回來的網址的主題與關鍵詞不符?
是因為引用了 #域名# 或 #頂級域名# 后,取的是域名部分,域名打開的是該網站的首頁,而采集的原網址可能不是首頁,而是該網站的某一篇文章的內頁,該內頁包含關鍵詞主題,因此被搜索引擎收錄,軟件才能采集得到。但取域名后,你打開的域名首頁就不一定包含該關鍵詞。
為了比對采集是否正確,可以在保存模板里輸入:<a href="#網址#" target="_blank">#標題#</a>,保存為htm文件,采集完后可以自己打開該文件查看比對。
更新內容
1.改造為支持OEM代理
2.增加必應和雅虎采集;多項改動
3.將必應、雅虎、谷歌改為https請求以避免一些情況下的采集失敗問題。
4.增加百度新聞采集。
5.一些更新。
6.增加關鍵詞分割線選項。
7.修復百度最新變動無法采集的問題。
8.修復必應改動采集失效問題;修復某些電腦不能使用xmlhttps的問題(涉及谷歌、必應、雅虎)。
標簽: 網址采集
裝機必備軟件
網友評論