
從搜索爬蟲記錄看到問題
點擊數:25195 更新時間:2014-04-06 15:20:00 來源: 昕竹軒網站設計-【返回】
晚上,花點時間找到了一個可用收縮蜘蛛爬行記錄程序,剛裝配不到5分鐘,就看到搜狗的收縮爬蟲呼來來全爬到博客上了,等了大概半小時多,爬蟲記錄上基本上能看到百度,谷歌,搜搜,雅虎等各大搜索爬蟲。興奮之余也徹底打消了,我網站收入擔憂現在基本上確認爬蟲門基本上都能暢通無阻在我博客上游蕩,不過分析下,記錄日志能發現大部分爬蟲爬走的路徑都是一些,老版映軒曉屋程序路徑,都是當初Asp建站內容如今各大搜索引擎似乎對舊的路徑很是偏愛,但收錄后基本上沒有頁面能正常打開,而新網站頁面爬蟲也很少光顧。
這樣,問題也真讓人心急上網搜索下給出答案基本上是等待,它們更新,以及使用robots.txt文件,阻止收入舊的網站結構路徑。另外,加緊網站原創內容更新和各搜索引擎上網址的提交。
反正,內容繼續更新。以不變應萬變,使網站體驗更好不怕以后沒人氣。
廣告位
【必備推薦】(Top) 返回頁面頂端
【精品案例】更多案例展示
【最新留言】
(Top) 返回頁面頂端
登錄 |
免費注冊 |
忘記密碼 |
郵箱:CSW8923@126.com
服務電話:17895923895 客服QQ:568441621 
Copyright © 2014-2015 Htmcss.Com All Rights Reserved 版權所有昕竹軒網站設計 備案號:閩ICP備16024510號-4

Copyright © 2014-2015 Htmcss.Com All Rights Reserved 版權所有昕竹軒網站設計 備案號:閩ICP備16024510號-4
你設置的聯系郵箱是*: (當有人給你留言回復之時,聯系郵箱可以及時通知你)
我們建議你填寫正確的郵箱地址,如果你之前填寫郵箱地址是錯誤的可以通過 【修改資料】 來重新設置