㈠ 如何知道百度蜘蛛是否來過自己的網站
通過查看網站日誌,可以了解搜索引擎蜘蛛的訪問情況。
通過FTP訪問網站的根目錄。可以看到一個log的文件夾,這是存放日誌的地方。可以壓縮(日誌文件一般很大)後通過下載到本地電腦上解壓縮後打開日誌文件。
1、網站剛上線,看搜索引擎蜘蛛的抓取情況;
如果網站提交給搜索引擎2天後,發現日誌里蜘蛛不少,並都返回200,則說明已經可以正常。
只是Google展示的時間比較快,而網路則需要20天左右(經驗平均值)展示出來。
2、網站異常,對比日誌中蜘蛛的行為情況;
正常增加時和現在異常時的日誌,進行對比分析。如果沒有異常,則應該是搜索引擎展示資料庫出問題所致。
如果蜘蛛爬取量明顯減少,是否突然減少很多。
如果日誌依然,則認為是搜索引擎的展示問題。
3、解決網站被封問題時,日誌情況。
網站被封時,往往日誌里有網路蜘蛛,但很少,而且往往只訪問robots.txt文件和首頁。
經過站長檢查修改一切不符合搜索引擎的優化行為後,再將自己網站提交給網路,之後的2天日誌情況如果一直只是網路蜘蛛很少光臨,而且往往只訪問robots.txt文件和首頁。這樣的情況維持1個月,可以考慮放棄該域名。
如果蜘蛛明顯增加,而且返回200代碼居多,則被網路重新收錄的希望很大,只是時間問題,需要站長更加努力。
㈡ 濡備綍鏌ョ湅緗戠珯琚鐧懼害鎶撳彇鐨勬儏鍐
鏌ョ湅緗戠珯鏃ュ織銆傜劧鍚庯細ctrl+f鏌ユ壘錛歜aispider灝卞彲浠ョ湅鍒扮櫨搴︾殑姒ㄥ彇鎯呭喌錛屽叾浠栫殑銍樿洓鍚岀悊銆備富瑕佺湅錛1銆佽繑鍥炵爜錛屼竴鑸200姣旇緝澶氥 2銆佹潵璁跨殑棰戠巼 3銆佹姄鍙栫殑欏甸潰錛氬傦細/seo.html澶ф傚氨鏄榪欎箞澶氾紝鏈変竴浜涚┖闂翠笉鎻愪緵榪欑被鏃ュ織錛屾湁鐨勬棩蹇椾笉璁板綍閮ㄥ垎淇℃伅錛岄渶瑕佽嚜宸卞氬氳傚療銆傛垜涔嬪墠鐢ㄧ殑灝辨槸鏃ュ織鏍規湰涓嶈板綍銍樿洓錛岃繕鏄鐢ㄦ彃浠跺疄鐜扮殑銆