不得不說，搜索引擎發(fā)展到現(xiàn)在，已經(jīng)比較的智能化了，去年google就推出了圖片搜索功能，能夠分析圖片的色彩、像素比例而找到圖片的出處。然而這項技術(shù)對于搜索引擎完全的識別圖片中的信息還有不小的差距，而很多站長或是不懂得搜索引擎優(yōu)化，或是考慮網(wǎng)站美觀和內(nèi)容豐富，往往會在頁面中嵌入大量高清圖片、flash，即使你的網(wǎng)站內(nèi)容再好，蜘蛛也無法知道，只能繞道而行了?，F(xiàn)在網(wǎng)絡(luò)上有許多模擬蜘蛛抓取的工具，有類似情況的網(wǎng)站站長可以查詢一下自己網(wǎng)站的信息，看看蜘蛛能夠發(fā)現(xiàn)的信息和人眼看到的有多大差距。
網(wǎng)站死鏈接過多
有些鏈接無法通過蜘蛛程序，原因很多，我們以后分析。也許你的站點的鏈接自己也不能蜘蛛抓取，可能因為它們也是新的站點，也可能因為他們使用了不道德的技術(shù)被限制了，你可以使用谷歌來檢查鏈接的站點的pr顯示出你的到鏈接的價值如何，如果鏈接站點的排名是0 就不太好，因為這個站點沒有被谷歌索引。
內(nèi)容質(zhì)量低 采集內(nèi)容居多
現(xiàn)在很多的程序都帶有這樣那樣的采集功能，原因是為了方便站長更新網(wǎng)站內(nèi)容，卻不曾想到蜘蛛非常反感采集的站點，一般而言，采集內(nèi)容對于新站快速被收錄是有幫助的，這點筆者非常贊同，但是如果是長期的以采集來更新網(wǎng)站內(nèi)容的話，那么當蜘蛛發(fā)現(xiàn)你的網(wǎng)站內(nèi)容與自己數(shù)據(jù)庫中的內(nèi)容存在相同的時候，自然你的收錄頁面就會被刪除，因為凡事都有先來后到的原則，而搜索引摯判斷哪一篇是原創(chuàng)的都是以第一收錄時間為準的，如果你的內(nèi)容被別人轉(zhuǎn)載了，而自己的沒收錄別人的收錄了，那么你的就會被當成是采集的，然而很多時候，站長對于收錄量反復(fù)無常更多的怪罪于外鏈身上，其實最主要的原因還是內(nèi)容。蜘蛛喜歡原創(chuàng)的、有價值的內(nèi)容，而對于采集而來的內(nèi)容則是抱以丟棄的態(tài)度。所以說，對于網(wǎng)站收錄量不穩(wěn)定，筆者建議站長檢查一下自己的內(nèi)容的質(zhì)量，同時看看自己更新內(nèi)容時是否采用采集的方式。
網(wǎng)站空間不穩(wěn)定的影響　
網(wǎng)站空間不穩(wěn)固的影響應(yīng)當是首當其中的起因，連續(xù)3天，天天都定時關(guān)，并且在蜘蛛最活潑的時間讓蜘蛛持續(xù)吃了3天閉門羹，估量蜘蛛對我的惱恨那是相稱的大啊,上火了羅唆丟掉我的站不來拜訪了，看來下一步要重點去吸引蜘蛛從新來訪，多去權(quán)重高的論壇去坐坐鏈接釣餌了。由此可見選空間必定不能圖廉價，要找一個性價比都不錯的空間。
蜘蛛程序無功而返
這種情況就是蜘蛛程序檢查到了你的站點，但是你的站點阻止了它對網(wǎng)站內(nèi)容的收錄。在吃了幾次閉門羹后，蜘蛛程序干脆拋棄你的站點，再也不登門了。這里主要提的是robot文件的設(shè)置，以后有時間我會寫一篇專門介紹robot文件的文章。