做網(wǎng)站優(yōu)化的都知道一個網(wǎng)站，想要獲得搜索引擎的認(rèn)可，那么就得*先就得獲得蜘蛛的喜愛，作為一個SEO，*愛的事情就是蜘蛛每天都來，來的勤，來的快，如果網(wǎng)站中無*阻礙，那么蜘蛛肯定是很開心的暢游網(wǎng)站，但是不是所有的網(wǎng)站的所有的地方都是這樣，哪么究竟哪些地方會讓蜘蛛難以自由爬行抓取呢？

錯誤的robots (什么是robots.txt)

蜘蛛來到一個網(wǎng)站，*先會訪問這個網(wǎng)站的robots,如果你寫入了相應(yīng)的規(guī)則，比如整站禁止蜘蛛爬行，哪么肯定蜘蛛是不會繼續(xù)爬下去的，所以各位需要謹(jǐn)慎對待robots。

錯誤的sitemap

蜘蛛訪問完robots后，得到進(jìn)入允許，那么它*步就是訪問sitemap，如果網(wǎng)站地圖建設(shè)不正確，蜘蛛肯定會找不到路，這樣也會讓蜘蛛的爬行*困難

死鏈過多

死鏈接過度，筆者在之前一篇文章提到過網(wǎng)站死鏈過多是很影響蜘蛛的胃口的，這里只是稍微提一下，如有需要繼續(xù)了解的，請各位關(guān)注新鄉(xiāng)互易seo教程，會教給大家怎樣去尋找，修改死鏈接。