1、死鏈
　　普通的講，死鏈也叫死鏈接便是無法打開的鏈接。搜刮引擎蜘蛛要是在網站內爬行，卻頻頻遭受無法打開頁面的煎熬。顯然，云云一來該網站對付搜刮引擎蜘蛛來說正在漸漸的失去信托。
　　2、種種跳轉。
　　這個指的是通過差別的技能或指令，主動將一個網頁跳轉到另一個網頁。現在搜刮引擎比力支持的是301跳轉，但是這每每被heimao搜索引擎優化所利用，從而導致搜刮引擎蜘蛛對其比力敏感。
　　3 、flash動畫。
　　多網站都市在頁面上添加flash動畫，但是搜刮引擎蜘蛛說到底只是一個步伐，它不克不及像人一樣寓目flash動畫的內容。固然搜刮引擎不停在這方面高興，但因此現在的搜刮引擎技能還不克不及完全有用的抓取flash的內容。 別的，要是在網站上出現了flash動畫，搜刮引擎都發起添加相應的筆墨形貌，以便搜刮引擎蜘蛛較直觀的相識flash動畫內容。
　　4、js代碼。
　　搜刮引擎蜘蛛對抓取js代碼也是比力困難的，大量的js代碼會嚴峻影響搜刮引擎蜘蛛抓取的速率。搜刮引擎蜘蛛在一個網站的爬行時間是有限的。以是，網站優化時要只管即便制止，大概罕用js代碼。
　　5、框架布局(套模板建的站，不是指開源步伐)
　　利用框布局計劃網頁盛行于互聯網誕生初期，但是由于未便于搜刮引擎蜘蛛的抓取而被揚棄。在做網站優化時，應當完全放棄框架布局，乃至不必要相識它。 檢察網站是不是框架布局，可以用站長東西盤問蜘蛛模仿爬行，看網站是否都被蜘蛛爬行到。
　　6、必須登錄欣賞網站。
　　許多網站有部門乃至全部內容必要注冊登岸后才氣欣賞，大部門社會化媒體(如sns網站、微博等)便是云云。但是你必須要知道，搜刮引擎蜘蛛不會填寫用戶名暗碼，更不會注冊。
　　7、session id。
　　session id是為了跟蹤每一位訪問用戶，天生唯一的session id，并加在url中。而這種僅僅session id差別的url的現實頁面內容是雷同的，從而會導致搜刮引擎蜘蛛的重復收錄。
　　8、逼迫利用cookies。
　　搜刮引擎蜘蛛現實是禁用cookies的，要是不啟用cookies就無法正常表現內容的話，搜刮引擎蜘蛛就無法瞥見網頁的內容。
　　9、不穩固的辦事器。
　　要是網站由于辦事器的題目常常性的無法正常訪問，久而久之，搜刮引擎蜘蛛爬到你的域名上卻時常“碰釘子”，搜刮引擎蜘蛛天然而然的就會以為這個網站不靠譜。云云一來，網站也將失去搜刮引擎蜘蛛的信托。