網(wǎng)站建好后想被百度、谷歌搜到，得先讓搜索引擎的 “蜘蛛” 爬取到內(nèi)容。但很多網(wǎng)站明明內(nèi)容不錯，蜘蛛?yún)s不愿意來，或者說是找不到路，其實是被這幾個因素擋住了，下面就帶大家一起來了解一下。

　　1、網(wǎng)站加載太慢，蜘蛛等不及就走了。

　　蜘蛛在爬取信息的時候，通常是沒有耐心等的，要是網(wǎng)站打開要3秒以上，那蜘蛛加載卡半天，可能會直接放棄爬取這頁內(nèi)容，所以大家要想讓蜘蛛愿意等，就得精簡代碼，壓縮圖片，以保證網(wǎng)站打開速度更快。

　　2、網(wǎng)站結(jié)構(gòu)像迷宮，蜘蛛找不到路。

　　蜘蛛爬取靠“鏈接導航”，要是網(wǎng)站導航混亂，比如沒明確的“首頁→分類→內(nèi)容頁”層級、又或者是沒加 “面包屑導航”（像“首頁→手機→蘋果機型” 這樣的路徑提示），更糟糕的是有“死鏈接”（點進去顯示 “404 頁面不存在”），這些情況，都會導致蜘蛛爬不到內(nèi)容，所以大家在建網(wǎng)站的時候要記得把導航做清晰，并定期檢查并刪掉死鏈接，給蜘蛛留條“順暢的路”。

　　3、內(nèi)容沒“營養(yǎng)”，蜘蛛不愿帶。

　　蜘蛛爬取是為了抓取有價值的內(nèi)容，要是網(wǎng)站內(nèi)容全是大段的圖片/視頻（沒配文字說明，蜘蛛看不懂）、或直接抄其他網(wǎng)站的內(nèi)容，沒啥價值的話，蜘蛛根本就不想抓取，因為這樣的內(nèi)容給不了搜索引擎用戶幫助。所以要讓蜘蛛愿意爬，內(nèi)容要得原創(chuàng)、有干貨、有價值才行。

　　4、亂設“禁止入內(nèi)”，把蜘蛛擋在門外。

　　網(wǎng)站根目錄有個“robots 協(xié)議”，相當于門口貼的“訪客須知”，要是誤設置成“禁止所有蜘蛛爬取”，比如新手不懂，隨便復制別人的 robots 代碼，蜘蛛看到直接轉(zhuǎn)身走。建網(wǎng)站后一定要檢查 robots 協(xié)議，只禁止爬取沒用的頁面，核心內(nèi)容頁（首頁、產(chǎn)品頁）要允許蜘蛛進入。

　　5、移動端沒法看，蜘蛛“另眼相看”。

　　現(xiàn)在搜索引擎先爬取移動端內(nèi)容，要是網(wǎng)站只做了電腦端，手機打開后文字小到看不清、按鈕擠在一起（沒做響應式適配）。比如用戶用手機看你的博客，文章段落全堆在一起，沒換行沒分段，蜘蛛爬取時也會覺得“體驗差”，爬取優(yōu)先級會降低。在建網(wǎng)站的時候也一定要做移動端適配，才能保證手機端能正常瀏覽。

　　其實影響蜘蛛爬取的核心，就是 “讓蜘蛛好爬、好懂、有收獲”，大家可以多看看以上幾點，來幫助網(wǎng)站吸引蜘蛛頻繁 “上門” 爬取，從而進一步讓更多用戶找到你。