網站不(No)被收錄的(of)原因

一(one)、robots.txt文件

Robots.txt文件對網站優化前期至關重要(want)，設置得好網站優化排名周期縮短，弄得不(No)好，連網站收錄都成問題。例如許多網站上(superior)線或者改版之後，常常會在(exist)百度快照上(superior)看到(arrive)這(this)樣的(of)一(one)句話“由于(At)該網站的(of)robots.txt文件存在(exist)限制指令，系統無法提供該頁面的(of)内容描述” 一(one)般都不(No)懂的(of)新手們(them)，都會以(by)爲(for)搜索引擎抓取出(out)問題了(Got it)吧，怎麽搞的(of)。其實，這(this)明顯就是(yes)因爲(for)網站robots文件屏蔽操作(do)導緻的(of),對于(At)這(this)種情況，網站不(No)收錄完全就是(yes)正常情況，小編隻想說，不(No)修改robots.txt文件沒其他(he)辦法拉!不(No)知道robots.txt文件怎麽寫的(of)童鞋，可以(by)去參考這(this)篇文章：《規範搜索引擎抓取收錄的(of)書寫》。

另外關于(At)robots.txt文件導緻網站沒收錄的(of)原因還有一(one)個(indivual)，那就是(yes)網站上(superior)線前期，許多小夥伴認爲(for)網站内容還不(No)夠完善，還需要(want)作(do)調整，于(At)是(yes)就在(exist)robots.txt文件裏面寫下禁止所有搜索引擎蜘蛛來(Come)抓取，想着等網站完善好了(Got it)，再更改規則讓搜索引擎蜘蛛來(Come)抓取。小編隻想說每個(indivual)人(people)都是(yes)有脾氣的(of)，搜索引擎蜘蛛雖然是(yes)機器，但脾氣絕對不(No)小，你網址能正常打開，一(one)次來(Come)你拒之門外，二次三次也還是(yes)拒之門外，然後搜索引擎蜘蛛就啓用(use)它的(of)記憶功能了(Got it)，這(this)家夥給我(I)的(of)第一(one)印象極差，多次上(superior)門都不(No)請我(I)進去坐坐，後果可想而知。所以(by)就算過一(one)段時(hour)間再把禁止規則去掉，蜘蛛已經長時(hour)間不(No)來(Come)光顧，網站沒有收錄也是(yes)再正常不(No)過。

 

二、網站框架

不(No)得不(No)說很多SEOer十分嚴重的(of)一(one)個(indivual)問題：不(No)會搭建網站。事實就是(yes)80%的(of)SEOer都隻會套網站模闆，然後簡單修改修改就算是(yes)完成網站搭建了(Got it)，盡管很多優秀的(of)seo網站也是(yes)這(this)樣過來(Come)的(of)，但更多的(of)是(yes)失敗的(of)例子。搜索引擎之所以(by)會收錄這(this)個(indivual)網站的(of)頁面，首先是(yes)這(this)個(indivual)頁面的(of)框架是(yes)符合抓取規則的(of)，不(No)然網站全部都是(yes)js和(and)圖片，搜索引擎壓根很難識别，就算是(yes)網站框架是(yes)符合規則的(of)，但蜘蛛抓取完後必然會經過一(one)套過濾删除，符合它胃口的(of)頁面才真正被收錄，在(exist)此期間有一(one)個(indivual)很重要(want)的(of)一(one)點就是(yes)，不(No)要(want)經常改動網站框架，不(No)然網站沒有收錄也是(yes)情理之中吖!蜘蛛就喜歡專一(one)的(of)人(people)，這(this)樣印象才好，才有信任度。

 

三、頁面内容

不(No)少SEOer都一(one)緻認爲(for),搜索引擎是(yes)以(by)“内容爲(for)王”，實際也是(yes)八九不(No)離十，網站内容的(of)重要(want)性幾乎可以(by)影響整個(indivual)網站的(of)優化排名結果，舉個(indivual)簡單的(of)例子，一(one)個(indivual)網站站内基礎優化做得十分出(out)色，無可挑剔，但網站的(of)内容是(yes)采集回來(Come)的(of)，也就是(yes)全部複制别人(people)的(of)，結果是(yes)這(this)個(indivual)網站幾乎沒有頁面被收錄，原因當然是(yes)就是(yes)搜索引擎經過它的(of)計算，知道你的(of)内容是(yes)複制來(Come)的(of)，價值不(No)高，沒收錄的(of)必要(want)。另一(one)個(indivual)網站站内基礎優化做的(of)比較差，頁面做的(of)也不(No)好，但它的(of)網站内容确實原創的(of)内容而且剛好就是(yes)滿足用(use)戶需求的(of)内容，結果是(yes)這(this)個(indivual)網站的(of)頁面基本都收錄了(Got it)，排名也還不(No)錯。

總的(of)來(Come)說就是(yes)搜索引擎就是(yes)要(want)找有價值的(of)内容，如果網站沒有具有價值的(of)内容，在(exist)搜索引擎看來(Come)這(this)個(indivual)網站是(yes)低價值的(of)，不(No)管這(this)個(indivual)網站在(exist)用(use)戶看來(Come)有多好看、有多大(big)氣、特效有多炫，關于(At)網站内容大(big)家可以(by)參考《做好SEO營銷之軟文寫作(do)推廣》。小編認爲(for)，網站内容原創不(No)原創還不(No)是(yes)重點，重點是(yes)這(this)個(indivual)内容是(yes)否重複的(of)，是(yes)否對用(use)戶有價值的(of)，隻要(want)不(No)是(yes)完全一(one)樣的(of)而又對用(use)戶有價值的(of)内容，頁面收錄不(No)是(yes)問題!

 

四、heimao技術

之前有個(indivual)SEOer朋友，他(he)新網站上(superior)線前期，收錄扛扛的(of)，當時(hour)還沾沾自喜，前幾天找到(arrive)我(I)跟我(I)說網站收錄全沒了(Got it)，我(I)再三追問之下，得知原來(Come)是(yes)爲(for)了(Got it)加快網站收錄用(use)了(Got it)heimao技術，被懲罰得到(arrive)現在(exist)都沒恢複。在(exist)此告誡小夥伴們(them)切勿違反搜索引擎制定的(of)規則，明文規定會懲罰的(of)千萬不(No)要(want)去做，誰試誰知道，倒黴的(of)最終都是(yes)自己，短期的(of)效果雖然十分誘惑，但一(one)旦被懲罰，前期付出(out)的(of)努力豈不(No)是(yes)白白浪費?所以(by)說正規白帽SEO才是(yes)能長期帶來(Come)效益的(of)最佳途徑，且行且珍惜。