當前位置: 南京SEO網站優化網 > SEO教程 > 名詞解釋 >

名詞解釋

Robots.txt文件是什么?有什么作用呢?

  • 2016-07-28 08:24
  • 閱讀(
  • 作者(南京SEO網站優化網)
  • 來南京SEO網站優化網,為您提供2017年最專業的SEO服務,包含SEO按天計費、整站優化等服務。點此查看詳情

    亚洲中文无码Robots.txt文件是什么?有什么作用呢? robots.txt文件是一個文本文件,使用任何一個常見的文本編輯器,比如Windows系統自帶的Notepad,就可以創建和編輯它。robots.txt是一個協議,而不是一

    Robots.txt文件是什么?有什么作用呢?

    Robots.txt文件是什么?有什么作用呢?

    robots.txt文件是一個文本文件,使用任何一個常見的文本編輯器,比如Windows系統自帶的Notepad,就可以創建和編輯它。robots.txt是一個協議,而不是一個命令。robots.txt是搜索引擎中訪問網站的時候要查看的第一個文件。robots.txt文件告訴蜘蛛程序在服務器上什么文件是可以被查看的。

    Robots.txt文件的作用:

    1、屏蔽網站內的死鏈接

    2、屏蔽搜索引擎蜘蛛抓取站點內重復內容和頁面。

    3、阻止搜索引擎索引網站隱私性的內容。

    因此建立robots.txt文件是很有必要的,網站中重復的內容、頁面或者404信息過多,搜索引擎蜘蛛就會認為該網站價值較低,從而降低對該網站的“印象分”,這就是我們經常聽到的“降低權重”,這樣網站的排名就不好了。

    robots.txt文件需要注意的最大問題是:必須放置在一個站點的根目錄下,而且文件名必須全部小寫。

    亚洲中文无码 robots.txt文件的基本語法只有兩條,第一條是:User-agent,即搜索引擎蜘蛛的名稱;第二條是:Disallow,即要攔截的部分。

    亚洲中文无码 下面我們看一下撰寫基本的robots.txt文件所需要知道的一些語法和作用。

    亚洲中文无码 (1),允許所有的搜索引擎訪問網站的所有部分或者建立一個空白的文本文檔,命名為robots.txt。

    亚洲中文无码 User-agent:*Disallow:或者User-agent:*Allow:/

    (2),禁止所有搜索引擎訪問網站的所有部分。

    亚洲中文无码 User-agent:*Disallow:/

    亚洲中文无码 (3),禁止百度索引你的網站。

    User-agent:BaiduspiderDisallow:/

    亚洲中文无码 (4),禁止Google索引你的網站。

    User-agent:GooglebotDisallow:/

    (5),禁止除百度以外的一切搜索引擎索引你的網站。

    User-agent:BaiduspiderDisallow:User-agent:*Disallow:/

    (6),禁止除Google以外的一切搜索引擎索引你的網站。

    User-agent:GooglebotDisallow:User-agent:*Disallow:/

    亚洲中文无码 (7),禁止和允許搜索引擎訪問某個目錄,如:禁止訪問admin目錄;允許訪問images目錄。

    User-agent:*Disallow:/admin/Allow:/images/

    (8),禁止和允許搜索引擎訪問某個后綴,如:禁止訪問admin目錄下所有php文件;允許訪問asp文件。

    User-agent:*Disallow:/admin/*.php$Allow:/admin/*.asp$

    (9),禁止索引網站中所有的動態頁面(這里限制的是有“?”的域名,如:index.php?id=8)。

    亚洲中文无码 User-agent:*Disallow:/*?*

    ?

    亚洲中文无码本文原創發布于南京SEO網站優化網(http://joydo001.com)。未經許可,禁止轉載。

    分享到微博 分享到微信

    分享到微信朋友圈

    《Robots.txt文件是什么?有什么作用呢?》二維碼分享

    南京SEO網站優化網(joydo001.com)是由南京SEO公司新生彩票創辦的南京地區最大、最活躍的以SEO為核心的服務、學習、交流平臺,集企業服務、SEO培訓、社群活動為一體,全方位服務各類客戶。南京SEO網站優化網已服務500余家企業,免費SEO診斷數千家網站,全面覆蓋南京SEO市場,已經得到了南京地區的廣泛關注和高度好評。南京SEO網站優化網為您提供全方位的SEO外包服務!
    • 新生彩票
    • 藍蝶網絡
    a片_大量偷拍情侣自拍视频_亚洲在线成色综合网站_日本三级片 日本在线加勒比一本道_日本视频高清免费观看_日本成人电影 a片_欧美av_韩国三级片_日本av