一个寝室3个攻一受全h_97国产福利_在线中文字幕理伦电影_www.youjizz.com国产

首頁?>?知識?資訊?>?什么是robots協議??>?正文

什么是robots協議?

2014/12/26 0:00:00 · 稿源:傳誠信

robots協議:robots.txt是搜索引擎訪問一個網站時要訪問的第一個文件,用以來確定哪些是被允許抓取的哪些是被禁止抓取的。robots.txt必須放在網站根目錄下,且文件名要小寫。詳細的robots.txt寫法可參考http://www.robotstxt.org。

百度嚴格按照robots協議執行,另外,同樣支持網頁內容中添加的名為robots的meta標簽,index、follow、nofollow等指令。


  • 相關推薦
  • 大家在看
客戶服務
咨詢熱線

010-62199213

24小時咨詢熱線

139-1050-5354