robots.txt 是存放在站點根目錄下的一個純文本文件。雖然它的設置很簡單,但是作用卻很強大。它可以指定搜索引擎蜘蛛只抓取指定的內容,或者是禁止搜索引擎蜘蛛抓取網站的部分或全部內容。這篇文章就講解一下,zblog博客程序中如何設置robots.txt文件

zblog 目錄文件

寫robots.txt規則之前,要先了解zblog 所包含的文件,文件夾以及它們的作用是什么。以下圖片所展示的內容,為全新的zblog博客安裝包,所包含的文件夾以及文件。

zblog博客的robots.txt文件的寫法

feed.php : RSS Feed 入口文件

index.php : 前端頁面入口文件

国产视频appsearch.php : 搜索入口文件

国产视频appzb_install 文件夾:zblog 初始化安裝文件夾,安裝完畢會自動刪除,或手動刪除

国产视频appzb_system 文件夾:為 zblog 框架的主要文件,需要屏蔽搜索蜘蛛去它以及它所包含的內容抓取

zb_users 文件夾:為 zblog 為用戶文件夾,里面包含了主題文件夾,插件文件夾,以及附件存放文件夾。

zblog博客的robots.txt文件的寫法

国产视频appavatar :用戶頭像文件夾

国产视频appcache :緩存文件夾

data :數據文件夾(屏蔽蜘蛛)

emotion :表情文件夾

language :語言包文件夾(屏蔽蜘蛛)

国产视频applogs :目志文件夾,里面文件是記錄錯誤的(屏蔽蜘蛛)

plugin :插件文件夾

theme :主題文件夾

upload :附件文件夾(圖片或其它類型文件)

zblog博客的robots.txt文件的寫法

国产视频app以下輸入規則,僅供參考

User-agent: *
Disallow: /zb_system/
Disallow: search.php
Disallow: /zb_users/data/
Disallow: /zb_users/language/
Disallow: /zb_users/logs/
Sitemap:http://xswdd.cn/sitemap.xml

注意:sitemap.xml 為網站的地圖文件,可以在zblog應用中心搜索相關的插件,使用zblog墨初VIP主題,以及zblog墨初CMS主題的用戶不需要安裝此類插件

robots.txt安裝與效驗

国产视频approbots.txt 文件應該放在網站根目錄下,并且該文件是可以通過互聯網進行訪問的,否則是沒有什么作用的。

安裝方法

国产视频app1、本地新建‘文本文檔’并命名為 'robots.txt' 把上面的內容復制,保存即可

2、把 'robots.txt'文件上傳到服務器的網站根目錄即可

rotots.txt文件效驗

可以通過百度搜索資源平臺進行效驗,

zblog博客的robots.txt文件的寫法

網址:http://ziyuan.baidu.com