相信巨匠對于QQ空間robot文件的印象都是勾留在其屏障了百度搜索，百度無法抓取QQ空間的內容。而比濫暌剮一篇文章《剖析QQ空間能否做百度關頭詞排名？》，文章說今朝QQ空間上的內容也可以被索引抓取，原因是騰訊QQ空間已經解除了對于搜素引擎的robot屏障，這篇文章改變了筆者對于QQ空間Robot文件的觀點。筆者對此發生樂趣，于是對QQ空間的robot進行了不雅察看，發現了QQ空間robot設置的一些小細節，如下圖所示。
在上圖我們確實可以看到今朝QQ空間已經解除了對于搜索引擎的屏障。今朝所有的搜索引擎蜘蛛都可以對QQ空間進行爬行抓取。而在Robot文件的最后一行筆者發現了一個小細節，筆者發現多寫了一行：sitemao：http://XXX.xml。很較著這是一個地圖文件。那么為什么QQ空間為什么要在最后一行寫上站點的網站地圖呢?要知道原因首先我們需要對robot文件進行進一步的體味。
作為seoer我們都應該很清囂張robots文件的浸染是奉告搜索引擎蜘蛛我們站點上什么頁面是可以爬行什么頁面是禁止進入的。當搜索引擎蜘蛛進入我們的站點，體味到這些信息后，它就可以按照信息把精神集中于我們許可爬行的頁面，提高頁面的爬行效率。而在這一過程中我們是否健忘了關頭的一點，那就是搜索引擎進入我們的站點第一個接觸到的文件是什么?沒錯就是robot文件。對此我們可以在這一點上在我們的robot上做文章來讓搜索引擎蜘蛛加倍有用率的爬行我們的站點，晉升站點的爬行率。
我們可以很確定的說QQ空間在robot文件的最后寫上站點的地圖文件就是為了晉升搜索引擎對于站點的爬行率。當搜索引擎蜘蛛進入QQ空間后，首先尋找robot文件，當在robot文件上就可以直接找到站點的地圖文件。年夜催促進蜘蛛經由過程地圖文件對我們的站點進行加倍深而廣的爬行與索引。
對于這個小細節筆者一向都是處于輕忽的狀況，而作為QQ空寄這種年夜型的站點都放過這種小細節，我們的站點更需要注重，往往這些小細節可以締造出年夜的文章。但愿本文對于巨匠有所輔佐。
本文由巨型一號絲瓜水官網http://www.siguashui.cc/ 原創，轉載請保留出處。
網友點評
精彩導讀
科技快報
品牌展示