http://www.piece2ec.com.tw/News.asp?Id=69
SEO關鍵字常用術語〈二〉
1.Robot
Robor,機器人程式,指搜索引擎中負責擷取資訊的程式,又稱Spider,即蜘蛛程式。
2.Robots.txt
1)什麼是Robots.txt
Robots.txt是一個純文字檔案,它的作用就是限制搜索引擎對網站中某些網頁的進行造訪。當搜索引擎的蜘蛛程式造訪一個網站時,首先會檢查這個網站的根目錄是否存在“robots.txt”檔案,如果存在,那麼就按照這個檔案制定的規則擷取網頁,否則沿著網頁中的連結進行擷取。
2)Robots.txt語法
“robots.txt”檔案中包含一條或多條記錄,每條記錄都是透過空行進行分隔﹝註釋標記為“#”﹞,以User-agent開始,後面加上Allow或是Disallow。如:
User-agent:*
Disallow:/Admin/
a.User-agent
這個值用於描述搜尋引擎蜘蛛程式﹝robot﹞的名子,在“robots.txt”檔案中,如果有多條User-agent記錄,那麼說明有多個robot會受到這個規則限制。在“robots.txt”檔案裡,至上有一條User-agent記錄,如果這個值為“*”,那麼就是表示這個規則對於所有蜘蛛程式都是有效的,但在“robots.txt”檔案中,“User-agent:*”只能出現一次。
b.Disallow
這一項用於描述不希望被搜索引擎擷取的網頁,任何以Disallow開頭的URL或是目錄均不會被指定的蜘蛛程式擷取。
如果Disallow記錄為空的話,那麼說明這個網站的所有網頁都是允許搜索引擎擷取的,在“robots.txt”檔案中,至少會要有一條Disallow記錄。
如果“robots.txt”是一個空檔案,那麼就是表示所有搜索引擎都可以擷取這個網站中的所有網頁。
下面是robots.txt的一些基本用法:
a.禁止所有搜索引擎擷取本網站下的所有網頁
User-agent:*
Disallow:/
b.允許所有的搜索引擎擷取本網站下的所有網頁
User-agent:*
Disallow:
或是也可以建立一個空“robots.txt”檔案
c.禁止所有搜索引擎擷取本網站下的某個網頁
User-agent:*
Disallow:/cgi-bin/
Disallow:/tmp/
Disallow:/admin/
d.禁止某個的搜索引擎擷取本網站下的所有網頁
User-agent:搜索引擎蜘蛛程式名稱
Disallow:/
e.只允許某個的搜索引擎擷取本網站下的所有網頁
User-agent:搜索引擎蜘蛛程式名稱
Disallow:
3)Robots meta標記
Robots meta標記用於限制搜索引擎對當前網頁的擷取,存放在網頁的頭部當中。例如:
< html>
< head>
< title>.....< /title>
< meta name="robots" content="noindex,nofollow">
< /head>
.....
常見的“content”內容值包括:
noindex 不索引目前網頁;
nofollow 不跟蹤目前網頁中所有的連結擷取;
noarchine 在搜索結果中不保存目前網頁的快取;
nosnippet 在搜索結果中不採用目前網頁的頭部描述資訊,而且不保存目前網頁的快取;
noodp 搜索結果中不使用ODP中的資訊。
來源:SEO網路大行銷
參考文獻:
iProspect(2008). iProspect Blended Search Results Study,
d2seo (2010). Effective SEO & PPC,
ikipedia, PPC (2010).
林智新(民97)。網路搜尋影響點擊廣告因素之探討,大同大學資訊經營學系所碩士論文。
悠立科技(民98)。SEO 搜尋引擎最佳化與PPC 點擊付費的比較分析。
Eva M. Thury(1998). Analysis of Student Web Browsing Behavior: Implications for Designing and Evaluating Web Sites, Proceedings of the 16th annual international conference on Computer documentation.
Ganesan Velayathan(2007). Can We Find Common Rules of Browsing Behavior?.
Google analytics (2010). Google analytics Help
相關文章
SEO關鍵字常用術語〈一〉
什麼是平面設計
看歐巴馬如何用IT成功行銷自己
網路廣告基本術語
最新文章
SEO關鍵字常用術語〈一〉
基礎網頁設計色彩概念
在Google打關鍵字查詢時,突然被Google封鎖查詢的解除辦法
瞭解一下什麼是網站設計的定義
行銷總監看過來!”社群媒體地形圖”與其適用行銷目的