搜索引擎蜘蛛工作原理搜索引擎蜘蛛是通過鏈接地址來尋找網(wǎng)頁的。網(wǎng)站優(yōu)化搜索引擎蜘蛛名稱隨搜索引擎的不同而不同。那它的原理是由一個起始鏈接開始抓取網(wǎng)頁內(nèi)容，同時也采集網(wǎng)頁上的鏈接，并將這些鏈接作為它下一步抓取的鏈接地址，如此循環(huán)，直到達(dá)到某個停止條件后才會停止。停止條件的設(shè)定通常是以時間或是數(shù)量為依據(jù)，可以通過鏈接的層數(shù)來限制網(wǎng)絡(luò)蜘蛛的爬取。同時頁面信息的重要性為客觀因素決定了蜘蛛對該網(wǎng)站頁面的檢索。站長工具中的搜索引擎蜘蛛模擬器其實它就是這個原理?；谶@蜘蛛工作原理，站長都會不自然的增加頁面關(guān)鍵詞出現(xiàn)次數(shù)，雖然對密度產(chǎn)生量的變化，但對蜘蛛而言并沒達(dá)到一定的變化。這在搜索引擎優(yōu)化過程中應(yīng)該要避免的。影響因素由國外37名優(yōu)秀的SEO界高手共同參與，以投票形式評論影響Google排名的重要因素，此次評選非常有價值，盡管沒有將200多個Google排名因素全部列出，但Google排名算法中90%-95%的重要成分已經(jīng)包含在其中了。正面因素排名 得分 分類 詳細(xì)說明1 關(guān)鍵詞（1）關(guān)鍵詞在網(wǎng)站TITLE上的使用（2）關(guān)鍵詞在網(wǎng)頁內(nèi)容上的應(yīng)用（3） 頁面內(nèi)容和關(guān)鍵詞的相關(guān)性（語義分析）（4） 關(guān)鍵詞在H1標(biāo)簽中的使用（5） 關(guān)鍵詞在網(wǎng)站域名中的使用（6） 關(guān)鍵詞在頁面URL中的使用（7） 關(guān)鍵詞在H2、H3等Headline標(biāo)簽中的使用（8） 圖片的關(guān)鍵詞優(yōu)化（9） 關(guān)鍵詞在Meta Description中的使用（10） 關(guān)鍵詞在Meta Keywords中的使用2 外部鏈接（1）外部鏈接的錨文字（2） 外部鏈接頁面本身的鏈接流行度（3） 外部鏈接頁面的主題性（4） 外部鏈接頁面在相關(guān)主題的網(wǎng)站社區(qū)中的鏈接流行度（5） 鏈接的年齡（6） 鏈接的周圍文字（7） 同域名下外部鏈接頁面的鏈接流行度（8） 外部鏈接的創(chuàng)建和更新時間（9）外部鏈接網(wǎng)站域名的特殊性（10） 外部鏈接網(wǎng)站的PR值3 網(wǎng)站品質(zhì)（1） 網(wǎng)站的外部鏈接流行度、廣泛度（2） 域名年齡（從被搜索引擎索引開始計算）（3） 網(wǎng)站的外部鏈接頁面內(nèi)容與關(guān)鍵詞的相關(guān)性（4）網(wǎng)站在主題相關(guān)的網(wǎng)站群中的鏈接流行度（5） 網(wǎng)站新外部鏈接產(chǎn)生的速率（6） 網(wǎng)站收錄數(shù)量（7） 用戶查詢的關(guān)鍵詞與網(wǎng)站主題的相關(guān)性（防止Google bombing）（8） 用戶行為（9） Google的人工授予權(quán)重（10） 域名的特殊性（.edu .gov等）（11） 新頁面產(chǎn)生的速率（12） 用戶搜索網(wǎng)站的次數(shù)（13） 網(wǎng)站是否通過Google Webmaster Central的認(rèn)證4 頁面質(zhì)量（1）網(wǎng)站內(nèi)部鏈接結(jié)構(gòu)（2） 導(dǎo)出鏈接的質(zhì)量和相關(guān)性（3） 頁面的年齡（4） 頁面內(nèi)容的質(zhì)量（5） 網(wǎng)站的結(jié)構(gòu)層次（6） URL中“/”符號的出現(xiàn)次數(shù)（7） 拼寫和語法的正確性（8） HTML代碼是否通過W3C認(rèn)證5 權(quán)重標(biāo)簽 strongheading標(biāo)簽在頁面內(nèi)容中的使用6 nofllow標(biāo)簽nofollow標(biāo)簽在頁面鏈接及meta中的使用。7 針對百度的SEO優(yōu)化負(fù)面因素排名 得分 詳細(xì)說明1、服務(wù)器經(jīng)常無法響應(yīng)；2 、與Google已經(jīng)收錄的內(nèi)容高度重復(fù)；3 、鏈向低質(zhì)量或垃圾站點；4 、網(wǎng)站大量頁面存在重復(fù)的META標(biāo)簽；5 、過分堆砌關(guān)鍵詞；6 、參與鏈接工廠或大量出售鏈接；7 、服務(wù)器響應(yīng)時間非常慢；8 、網(wǎng)頁主要META更改頻率過高；9 、非常低的流量，用戶行為反映差；10、SEO優(yōu)化中關(guān)鍵詞布局技巧把頁分成小組H1(由主要關(guān)鍵詞組成) 在每頁唯一使用的一個H1標(biāo)簽H2(相似的分題重復(fù)主要關(guān)鍵詞短語)段落H2(另外的一個次要主題用一些相似或重疊的變種關(guān)鍵詞))段落H2(有時一些分標(biāo)題沒有關(guān)鍵詞，但是大多數(shù)也做成H2的標(biāo)題)段落STRONG標(biāo)簽用于站長們文章內(nèi)容的關(guān)鍵詞突出顯示通常副標(biāo)題將會把重心集中在一個些較長的關(guān)鍵詞短語，特別要超過主標(biāo)題,但是也將會包含一些與主標(biāo)題相同的詞組。另外描寫的副標(biāo)題也要改進(jìn)站長們的網(wǎng)站的瀏覽效率和可用性。建議每頁使用一個H1標(biāo)簽，用其他的字組文本輔助關(guān)鍵詞構(gòu)成那標(biāo)題標(biāo)簽中的信息。關(guān)鍵詞的提取大部分的網(wǎng)站以HTML格式存在，對于索引來說，只需要處理文本信息。因此需要把網(wǎng)頁中內(nèi)容提取出來，再過濾一些腳本如JS等以廣告形式存在的內(nèi)容，同時記錄文本的版面格式信息，網(wǎng)頁處理主要包括4個方面：關(guān)鍵詞的提取，重復(fù)，轉(zhuǎn)載的消除，鏈接分析，和網(wǎng)頁重要度計算，關(guān)鍵詞是怎么提取的，由于HTML 網(wǎng)頁來源多樣性，內(nèi)容比較隨意，新人SEO且不講究規(guī)范，工整，包含了許多無關(guān)的信息，中文網(wǎng)頁用到了詞典和切詞軟件，不應(yīng)該在文本中出等詞，稱為停用詞，有效詞語要保證在200左右。與關(guān)鍵詞有關(guān)的頁面排名因素1.標(biāo)題標(biāo)簽中第一個字或者詞使用關(guān)鍵詞2.域名中含有關(guān)鍵詞3.H 1標(biāo)簽使用了關(guān)鍵詞4.頁面上導(dǎo)出內(nèi)部鏈接錨文字中使用了關(guān)鍵詞5.頁面上導(dǎo)出外部鏈接錨文字中使用了關(guān)鍵詞6.頁面前50-100個可見文字中使用了關(guān)鍵詞7.子域名中包含關(guān)鍵詞8.目錄名中還有關(guān)鍵詞9.其他正文標(biāo)題（H2、H3）中使用了關(guān)鍵詞常見術(shù)語鏈接場（Link Farm）在 SEO 術(shù)語中，鏈接場是指一個充滿鏈接的頁面，這些鏈接其實沒有實際作用，它們只作為鏈接存在，而沒有任何實際的上下文。那些采用運用黑帽 SEO 方法的人利用鏈接場，在一個頁面中增加大量鏈接，希望能通過這種方式使 Google 誤認(rèn)為這個頁面很有鏈接的價值。交互鏈接（Reciprocal Link）也稱作雙向鏈接，是對一個網(wǎng)頁不光有超文本鏈接，同時對應(yīng)有和原始網(wǎng)頁的鏈接。有機列表（Organic Listing）有機列表是 SERP 中的免費列表。有機列表的 SEO 通常涉及改進(jìn) Web 站點的實際內(nèi)容，這往往是在頁面或基礎(chǔ)架構(gòu)級別進(jìn)行的。PageRankPageRank是迷戀Google的人們用來測試其站點在 Google 中的排名的一種度量標(biāo)準(zhǔn)。SEO 和搜索引擎營銷（SEM）專家也使用這個術(shù)語描述網(wǎng)頁在 SERP 中的排名以及 Google 根據(jù)排名算法給予站點的分?jǐn)?shù)。無論如何定義，PageRank 都是 SEO 的重要部分。付費列表（Paid Listing）顧名思義，付費列表就是只有在付費后才能列入搜索引擎的服務(wù)。根據(jù)搜索引擎的不同，付費列表可能意味著：為包含于索引之中、每次點擊（PPC）、贊助商鏈接（Sponsored Link）或者在搜索目標(biāo)關(guān)鍵詞和短語時讓站點出 SERP 中的其他方式而付費。永久重定向（Permanent Redirect）也被稱為301 重定向，是一條對網(wǎng)站瀏覽器的指令來顯示瀏覽器被要求顯示的不同的URL，當(dāng)一個網(wǎng)頁經(jīng)歷過其URL 的最后一次變化以后時使用。一個永久定向是一種服務(wù)器端的重定向，能夠被搜索引擎蜘蛛適當(dāng)?shù)靥幚?。排名（Ranking）排名是頁面在目標(biāo)關(guān)鍵詞的SERP中列出的位置。SEO 的目標(biāo)是提高 Web 頁面針對目標(biāo)關(guān)鍵詞的排名。排名算法（Ranking Algorithm）排名算法是搜索引擎用來對其索引中的列表進(jìn)行評估和排名的規(guī)則。排名算法決定哪些結(jié)果是與特定查詢相關(guān)的。搜索引擎營銷（Search Engine Marketing，SEM）SEM 這個術(shù)語可以與 SEO 互換使用，但 SEM 常常是指通過付費和廣告向搜索引擎推銷 Web 站點，同時應(yīng)用 SEO 技術(shù)。搜索引擎優(yōu)化（Search Engine Optimization，SEO）SEO 就是根據(jù)對搜索引擎的吸引力和可見性來優(yōu)化內(nèi)容，從而使 Web 頁面能夠被搜索引擎選中。SEO 主要用來提高有機列表的排名。搜索引擎結(jié)果頁面（Search Engine Results Page，SERP）SERP 是為特定搜索顯示的列表或結(jié)果。SERP 有時候定義為搜索引擎結(jié)果的安排（placement）。根據(jù)本系列的目的，我將其稱為頁面而不是安排。在SEO領(lǐng)域中，在SERP中取得良好的表現(xiàn)就是一切。垃圾技術(shù)（Spamming）垃圾技術(shù)是一種欺詐性的SEO手段，它嘗試欺騙爬行器（Spider），并利用排名算法中的漏洞來影響針對目標(biāo)關(guān)鍵詞的排名。垃圾技術(shù)可以表現(xiàn)為多種形式，但是 “垃圾技術(shù)” 最簡單的定義是 Web 站點用來偽裝自己并影響排名的任何技術(shù)。關(guān)鍵字隱密字 （Hidden Text With Keyword Stuffing）是另外一欺騙搜索引擎的做法。通常是指設(shè)置關(guān)鍵字的顏色和網(wǎng)頁背景顏色一樣，或通過 CSS Hidden Attribute （隱密特性） 來達(dá)到優(yōu)化效果。這種做法一旦被Google發(fā)現(xiàn)，遭遇也會是該站點從Google的數(shù)據(jù)庫中除名。爬行器（Spider）爬行器在 Web 上漫游，尋找要添加進(jìn)搜索引擎索引中的列表。爬行器有時也稱為 Web 爬行榜（Webcrawler）或機器人。針對有機列表優(yōu)化頁面也就是為了吸引爬行器的注意。在SEO中過多使用flash和Ajax技術(shù)，會給搜索引擎帶來很多麻煩,搜索引擎還不能很好地索引由flash、ajax表現(xiàn)的網(wǎng)頁,原因就是搜索引擎只索引頁面,而不會索引應(yīng)用程序。還有即使搜索引擎做到了完全解釋Flash文件或者ajax應(yīng)用程序，并能分析和索引它們的相關(guān)內(nèi)容，也還是沒有任何辦法使用url導(dǎo)航應(yīng)用程序，對排名沒有一點幫助。搜索引擎的主要目標(biāo)的是將搜索結(jié)果提交給用戶，但當(dāng)處理這些媒體信息時，搜索引擎將無法排列這些信息的順序?？傊現(xiàn)lash和Ajax將會帶來有創(chuàng)意的設(shè)計，也會帶來更難偵測的垃圾網(wǎng)站形式。谷歌索引的Flash，給的建議就是，網(wǎng)站設(shè)計者應(yīng)該僅在需要使用Flash和 Ajax的地方使用它，應(yīng)該主要還是多使用HTML語言設(shè)計網(wǎng)站，而將Flash和Ajax作為輔助技術(shù)，為用戶提供切實的好處。通常，HTML和 JavaScript的混合也基本可以達(dá)到使用這些技術(shù)的效果。也就是說，在使用Flash和Ajax時應(yīng)把它們當(dāng)成頁面上的單元，而不是頁面本身。Link Popularity 網(wǎng)站的鏈接廣泛度。在搜索引擎排名中的作用已得到廣泛的認(rèn)同和重視。實際上，即使站長們沒有在GOOGLE上提交站長們的站點，但與其它網(wǎng)站作了鏈接，Google也可能收錄站長們的網(wǎng)站。搜索引擎還可能完全依據(jù)站長們的鏈接廣泛度決定站長們的網(wǎng)站排名。Internal Links 內(nèi)部鏈接：本網(wǎng)站內(nèi)部網(wǎng)頁之間的鏈接External Links外部鏈接：本網(wǎng)站外部的鏈接，一般是指其他網(wǎng)站連到本網(wǎng)站的鏈接Backward Links或Incoming/Inbound Links反向/導(dǎo)入鏈接：意義與“外部鏈接”接近，指其他網(wǎng)站連到本網(wǎng)站的鏈接Outgoing/Outbound Links導(dǎo)出鏈接：指從本網(wǎng)站連到其他網(wǎng)站的鏈接Search Engine Positioning 搜索引擎定位Search Engine Ranking 搜索引擎排名External Files外部文件存儲把JavaScript文件和CSS文件分別放在JS和CSS外部文件中。這樣做的好處是把重要的頁面內(nèi)容放到頁面頂部，同時能縮小文件大小。有利于搜索引擎快速準(zhǔn)確地抓取頁面重要內(nèi)容。Keyword Density 關(guān)鍵詞密度ROBOTS 搜索機器人Affiliate Marketing 聯(lián)屬網(wǎng)絡(luò)營銷（會員制營銷、網(wǎng)站聯(lián)盟等）聯(lián)屬網(wǎng)絡(luò)營銷 指的是一種網(wǎng)站A為網(wǎng)站B放置廣告按鈕，然后從為網(wǎng)站B帶來的銷售額中獲得回傭的一種廣告系統(tǒng)。某些廣告主通過這種方式獲得市場信息而不是現(xiàn)金銷售。這種方式被營銷費用比較緊張的新網(wǎng)站采用得比較普遍。Cost-Per-Click （簡稱CPC）按點擊數(shù)付費聯(lián)屬網(wǎng)絡(luò)營銷管理系統(tǒng)記錄每個客人在聯(lián)屬會員網(wǎng)站上點擊到商家網(wǎng)站的文字的或者圖片的鏈接（或者Email鏈接）次數(shù)，商家（Merchant）按每個點擊多少錢的方式支付廣告費。Cost-Per-Lead （簡稱CPL）或Cost-Per-Acquisition （簡稱CPA）按引導(dǎo)數(shù)付費或訪問者通過聯(lián)屬會員的鏈接進(jìn)入商家網(wǎng)站后，如果填寫并提交了某個表單，管理系統(tǒng)就會產(chǎn)生一個對應(yīng)給這個聯(lián)屬會員的引導(dǎo)（Lead）記錄，商家按引導(dǎo)記錄數(shù)給會員付費。Cost-Per-Sale (簡稱CPS) 按銷售額付費商家只在聯(lián)屬會員的鏈接介紹的客人在商家網(wǎng)站上產(chǎn)生了實際的購買行為后（大多數(shù)是在線支付）才給聯(lián)屬會員付費，一般是設(shè)定一個傭金比例（銷售額的10%到50%不等）。Pay For Performance （按效果付費）聯(lián)屬營銷按效果付費的營銷方式無論對于商家還是聯(lián)屬會員都是比較容易接受的。由于網(wǎng)站的自動化流程越來越完善，在線支付系統(tǒng)也越來越成熟，越來越多的聯(lián)屬網(wǎng)絡(luò)營銷系統(tǒng)采用按銷售額付費的方法。由于這種方法對商家來說是一種零風(fēng)險的廣告分銷方式，商家也愿意設(shè)定比較高的傭金比例，這樣就使得這種方式的營銷系統(tǒng)被越來越多地采用。Open Directory Project (簡稱ODP) 目錄索引Full Text Search Engine 全文搜索引擎Search Index/Directory 目錄索引類搜索引擎META Search Engine 元搜索引擎Spider 俗稱“蜘蛛”Indexer 檢索程序Free For All Links （簡稱FFA）免費鏈接列表Stop Words/Filter Words 停用詞/過濾詞這兩者意義一樣，都是指一些太常用以至沒有任何檢索價值的單詞，搜索引擎碰到這些詞時一般都會過濾掉。因此為節(jié)省空間，應(yīng)盡量避免使用這一類的詞，尤其是在對文字?jǐn)?shù)量有嚴(yán)格限制的地方。Spam：搜索引擎垃圾技術(shù)的統(tǒng)稱Frame Sets 框架結(jié)構(gòu)有些搜索引擎（如FAST）是不支持框架結(jié)構(gòu)的，他們的“蜘蛛”程序無法閱讀這樣的網(wǎng)頁。Image Maps 圖象區(qū)塊當(dāng)“蜘蛛”程序遇到這種結(jié)構(gòu)時，往往會感到茫然不知所措。因此盡量不要設(shè)置Image Map鏈接。Dynamic Pages 動態(tài)網(wǎng)頁通過程序和數(shù)據(jù)庫連接制作的網(wǎng)頁，任何地址中帶“？”號、“&”號（及其他類似符號）的網(wǎng)頁都會把“蜘蛛”程序擋在門外。Invisable/hidden text 隱藏文本內(nèi)容意欲在不影響網(wǎng)站美觀的前提下通過包含大量關(guān)鍵詞的網(wǎng)頁提高關(guān)鍵詞相關(guān)性得分，從而達(dá)到改善搜索引擎排名的目的。Invisable/hidden links 隱藏鏈接意欲在不影響網(wǎng)站美觀的前提下通過在其它頁面添加指向目標(biāo)優(yōu)化頁的隱形鏈接，通過提升鏈接得分而改善搜索引擎排名。Misleading Words 誤導(dǎo)性關(guān)鍵詞在頁面中使用與該網(wǎng)頁毫不相干的誤導(dǎo)性關(guān)鍵詞來吸引查詢該主題的訪問者訪問網(wǎng)站。這種做法嚴(yán)重影響了搜索引擎所提供結(jié)果的相關(guān)性和客觀性，為搜索引擎所深惡痛絕。Repeated Words 重復(fù)性關(guān)鍵詞這種作弊技術(shù)也被稱為“關(guān)鍵詞堆砌欺騙(Keyword Stuffing)”，網(wǎng)站優(yōu)化它利用搜索引擎對網(wǎng)頁正文和標(biāo)題中出現(xiàn)的關(guān)鍵詞的高度關(guān)注來對關(guān)鍵詞進(jìn)行不合理的(過度)重復(fù)。類似的其它做法還包括在HTML元標(biāo)識中大量堆砌關(guān)鍵字或使用多個關(guān)鍵字元標(biāo)識來提高關(guān)鍵詞的相關(guān)性。這種技術(shù)很容易被搜索引擎察覺并受到相應(yīng)懲罰。Keyword Stuffing 關(guān)鍵詞堆砌Cloaked Page 隱形頁面對實際訪問者或搜索引擎任一方隱藏真實網(wǎng)站內(nèi)容，以向搜索引擎提供非真實的搜索引擎友好的內(nèi)容提升排名。Deceptive redirects 欺騙性重定向指把用戶訪問的第一個頁面(著陸頁)迅速重定向至一個內(nèi)容完全不同的頁面。Shadow Domain 鬼域這是最常見的欺騙性重定向技術(shù)，通過欺騙性重定向使用戶訪問另外一個網(wǎng)站或頁面。Meta Refresh刷新標(biāo)識Doorway Page 門頁也叫“Bridge/Portal/Jump/Entry Page”。是為某些關(guān)鍵字特別制作的頁面，專為搜索引擎設(shè)計，目的是提高特定關(guān)鍵詞在搜索引擎中的排名所設(shè)計的富含目標(biāo)關(guān)鍵詞的域名，且重定向至另一域名的真實網(wǎng)站。搜索引擎的Spiders往往忽略對那些自動重定向到其它頁的頁面的檢索。Mirror Sites鏡象站點通過復(fù)制網(wǎng)站或網(wǎng)頁的內(nèi)容并分配以不同域名和服務(wù)器，以此欺騙搜索引擎對同一站點或同一頁面進(jìn)行多次索引。大多數(shù)搜索引擎都提供有能夠檢測鏡象站點的適當(dāng)?shù)倪^濾系統(tǒng)，一旦發(fā)覺鏡象站點，則源站點和鏡象站點都會被從索引數(shù)據(jù)庫中刪除。Link Spamming 作弊鏈接/惡意鏈接link farms 鏈接工廠Bulk Link Exchange Programs大宗鏈接交換程序Cross Link交叉鏈接Doorway Domain 門域?qū)樘岣咛囟P(guān)鍵詞在搜索引擎中的排名所設(shè)計的富含目標(biāo)關(guān)鍵詞的域名，然后重定向至其它域名的主頁。由于搜索引擎一般忽略自動重定向至其它頁的頁面的檢索，所以不提倡使用這種技術(shù)。