Indexing

當爬蟲把資料存到資料庫後，資料庫會用其他程式專門去處理並分析每個網頁內容，擷取有用的資料，像是Metadata，canonical, rel links, schema markup, anchor text, 內容，其他超連結，影音圖片…等等，有系統的存起來。

最基本的on-page資料就是Metadata，這些Metadata告訴Google這個網頁基本的資訊，像是網頁標題（title）, 敘述（description），robots.meta tag，還有schema markup。

• 標題：也就是一個網頁的主題，像是一篇文章的標題一樣，含括網頁上主要內容，要有一定程度的獨特性，最好是跟其他網頁的標題在關鍵詞上越少重複最好。標題的相關性跟長度對用戶點擊率有很大的影響。搜尋引擎透過標題來判斷網頁內容的相關性，再與其他網站類似的網頁比較你網站的相關性程度。

• 敘述：網頁的精簡介紹，大概兩三行可以讓用戶清楚了解網頁大概的內容。這部分也會在SERP出現，對點擊率的影響不亞於標題，但對網頁的indexability沒有直接影響。

Robots Meta Tag

Schema markup有助Google更了解網頁內容的重要元素，透過標記把網頁內容呈現給爬蟲的方式更標準化，讓爬蟲能快速瞭解重要的內容在哪裡。這些標記整體來說是rich snippets，它更優化該網站在SERP的呈現方式，提供更多資訊給使用者，對點擊率有相當程度的影響。

在Index的過程通常是把關鍵詞跟有該關鍵詞的網頁放在一起，該網頁內容獨特性，或是與同網站其他網頁的類似性關鍵因素去決定索引（index）該網頁。並不是每個被放進索引的網頁都會被Rank，甚至是讓用戶在Google排名中找得到，一切還是取決於網頁內容的評等，這個評等還蓋了關聯性，外部連結（backlinks），等等的因素。

Ranking

根據Google，他們運用200多個singal/factor去決定網頁是否會出現在搜尋結果頁面上（search engine results page, SERP），以及在SERP哪個位置，這個演算法algorithm常常在變。

大致上可以分成幾個要素 （1） 網站內部要素 （2） 外部要素 （3） 使用者互動程度

（1） 內部要素

這些網站管理者可以控制的要素。最基本的是網頁所做的優化需要符合Google webmaster guideline。最重要的就是網頁內容是不是跟標題的關鍵詞target keyword有很大程度的相關，並且與其他同網站的網頁內容沒有大程度的重複。再來是其他輔助元素，像是schema markup, media精確的指出哪些部分是重要的內容。如果你是商品網站，每個商品網頁一定要提供對使用者越有用的資訊越好，像是產品品牌，型號，UPC/MPN，規格，圖片，價格，存貨量，成分，敘述甚至其他使用者評價…等等，並且用schema markup把這些資訊匡起來讓搜尋引擎快速處理這些資訊。

除了on-page元素，一個網頁在不在XML sitemap裡面，有多少內部連結，每個內部的連結的anchor text是否該網頁內容有關，離Home Page的距離，還有伺服器回應速度等等都是重要的元素。

（2）外部要素

外部連結像是endorsement，如果一個和關鍵詞相關性很高且可信度很高的網站連向你的網頁，這極有可能把link equity 是從他的網站導流到你的網頁面，為你的網站排名提供價值。舉例來說，你在你網頁上放了一篇你對搜尋引擎優化的分析文，結果被該領域的大佬網站們相中，紛紛在他們自己網站提及你的文章，並且用你文章的標題或是關鍵詞們當anchor text超連結到你文章，這對你網頁對那些關鍵詞的排名極有可能有很大的影響。

（3） 使用者喜愛程度

如果使用者從SERP點到你網頁，沒有回到SERP，Google會衡量你的網頁到底對使用者的搜尋intent滿足程度有多高。如果使用者點到你網頁後沒幾秒馬上又點回去SERP，然後點其他網站，你可能很快就要被降等了。回到第一篇所說的，一切都是從目標用戶為中心，如果用戶覺得你的網站跟他所用的關鍵詞沒有相關，或者是你內容沒有提供他要的資訊，搜尋引擎會用這些使用者訊號去決定你相關度的評等。

結論

瞭解爬蟲和搜尋引擎的運作方式你就已經對SEO有相當程度的熟悉了，下一步就是集結第一篇所規劃的願景跟策略，和第二篇crawl-index-rank的運作，開始從使用者與搜尋引擎的角度，去規劃你的網站架構，還有主要與輔助內容，讓你的網站發光吧！

也推薦你看看

《臉書廣告預算這樣花！找到產品週期，還可效益極大化》

《提昇Google搜尋排名的SEO，原來一直都被我們錯用了》

《PM、行銷、設計的共通基礎角色：成為一位好的「用戶研究員》

獨家精選只在LINE裡頭，現在先▸▸  接著回傳「career/有興趣的內容（例如Slash人才、PM、轉職、行銷、海外工作）」讓我們遞給妳最相關的第一手消息！

The post 提昇Google搜尋排名－脫穎而出前的最終三要素 appeared first on BetweenGos 職涯服務平台.

Crawling，也就是讓搜尋引擎（Search Engine）找得到你！

搜尋引擎找網頁的方式有幾種，但主要是透過程式，或所謂的爬蟲（Crawler)。從信賴度高、流量高的網站開始抓網頁上的超連結（hyperlink），然後從這些連結的網頁再繼續抓上面的超連結，這的步驟不斷往下往外繼續擴張。Google會把這些超連結都記錄起來，像一個網狀圖一樣，網址A連到網址B, 網址C, 網址D類似的方式，然後把這個網狀關係以及每個連結的網頁內容，儲存到資料庫裡。

這是非常重要的一步，如果爬蟲連你的網頁都找不到，搜尋引擎是無法把你的網站或網頁放進它的索引（Index）。對新網站來說，最快讓搜尋引擎找到你的方式就是到Google的網站管理者工具註冊你的網站。搜尋引擎會根據你網站的大小，隱定性跟重要程度去決定多久爬一次你的網頁。

什麼是Crawl Budget？ 量有差嗎？

當一個網站的網頁量很大的時候，像是電商型（eCommerce）商品量龐大的網站來說，伺服器（Server）回應的速度效能，容易影響爬蟲下載網頁的量跟下次光臨的時間。這是所謂民間流傳Crawl Budget的問題。大部份網站不太會有Crawl Budget，也就是說只要是你網站沒像eBay這麼大，還夠穩，不會常常出現錯誤指令（time out or server error），或是一大堆404 Error、其他錯誤，幾乎爬蟲會爬所有找得到的網頁。

針對這個階段，建議大家

（1） 經常查看Webmaster/Search Console裡的crawl errors, response time，並且比對logs看搜尋引擎爬蟲流量是否穩定。

（2） 時常測試重要的網頁，比如說熱門商品網頁（Top Products）或是你希望使用者在Google搜尋結果裡搜得到的頁面，是否能讓爬蟲順利打開。如果你的網頁內容是java script產生，或是有user agent detection，可以在Search Console用’Fetch as Google’，或者下載User Agent Switcher看搜尋引擎所看到的網頁內容是否跟預期的一樣。你給Googlebot看的內容必須跟給一般使用者看的內容沒有差別，不然的話會有掛羊頭賣狗肉（Cloaking）之嫌，網頁極有可能被取消索引，光想到這裡都覺得悲慘無比。

到底爬蟲都爬哪些網頁（Crawl Mix)

不同URL但內容大同小異

如果兩個以上的URL都呈現很相似甚至一樣的內容，這些URL可能會相互競爭(cannibalize) ranking，因為搜尋引擎不知道要選哪一個; 例如說：

• www.widgets.com/blue-widgets?color=blue 跟 www.widgets.com/blue-widgets 重複
• www.widgets.com/blue-widgets?color=blue&cat=3 跟www.widgets.com/blue-widgets?cat=3&color=blue 重複

建議把產生網址（URL）的邏輯標準化，同一個內容的網頁只會有一條對應網址。如果你網站設計的原因造成類似以上的URL情況，建議使用 canonical tag 把這些網頁都串連起來，讓搜尋引擎知道哪個URL版本是你希望出現在搜尋結果頁面裡。

內容更新的程度、速度（Staleness）？

搜尋引擎喜歡「時常更新的內容（fresh content）」，如果你重要的網頁常常更新，建議注意爬蟲光臨的頻率，如果爬蟲爬的頻率跟內容更新頻率差很遠，有可能會發生（A）搜尋引擎不覺得這些網頁重要（B）它很難從首頁連到這些網頁。

使用者會搜尋這些網頁嗎（Importance）？

最好讓重要的網頁從首頁3個點擊（Clicks）以內就可以連到。如果一個網頁很難從首頁連得到，搜尋引擎很可能解讀這個網頁「不重要」。建議時常分析爬蟲爬的網頁裡面，多少百分比是你認為重要的網頁。如果你發現這個百分比很小，頻率也很低，而且爬蟲花時間在不重要的網頁居多，你可能得再調整你網站的架構了; 扁化你的網站（flatten your site），讓重要的網頁往上移。

(Source https://goo.gl/FdKrT1)

一般來說，並不是每個網頁都值得被爬，甚至放進索引（Index），像是電商網站的結帳頁（check out）或是我的帳戶（my account這種網頁，大多是需要使用者登入或有隱私資訊，所以對搜尋引擎的有用度很低。你可以透過no nidex tag或是 Robots.txt讓爬蟲少來爬。

好處是，爬蟲不會浪費時間在無意義的網頁上，壞處有些重要的網頁，有可能會因為某個網頁誤標成不要爬，就因此消失在爬蟲的雷達當中。

XML Sitemap又是什麼，有多重要？

另一個讓爬蟲一次爬你重要的方式就是XML Sitemap。把所有你認為是很重要的網頁提交給Google，並且建議多久來爬一次，甚至每個網頁有多重要（數字從0到1）。雖然這兩個資訊被Google搜尋引擎大佬John Mueller否認有任何重要性，但放這些資訊在XML Sitemap裡是沒有什麼壞處的。

簡單來說，crawling是最重要的一步，如果爬蟲找不到你的網頁，使用者就無法從Google找到你。這邊要注意的是

（1）清楚計畫你怎麼讓爬蟲找到你，你可以透過GSC註冊，外部連結（從大網站像Google+, YouTube, YellowPages連到你網站），點擊付費廣告Paid Search等等快速的方式

（2） 把你希望使用者能從Google找到的網頁放到XML Sitemap，並且在GSC提交

（3） 從自家的伺服器紀錄（server logs）比對哪些網頁被Google的爬蟲爬過，狀態碼（status code）是什麼，爬蟲到底花時間在哪些網頁上，重要還是不重要的網頁，有哪些網頁從來沒被爬過的，去慢慢調整你網站的內部連結。

就是現在，跟著這篇內容一步一步地執行，讓Google更認識你的網站，最後提高SEO的呈現和排名。

也推薦妳看看

《臉書廣告預算這樣花！找到產品週期，還可效益極大化》

《PM、行銷、設計的共通基礎角色：成為一位好的「用戶研究員」》

《當全世界都在請你講出「好故事」，那先搞懂這五件事》

獨家精選只在LINE裡頭，現在先▸▸  接著回傳「有興趣的內容（例如PM、行銷、海外工作、Slash人才、家居、穿搭）」讓我們遞給妳最相關的第一手消息！

The post 實作！提昇Google搜尋排名的SEO－讓爬蟲成為你網站的閨蜜 appeared first on BetweenGos 職涯服務平台.

不過今天我們先不談搜尋引擎，我們談「搜尋者（Searchers）」，搜尋引擎之所以存在的原因－－“Google’s mission is to organize the world’s information and make it universally accessible and useful” －－Google的任務是把世界上的資訊組織起來，然後讓任何人都可以取得並且使用。所以我們的出發點是「人」。但是是哪些人？就是到搜尋引擎找東西的人們！

SEO第一步：清楚定義你的目標用戶

• 你的網站為他們而生啊！
• 他們為什麼會想來你的網站？來你網站的「最終目的」是什麼?
• 你的網站如何幫助他們達成他們的目的？

你的網站為他們而生

每個公司都有個願景（Vision），而網站是實現他願景其中一個方式。舉例來說eBay主打的是 “eBay is where the world goes to shop, sell and give”。eBay一開始就是個競價網站，一個平台連結了世界各地的買家跟賣家。如果你的網站是連結不同使用者的平台，你要思考你的存在是為了幫助他們解決什麼樣的問題，或是達成他們什麼需求，而這些可能會因不同的使用者區隔有些微差異。

我喜歡自助旅遊，而自助旅行者常遇到的問題是，行程該怎麼安排，考量當地交通與治安，飯店評價等等的。在這麽多旅行為主題的網站之中，我最常用的就是TripAdvisor。他們存在的目的就是 “to help people around the world plan and have the perfect trip.”（幫忙世界的旅人們計畫他們最完美的旅行）。不管怎麼，每個公司的目的都是因為某個問題，去定位本身的願景跟價值，然後找出解決問題的方式，而網站也應該是反應這樣的策略。

他們為什麼會想來你的網站?

旅行這個商業生態裡，競爭者其實不少，這時候差異化（differentiation）就是關鍵。TripAdvisor標榜的是world travel，也就是人到的了的地方，大致上都可以在他們網站上找到一些資訊，從基本的食衣住行到世界各地旅人的評價跟訣竅分享，這讓TripAdvisor幾乎成為一站式解決平台（one stop shop）。簡單來說，旅行者能在這裡找到需要的資訊跟解答。

再舉一個旅行相關的例子，比如說Airbnb跟Hotel容易被歸類在 accommodation（住宿）這個圈圈，但是Airbnb獨特的地方在於讓異地旅行在地化，透過各式各樣的屋主（hosts），不管是房屋本身、居住體驗 或是地點也好，讓旅行者跟當地有連結，這顛覆了傳統遊客跟當地人存在兩個平行時空的旅行方式。這個關鍵區隔點正好命中Airbnb的主要使用者的需求，這群主要使用者多是早期接納型的人，大概對新事物比較新奇還有抱著開放的心態，然後慢慢這些人就開始成為Airbnb顛覆傳統的一小撮主力。雖然這些是商業模式基礎上的不同，但最終都會反映在網站上面！同樣的，我們應該仔細思考，我們要提供給使用者的是怎樣的網站瀏覽/使用體驗?

你的網站如何幫助他們達成他們的目的？

以一個熱愛自助旅行的使用者來說，我會遇到的問題大概就是a點到b點有哪些交通工具、優缺點為何、到b點後有哪些活動可以選擇、哪些活動是大部分人推薦的、當地有哪些餐廳一定要光臨、住的地方交通方不方便、治安好不好、夜生活是什麼等等。去年到秘魯旅遊幾乎食衣住行上全仰賴TripAdvisor，甚至到後來訂旅館和買機票，也都是在上面查好評價馬上下手，免去食衣住行要分別查不同網站的耗時過程。

不管是買賣、找住宿、找車、找工作、甚至買菜，使用者或是潛在客戶一定會面臨到一些痛點（pain point），可能是商品選擇不齊全、臨時訂不到有空房的旅館、遇上讓人不安的司機、想轉職但找不到管道，工作忙到沒時間買菜。把這些痛點都連結起來，從超痛到有一點點痛去分類，然後按照這些優先順序去思考網站的架構跟內容。

做好SEO，這一步不能省略

目標用戶的需求分析這一步很容易被忽略，尤其對新成立的網站來說，一開始流量跟能見度一般不高，所以網站管理者會想快速提高能見度，便開始急著找 SEO（搜尋引擎優化，Search Engine Optimization）的專業顧問人士去 “Hack（破解）” SEO，他們可能會針對搜尋引擎的需求去最佳化他們的網站。但是這不是長久的做法，因為搜尋引擎的演算法是不斷變動的，當你在 hack 的同時，搜尋引擎也在想怎麼樣才能不讓你hack，畢竟他們存在的目的是：服務有搜尋需求的使用者！

要記得，（很重要，但還是不要講三遍好了請大家想過三遍） －－搜尋引擎最佳化只是過程，使用者需求 > 任何技巧。使用者最佳化 （“Searcher” Experience Optiomization） 才能讓你的網站在自然搜尋頁結果（Search Engine Results Page, SERP）裡長久地具有競爭力。

也推薦你看看

《實作！提昇Google搜尋排名的SEO－讓爬蟲成為你網站的閨蜜》

《PM、行銷、設計的共通基礎角色：成為一位好的「用戶研究員」》

《客人來到購物頁又離開？調整這細節，不然做再多都只是零結帳》

獨家精選只在LINE裡頭，現在先▸▸  接著回傳「有興趣的內容（例如PM、行銷、海外工作、Slash人才、家居、穿搭）」讓我們遞給妳最相關的第一手消息！

The post 提昇Google搜尋排名的SEO，原來一直都被我們錯用了 appeared first on BetweenGos 職涯服務平台.