作者 Sharon Ding
接續上篇的內容,這篇文章將繼續介紹網頁未被Google索引的其他8個原因,以及如何促進Google為網頁建立索引。
內容目錄
網頁未被Google索引的原因?
遭到網頁移除工具封鎖
網頁遭到「網址移除要求」,被從Google搜尋結果中剔除。可於Google Search Console中選取左方側欄的「移除網址」查看紀錄。移除要求的效力大約會維持6個月(從移除日期當天起算),這段期間過後,即使沒有另外提交建立索引要求,Googlebot仍可能重新為網頁建立索引。

已檢索-目前尚未建立索引
Google已檢索網頁,但尚未建立索引。未來可能會建立索引,也可能不會;不須將此網址重新送交檢索。
已找到,目前尚未建立索引
Google已找到網頁,但尚未進行檢索。通常這表示Google想檢索該網址,但預期會造成該網站流量超載,或是檢索預算不足,因此Google重新安排了檢索時間。
網頁是替代頁面(有適當的標準頁面標記)
該網頁與Google視為「標準網址」的網頁內容重複,且網站管理者有在該頁面添加正確的canonical標籤,指向標準網址。Google會降低對於替代頁面的檢索頻率。
※如果Google發現同一網站有多個網頁內容相近,就會自行選擇內容最完整實用的網頁作為標準網頁。為了減少在網站上的檢索工作量,標準網頁將會是檢索最頻繁的網頁,其他重複網頁的檢索頻率則較低。
這是重複網頁;使用者未選取標準網頁
該網頁和其他網頁內容重複,但管理者未標記標準網址。Google自行認定該頁面不是標準網頁,因內容重複而不建立索引。
這是重複網頁;Google選擇的標準網頁和網站管理者不同
網站管理者將該頁面標記為標準網址,但Google認為另一個網址更適合作為標準頁面,因此已為另一個頁面建立索引。Google會認定不同標準頁面的原因有很多,其中一種可能是網站管理者標示A為主要頁面,B是重複頁面,但網站上的相關頁面連結都指向B,因此造成Google判斷標準頁面有誤。
頁面會重新導向
重新導向網址不會編入索引中,例如該網頁已設定301轉址。
網頁因遭法律申訴而被移除
網頁內容因違反法律遭到申訴,Google將該網頁從搜尋結果移除。
怎麼促進Google索引網站頁面?
若希望網頁被Google建立索引,首先應解決前述的可能原因;接著,也可嘗試以下方法:
利用內部連結幫助索引
Google爬蟲是透過一個個連結找到網站的其他內容,若有頁面被孤立,爬蟲就可能找不到它。可在已被索引的網頁放置希望被加快索引的網頁連結,或在網站做全面性的連結導覽,確保從首頁點選一個連結或一連串連結,就能前往網站中的任何頁面,這樣就能增加網頁被索引的機會。
主動要求Google建立索引(少量未索引網頁適用)
到Google Search Console網址審查頁面,按下「要求建立索引」,等待一段時間就能在搜尋引擎上找到網頁。這個方法較費時,若有大量網址未被索引,不建議使用。
提交Sitemap(大量未索引網頁適用)
Sitemap是給搜尋引擎讀取的網站目錄檔案,可明確告知Google希望哪些網頁被檢索。藉由Sitemap可省去手動提交建立索引需求的時間,若有大量網頁未被索引,就可考慮重新提交Sitemap。
網站使用網址路徑或網頁名稱
網站若使用網址參數(指網址中,問號後面那一串),檢索的困難度相對較高。例如:比起位於example.com?page=1234 的網頁,Google更容易找到位於example.com/petstore/zebra的網頁,後者就是網址路徑,應盡量使用路徑或網頁名稱。
優化網站SEO
經常更新並提供高品質內容,透過好的SEO手法提升網站權重和排名。優質、高權重網站會獲得較多的爬蟲抓取預算,可增加網頁被爬蟲檢索並建立索引的機會。另外,別使用黑帽SEO,若不斷違反Google的SEO指南,可能會遭到手動懲罰,影響網頁索引。
改善網頁加載速度
屬於SEO的一環。若頁面加載時間太長,會浪費爬蟲的抓取預算,Google也可能會認定網站的用戶體驗不良,進而選擇不將該頁面編入索引。