Những nguyên nhân website của bạn mãi không xuất hiện trên Google

Với chục triệu truy vấn tìm kiếm hàng ngày, kết hợp đó là thông tin dữ liệu ngày càng nhiều trên internet, mức độ cạnh tranh ngày càng gia tăng. Website của bạn xuất hiện mỗi khi có người dùng tìm kiếm thông qua Google search không phải là đơn giản.

Có phải bạn cảm thấy mình đã làm đúng tất cả mọi thứ rồi, nhưng website của bạn vẫn không được hiển thị trên kết quả tìm kiếm của Google? Điều bạn cần là kiểm tra và xác định lại nguyên nhân xem yếu tố nào ảnh hưởng tới website cụa bạn không được hiển thị trên Google, và cách khắc phục cho từng vấn đề đó.

Xem thêm: Nguyên nhân và bí quyết fix lỗi Google chậm hoặc không index bài viết

Trước khi chúng ta bắt đầu…

Điều quan trọng cần lưu ý: Khi nhập gì đó vào Google, với hy vọng thấy được website của mình ở trang kết quả, thì bạn lại đang không thực sự tìm kiếm nó.

Bởi lúc ấy, cái bạn tìm chỉ là một trang cụ thể trên site của mình mà thôi.

Đó là một sự khác biệt quan trọng.

Nếu Google không biết về sự tồn tại của trang mà bạn đang cố rank hoặc cho rằng nó không xứng đáng để xếp hạng, thì nó sẽ không được xuất hiện ở bất cứ nơi nào trong kết quả tìm kiếm.

Lưu ý: Trang chủ có thể là trang bạn đang cố gắng rank.

Vì lý do đó, để hiển thị trên Google, có 3 điều cần phải đảm bảo:

  1. Google cần biết rằng website của bạn tồn tại và nó có thể tìm cũng như truy cập được tất cả các trang quan trọng của bạn.
  2. Bạn có một trang hiện từ kết quả có liên quan cho từ khóa bạn muốn hiển thị.
  3. Bạn đã chứng minh cho Google rằng trang của mình xứng đáng được xếp hạng cho truy vấn tìm kiếm mục tiêu đó – hơn bất cứ trang nào từ một website khác.

Hầu hết mọi vấn đề mà chúng ta sẽ giải quyết dưới đây liên quan đến một trong ba điều trên.

Hãy bắt đầu với những thứ đơn giản trước…

1. Trang web của bạn quá mới

Google cần có thời gian để phát hiện các website và những trang mới. Nếu bạn chỉ mới ra mắt site của mình vào sáng nay, thì lời giải thích đơn giản nhất đó là Google vẫn chưa tìm thấy nó được.

Để kiểm tra xem Google có biết website của bạn tồn tại hay không, hãy search với cú pháp: site:domain.com (nếu đuôi tên miền là .com)

Nếu có ít nhất một kết quả, vậy là Google biết website của bạn.

Còn ngược lại, thì chắc chắn là không rồi.

Nhưng ngay cả khi có biết đi chăng nữa, họ cũng có thể sẽ không rõ về trang mà bạn đang cố rank. Kiểm tra bằng cách search site:domain.com/mot-trang-ma-ban-muon-hien-thi-tren-google/

 

Nên có ít nhất 1 kết quả.

Nếu bạn không thấy kết quả nào với một trong những lượt tìm này, hãy tạo sitemap (sơ đồ web) và gửi nó qua Google Search Console. (Dù thế nào đi chăng nữa, đây cũng là 1 cách làm hiệu quả).

Search Console > Sitemaps > Enter sitemap URL > Submit

Lưu ý: Bạn sẽ cần phải tạo một tài khoản Search Console miễn phí và thêm vào website của mình. Đọc bài viết cách tạo google webmaster tools để được hướng dẫn thêm. 

Sitemap cho Google biết những trang quan trọng trên website của bạn và nơi để tìm thấy chúng.

Nó cũng có thể tăng tốc độ cho quá trình khi Google tìm trang của bạn.

KHÔNG TÌM ĐƯỢC SITEMAP CỦA MÌNH?

Truy cập tenmiencuaban/sitemap.xml. Nếu không có gì hiện ra, hãy nhập tenmiencuaban/robots.txt vì trong này thường liệt kê URL của sitemap.

Vẫn không thấy gì? Vậy có thể là bạn chưa có sitemap rồi. Tham khảo trang này để biết thêm.

2. Bạn đang chặn công cụ tìm kiếm lập chỉ mục các trang của mình

Nếu bạn báo Google không hiển thị một số trang nhất định trong kết quả tìm kiếm, thì nó sẽ không làm.

Bởi bạn đã đặt thẻ meta “noindex” – một đoạn mã HTML trông như thế này:

 

Các trang có mã đó đã không được lập chỉ mục, ngay cả khi bạn đã tạo sitemap và submit trong Google Search Console.

Bạn có thể không nhớ việc thêm mã này vào trang nào của mình, nhưng điều ấy không có nghĩa rằng nó không có ở đó.

Ví dụ: WordPress sẽ thêm nó vào từng trang nếu bạn tích nhầm vào ô chọn khi thiết lập website của mình.

Rất nhiều web developer dùng nó để ngăn Google lập chỉ mục site trong quá trình làm và quên xóa nó trước khi public.

Nếu Google đã crawl sitemap của bạn, nó sẽ cho bạn biết được những trang không index trong báo cáo “Coverage” ở Google Search Console.

Chỉ cần tìm lỗi này:

Nếu bạn đã gửi sơ đồ web của mình cho Google gần đây và họ vẫn chưa thu thập dữ liệu các trang, hãy chạy chế độ crawl trong Ahrefs Site Audit. Công cụ này sẽ kiểm tra từng trang một trên site của bạn với +100 vấn đề tiềm ẩn về SEO, bao gồm cả sự hiện diện của các thẻ “noindex”.

Xóa các thẻ “noindex” từ bất kỳ trang nào mà không nên có chúng.

3. Bạn có thể đang chặn công cụ tìm kiếm thu thập dữ liệu các trang của mình

Hầu hết các website đều có 1 file robots.txt. Nó sẽ hướng dẫn các bộ máy tìm kiếm nơi chúng có thể và không thể đi trên website của bạn.

Google không thể crawl các URL bị chặn trong file này, nên chúng sẽ không hiển thị trong kết quả tìm kiếm được.

Nếu bạn đã gửi sitemap của mình qua Google Search Console, nó sẽ thông báo cho bạn về các vấn đề liên quan. Truy cập báo cáo “Coverage” và tìm các lỗi trong “Submitted URL blocked by robots.txt”.

Một lần nữa, điều này chỉ xảy ra khi Google đã cố thu thập dữ liệu các URL trong site của bạn. Còn nếu như bạn chỉ mới submit gần đây, thì có thể nó vẫn chưa nhận được mà thôi.

Nếu không muốn phải mất thời gian chờ, bạn có thể kiểm tra thủ công. Chỉ cần truy cập tenmiencuaban/robots.txt.

Bạn sẽ thấy một file như thế này:

Lưu ý: Nếu bạn gặp lỗi 404, thì có nghĩa là bạn chưa có file robots.txt. Tìm hiểu cách để tạo nó tại đây.

Cái mà bạn sẽ không muốn nhìn thấy ở đây là đoạn code này…

Disallow: /

… với bất kỳ user-agent nào như dưới đây:

User-agent: *

User-agent: Googlebot

Tại sao lại thế? Vì như vậy có nghĩa là nó sẽ chặn Google thu thập từ tất cả các trang trên site của bạn.

Bạn cũng sẽ không muốn thấy 1 chỉ thị “Disallow” cho bất cứ nội dung quan trọng của mình đâu.

Ví dụ: lệnh “Disallow” này sẽ ngăn Google crawl tất cả các bài viết trên blog của chúng tôi.

Disallow: /blog/

Hãy xóa mọi chỉ thị chặn nội dung mà bạn muốn hiện trên Google.

CẢNH BÁO

Các tệp Robots.txt có thể phức tạp và rất dễ gây rối. Nếu bạn cảm thấy file này đang ngăn các trang xuất hiện trên Google, và cũng không biết nhiều về nó lắm, hãy thuê một chuyên gia để sửa lại.

4. Website không có đủ các backlink chất lượng cao

Ngay cả khi không có gì ngăn Google tìm thấy, bạn vẫn cần phải “chứng minh” cho họ rằng site của mình xứng đáng được xếp hạng.

Mặc dù có hàng trăm yếu tố ảnh hưởng quan trọng trong thuật toán Google, nhưng số lượng backlink từ các website duy nhất trỏ tới 1 trang dường như lại là 1 yếu tố cực mạnh. Chúng tôi đã nhận ra điều này hết lần này đến lần khác trong các nghiên cứu liên quan.

Nếu các trang xếp hạng ở trên bạn có nhiều backlink hơn, thì đây có thể là một phần lý do khiến bạn không xuất hiện được trên Google.

Để xem số lượng web duy nhất (referring domain) liên kết đến trang của bạn, hãy dán URL vào Site Explorer hoặc công cụ check backlink miễn phí của chúng tôi.

Google xếp hạng các trang web, không phải website. Mặc dù có thể bạn muốn xếp hạng trang chủ của mình cho một từ khóa cụ thể, nhưng điều quan trọng là phải đảm bảo khi xem xét số lượng referring domain tới trang đó, chứ không phải toàn bộ website.

Tiếp theo, hãy vào Keywords Explorer, tìm từ khóa mục tiêu của bạn, sau đó kéo xuống phần SERP overview. Tại đây, bạn sẽ thấy các trang xếp hạng top đầu hiện tại và chỉ số SEO của từng trang.

Rồi nhìn qua cột “Domains” để xem có bao nhiêu website duy nhất liên kết đến từng trang đó.

Cân nhắc xây dựng thêm các backlink nếu trang của bạn bị giảm.

5. Trang của bạn đang thiếu “authority”

Cách xếp hạng của Google dựa trên thuật toán được gọi là PageRank. Về cơ bản, nó tính các backlink và liên kết nội bộ dưới dạng như những phiếu bầu.

CHÚ Ý BÊN LỀ. Đây vẫn là một lời giải thích khá đơn giản về PageRank. Hãy tìm hiểu thêm trong hướng dẫn đầy đủ về PageRank của chúng tôi.

Một số người làm SEO nghĩ rằng PageRank không còn được áp dụng nữa, nhưng Google đã xác nhận đây vẫn là 1 yếu tố quan trọng trong thuật toán xếp hạng của họ năm 2017:

Rất tiếc là, Google đã ngừng công khai điểm số PageRank của họ vài năm trước. Nên hiện giờ, chúng ta sẽ không thể thấy được PR trang của bạn đã xếp trên các trang xếp hạng top đầu như thế nào.

Nhưng may thay, ở Ahrefs, chúng tôi có một chỉ số dựa trên các nguyên tắc tương tự được gọi là URL Rating (UR).

Giống PageRank, nó cũng sẽ tính đến các liên kết nội bộ cũng như backlink, và chúng tôi đã thấy rằng nó có mối tương quan cùng với lưu lượng tìm kiếm.

UR tính trên thang điểm từ 0-100. Các trang UR cao có nhiều “authority” hơn so với các trang UR thấp.

Để kiểm tra chỉ số URL Rating của bất kỳ trang nào trên site của bạn, hãy dán URL vào Site Explorer hoặc trình kiểm tra backlink miễn phí của chúng tôi.

Rồi so sánh với UR của các trang top đầu cho từ khóa mục tiêu của bạn bằng cách sử dụng “SERP overview” trong Keywords Explorer.

Nếu những trang này có điểm UR cao hơn nhiều so với trang của bạn, thì đó có thể là dấu hiệu cho thấy bạn đang thiếu “link authority”.

Có hai cách để tăng tính thẩm quyền của một trang web:

  • Xây dựng nhiều backlink hơn;
  • Thêm các liên kết nội bộ.

Nói chung, xây dựng backlink sẽ khó hơn internal link – đặc biệt là khi bạn muốn xếp hạng một trang bán hàng.

Vì lý do ấy, việc thêm một số liên kết nội bộ liên quan đến trang của bạn thường là khởi đầu tốt nhất.

6. Website của bạn đang thiếu “authority”

Google tiếp tục đưa ra các tín hiệu lẫn lộn về việc liệu authority của 1 site có phải là một yếu tố xếp hạng hay không.

Trong 1 status trên twitter, Gary Ilyes từ công ty Google cho biết điều này là không đúng:

Nhưng ở cuộc phỏng vấn này, tại Google, John Mueller nói rằng họ cũng có các chỉ số xét theo những tiêu chuẩn tương tự.

Chúng tôi đã nghiên cứu mối quan hệ giữa thứ hạng và Domain Rating (độ authority website của mình) và tìm ra một sự tương quan tích cực nhỏ giữa chúng:

Cần lưu ý: Mối tương quan ở đây ít hơn nhiều so với referring domain hoặc authority của các trang con. Thêm nữa, mối tương quan ≠ quan hệ nhân quả.

Điều này cho hay, có vẻ như authority của 1 site sẽ quan trọng hơn đối với thứ hạng cho một số từ khóa so với của những trang khác.

Hãy xem các trang đứng đầu của từ khóa “váy thiết kế”:

DR trung bình ở giữa của 5 trang này là 82 và trang yếu nhất có DR là 77.

Nếu DR chạy trên thang điểm từ 0-100, đây sẽ là mức trung bình cực kỳ cao. Một site có ít tính thẩm quyền hơn có thể sẽ phải cố gắng để xếp hạng cho từ khóa này.

Cần lưu ý: Thực tế là, việc các trang authority cao, xếp hạng trong top 10 cho 1 vài truy vấn thì không nhất thiết chứng minh rằng “website authority” là một yếu tố xếp hạng. Nhưng nó có thể đúng đối với một số truy vấn nhất định bởi Google biết mọi người muốn kết quả từ các thương hiệu nổi tiếng, đáng tin cậy.

1 Ví dụ hỗn hợp với từ khóa “best coffee machine” (máy pha cà phê tốt nhất).

Có các trang từ cả những site thẩm quyền cao và thấp trong top 5.

Để check “authority” của website bạn, paste domain vào Ahrefs Site Explorer trên trang kiểm tra authority website miễn phí của chúng tôi.

Hãy so sánh với điểm DR của các site đứng đầu cho từ khóa mục tiêu của mình. Nó sẽ giúp bạn hiểu rõ hơn về việc liệu authority website có thể đang ngăn bạn xếp hạng các từ khóa đó trong Google hay không.

MẸO HAY

Ngay cả khi một số trang có thứ hạng hơn bạn là từ các site DR cao, bạn vẫn có thể vượt qua họ. Vậy làm thế nào chứ? Đó là xây dựng thêm các backlink và “link authority” với mọi trang ở từng cấp độ. Sau tất cả, Google xếp hạng các trang web, không phải các website.

Bạn có thể xem một ví dụ về nó cho từ khóa “bitcoin mining calculator” (công cụ khai thác bitcoin).

Trang ở vị trí #4 thuộc một site DR thấp hơn so với hầu hết các trang còn lại.

Một trong những lý do khiến trang này dường như có thể vượt qua chúng là vì nó có số lượng backlink cao từ các website duy nhất và nhiều “authority” hơn.

7. Trang web của bạn không phù hợp với “search intent”

Google đặt mục tiêu xếp hạng các kết quả hữu ích và phù hợp nhất cho mỗi truy vấn.

Đó là lý do tại sao việc làm cho nội dung của bạn phù hợp với cái mà người tìm kiếm mong đợi và muốn thấy là rất quan trọng. Và đây chính là search intent.

Ví dụ: công ty bạn là American Express và bạn muốn trang này hiển thị trên Google với thuật ngữ “best credit card” (thẻ tín dụng tốt nhất):

Nếu chúng ta xem các kết quả xếp hạng hàng đầu với từ này trong Keywords Explorer, đây là các chỉ số cho trang mạnh nhất ở top 5:

  • Domain Rating: 86
  • URL Rating: 49
  • Referring domains: 466

Còn khi xem trong Site Explorer, rõ ràng là, trang American Express đánh bại trang này (và tất cả các kết quả đứng đầu khác) trên mặt trận đó. Tuy nhiên, nó vẫn không được xếp hạng ở top 100.

Tại sao lại thế? Bởi trang này không phù hợp với những gì người tìm kiếm muốn xem.

Nếu nhìn kỹ hơn ở các trang top đầu với “best credit card”, thì chúng ta sẽ thấy rằng đây đều là danh sách liệt kê những thẻ tốt nhất từ các ngân hàng và nhà cung cấp khác nhau. Như trang này:

Còn American Express lại giống một trang bán hàng hơn.

Google biết người dùng không muốn thấy 1 trang bán hàng khi tìm kiếm truy vấn ấy, vì vậy, nó không xếp hạng trang này.

8. Website bị trùng lặp nội dung

Nội dung trùng lặp là khi có thể truy cập cùng một trang web giống nhau hoặc tương tự tại các URL khác nhau.

Google có xu hướng không lập chỉ mục chúng, vì nó sẽ chiếm không gian không cần thiết trong chỉ mục của họ – giống như việc bạn có hai bản sao của cùng một cuốn sách trên giá sách của mình vậy.

Thay vào đó, nó thường chỉ lập chỉ mục cho phiên bản mà bạn đặt ra.

Nếu không có quy tắc nào, Google sẽ cố gắng xác định phiên bản tốt nhất của trang đấy để tự lập chỉ mục.

Thật không may, khả năng của Google để tìm ra các trang trùng lặp (nếu không được đặt canonical) chưa hoàn chỉnh.

Hãy xem hai trang này trên Buffer.com:

Cả hai đều được lập chỉ mục, mặc dù chúng gần như giống hệt nhau.

Điều này sẽ gây ra vấn đề bởi “authority” của một trang được chia ra cho 2 URL. URL đầu tiên có backlink từ 115 referring domain (website duy nhất) và liên kết thứ hai từ 140.

Ví dụ, một trong những trang này xếp hạng ở vị trí # 22 cho từ khóa mục tiêu, nó có thể có thứ hạng cao hơn nếu “backlink authority” từ cả hai URL được hợp nhất.

Để tìm các vấn đề nội dung bị trùng lặp trên website của bạn, hãy crawl trên Ahrefs Site Audit, sau đó truy cập vào báo cáo “Content quality”. Tìm kiếm các cụm trang trùng và gần trùng lặp mà không có lệnh canonical.

Khắc phục các sự cố này bằng cách redirect hoặc đặt lệnh canonical cho các bản sao.

9. Bạn có 1 Google penalty

Nhận một hình phạt từ Google sẽ là lý do có ít khả năng xảy ra nhất đối với việc không hiển thị được trên Google. Nhưng khả năng đó vẫn sẽ tồn tại.

Có hai loại Google penalty:

  • Tác vụ thủ công: Đây là khi Google thực hiện hành động xóa hoặc hạ thứ hạng site của bạn trong kết quả tìm kiếm. Điều này xảy ra khi một nhân viên của Google trực tiếp xem xét website của bạn và thấy rằng nó không tuân thủ Nguyên tắc quản trị trang web của họ.
  • Thuật toán: Đây là khi thuật toán Google chặn website hoặc một trang web của bạn trong kết quả tìm kiếm do vấn đề chất lượng. Nó đích thị giống với máy tính “nói không” với bạn hơn chứ chẳng phải con người nữa.

CHÚ Ý BÊN LỀ. Chính xác hơn thì, các hình phạt thuật toán không phải là hình phạt, mà chúng là bộ lọc.

Rất may là, tác vụ thủ công là cực kỳ hiếm. Bạn sẽ không thể nhận một hình phạt trừ khi bạn đã làm điều gì đó lỗi rất nghiêm trọng. Google cũng thường thông báo cho bạn về chúng qua tab “Manual penalties” (Hình phạt thủ công) trong Search Console.

Nếu không có cảnh báo nào ở đó, thì có lẽ bạn không có hình phạt thủ công.

Không may là, Google sẽ không nói với bạn nếu site của bạn đang được lọc theo thuật toán – điều này có thể khá khó khăn để tìm ra.

Nếu bạn nghi ngờ có 1 hình phạt theo thuật toán do lượng truy cập tự nhiên giảm đáng kể gần đây, thì hành động đầu tiên của bạn là nên kiểm tra xem liệu sự giảm đi đó có trùng với cập nhật thuật toán của Google đã biết hoặc khả nghi hay không.

Panguin là một công cụ hữu ích cho việc này. Nó cho thấy ngày thay đổi thuật toán đã biết đối với lượng traffic của bạn từ Google Analytics để dễ dàng phát hiện ra các vấn đề hơn.

Nếu bạn vẫn nghi ngờ site của mình bị lọc hoặc bị phạt vào thời điểm này, hãy nói chuyện với chuyên gia trước khi thực hiện bất kỳ hành động tai hại nào có thể xảy ra như loại bỏ các liên kết.

Kết luận 

Xếp hạng ở Google giống như việc chơi một trò chơi video vậy.

Nếu gặp các vấn đề kỹ thuật như bộ điều khiển bị hỏng, thì bạn sẽ không bao giờ có thể chiến thắng được dù bạn có cố gắng thế nào đi chăng nữa. Nó cũng tương tự với website của bạn. Bạn cần khắc phục các sự cố kỹ thuật nghiêm trọng như thẻ meta “noindex” bị làm rối và crawl các phần bị chặn trước khi chơi game.

Từ đó, việc hiểu được cấp độ mà bạn đang chơi và sức mạnh của đối thủ là rất quan trọng. Một số cấp độ dễ vì đối thủ của bạn yếu. Còn những mức khác thì khó vì họ mạnh.

Bạn có thể cần tăng level bằng cách xây dựng các backlink và “authority” trước khi loại bỏ những đối thủ mạnh hơn.

Nếu bạn đang đấu tranh để đánh bại đối thủ vì họ quá mạnh, hãy chơi level dễ hơn.

Bạn có thể làm điều này bằng việc nhắm mục tiêu các từ khóa cạnh tranh thấp hơn. Tất nhiên, một cách để tìm ra chúng là sử dụng bộ lọc các từ khóa có độ khó thấp trong Keywords Explorer.

Chỉ cần nhớ rằng việc hoàn thành các cấp độ khó thường sẽ rất đáng để bạn bỏ ra nỗ lực. Vì khi giành được những thành tích đó, bạn sẽ có thể hoàn toàn xoay chuyển được toàn bộ cục diện trò chơi cho doanh nghiệp của mình

Nguồn: Seoviet.vn