Meet: lập chỉ mục ngay lập tức các trang trong Google. Làm cách nào để xóa một trang khỏi chỉ mục. Điều gì quyết định tốc độ lập chỉ mục?

Các câu hỏi liên quan đến việc lập chỉ mục trang web - "Làm cách nào để kiểm tra việc lập chỉ mục của trang web? Tại sao tất cả các trang của trang web không được lập chỉ mục? Tại sao trang web của tôi mất nhiều thời gian để được lập chỉ mục?" Chúng được hỏi thường xuyên nhất trên Diễn đàn trợ giúp quản trị trang web.

Lập chỉ mục là quá trình khó khăn nhập thông tin về URL và nội dung của chúng vào bảng chỉ mục của công cụ tìm kiếm. Nó bị ảnh hưởng bởi nhiều yếu tố khác nhau. Vì vậy, không thể dự đoán chính xác ngày (giờ) và số lượng trang được lập chỉ mục. Thông thường, nếu thông tin về một trang web mới được thêm vào Search Sonsole, dữ liệu có thể được cập nhật trong vòng 10 đến 20 ngày. Trước giai đoạn này, bạn không nên cho rằng có điều gì đó không ổn với trang web.

Tài nguyên kỹ thuật của Google rất quan trọng nhưng việc phân phối chúng để lập chỉ mục vẫn có hạn ngạch riêng. Việc lập chỉ mục đầy đủ các trang của trang web không được đảm bảo. Bạn không nên mong đợi việc lập chỉ mục tất cả các trang của trang web vì lý do này.

Có vẻ như chúng tôi đã lập chỉ mục nội dung tại các URL khác. Tại sao chúng ta cũng nên lập chỉ mục trang này?
John Mueller, Google

Hãy chắc chắn kiểm tra xem tất cả đều quan trọng và trang bắt buộc các trang web được phép lập chỉ mục và bot tìm kiếm có quyền truy cập bình thường vào chúng. Sử dụng công cụ Tìm kiếm của Google Bảng điều khiển có tên "Xem với tư cách Googlebot". Đồng thời kiểm tra xem bạn đã thêm nó vào Google Search Console chưa phiên bản chính xácđịa điểm.

Bạn có thể đã xác nhận phiên bản "sai" của trang web của mình trong Search Sonsole. Bạn cần thêm trang web vào Search Sonsole với giao thức "http" hoặc "https" chính xác và có thể bằng "www". Nếu bạn thêm Phiên bản thay thế(ví dụ: thêm "http://example.com" khi trang web của bạn được lập chỉ mục là "http://www.example.com") thì chúng tôi sẽ không thể hiển thị tất cả dữ liệu của bạn.
John Mueller, Google

Điều gì quyết định tốc độ lập chỉ mục?

Tốc độ lập chỉ mục trang web phụ thuộc vào nhiều yếu tố, thời điểm chính xác chưa được xác định. Nhưng để tăng tốc đáng kể việc thêm trang vào chỉ mục, bạn có thể sử dụng công cụ “Xem như Googlebot” tương tự. Trong hầu hết các trường hợp, sau đó trang sẽ được thêm vào chỉ mục, nếu không ngay lập tức thì rất nhanh chóng.


Hãy nhớ rằng, mọi thứ đều rất riêng biệt đối với từng trang web. Tần suất truy cập của robot và số lượng yêu cầu trên mỗi lượt truy cập được xác định tự động.

Việc lập chỉ mục có thể trở nên rất chậm nếu:
- tìm thấy liên kết đến trang không tồn tại(các yêu cầu lặp đi lặp lại đối với các trang này được thực hiện thay vì quét các trang khác);
- tìm thấy liên kết đến các trang không có nội dung;
- phản hồi của máy chủ quá dài (thời gian tạm dừng giữa các yêu cầu tăng lên và số lượng yêu cầu giảm xuống để không tạo ra tải không cần thiết trên máy chủ);
- CMS của trang web tạo ra số lượng lớn các liên kết khác nhau đến cùng một nội dung hoặc đến trang trống.

Tại sao các trang (trang web) bị loại khỏi chỉ mục?

Điều đầu tiên bạn cần kiểm tra là liệu có lỗi trong cài đặt CMS hoặc điền vào tệp robots.txt hay không.

Đôi khi, do không chú ý hoặc vì lý do khác, quản trị viên web quên mở quyền truy cập vào robot tìm kiếm trong cài đặt CMS của trang web. Kết quả là thẻ meta xuất hiện trong mã của các trang trên trang web:

Điều này có nghĩa là không lập chỉ mục văn bản mà theo các liên kết.
Một trường hợp tương tự gần đây đã được John Mueller bình luận.

Trang web của bạn gửi (thực thi) tiêu đề HTTP thẻ x-robots với giá trị không - điều này có nghĩa là URL này sẽ không được lập chỉ mục. Bạn có thể kiểm tra kỹ điều này bằng cách sử dụng "Xem với tư cách Googlebot" trong Search Console hoặc sử dụng dòng lệnh sau:
$curl --silent -I http://toddnetworks.ie/ | grep -iE "oboy?"
X-Robots-Tag: không có
Bằng cách xóa (xóa) cái này (có thể nó chỉ là một tùy chọn trong CMS của bạn) và thêm lại url thông qua "Xem với tư cách Googlebot" / " gửi tới chỉ mục"Mọi thứ nên hoạt động như bình thường.
John Mueller, Google

Nguyên nhân thứ hai là vi phạm bản quyền. Kiểm tra trang web của bạn tại lumendatabase.org.
Lý do thứ ba, nghe có vẻ sáo rỗng, liên kết spam.
Hãy chắc chắn đọc:



Bạn có thể kiểm tra lập chỉ mục trang web những cách khác và mỗi cách đều cho kết quả khác nhau. Về vấn đề này, câu hỏi đặt ra là tính chính xác của đánh giá và những gì cần tập trung vào.

Vì những mục đích này, nhiều quản trị viên web sử dụng toán tử "site:". Nhưng liệu có thể tập trung vào nó?

Bạn có thể thực hiện yêu cầu "trang web:". Nó hiển thị số lượng kết quả rất xấp xỉ.
Nhưng khi không có nhiều trang trên trang web, bạn chỉ cần cuộn đến trang cuối và tất cả [trang - ghi chú của tác giả] này chắc chắn đều có trong chỉ mục vì chúng được phát hành.
Rinat Safin, Google


Trong hầu hết các trường hợp, số lượng kết quả khi sử dụng toán tử "site:" gần như bằng giá trị của các trang được lập chỉ mục trong tệp sơ đồ trang web trong Google Search Console.
Nếu bạn muốn có kết quả đáng tin cậy hơn, hãy xem lời khuyên của Andrey Lipattsev về cách sử dụng toán tử "site:".

Tập trung vào số lượng trang được lập chỉ mục được chỉ định trong phần Trạng thái lập chỉ mục. Những con số bạn cung cấp chỉ cho biết số lượng trang được lập chỉ mục từ những trang được đặt trong sơ đồ trang web. Nó không nhất thiết phải giống nhau.
Andrey Lipattsev, Google


Andrey Lipattsev về chủ đề này.

Trạng thái phần Lập chỉ mục của Google Search Console hiển thị số trang được lập chỉ mục nhưng không hiển thị trang nào nằm trong chỉ mục. Không biết liệu thông tin này có sẵn trong Search Console hay không, nhưng Google biết về sự quan tâm của các quản trị viên web đối với nó.

Cách xóa một trang khỏi chỉ mục

Nhiều quản trị viên web tin rằng để làm được điều này, chỉ cần đóng trang trong robots.txt là đủ.
Đây không phải là một lựa chọn. Một trang như vậy sẽ chỉ tiếp tục được lập chỉ mục trong đoạn thông tin sẽ xuất hiện rằng trang đó đã bị đóng trong robots.txt.
Trên thực tế, trong mã của một trang như vậy mà không chặn nó trong robots.txt bạn cần thêm thẻ meta:

Trong bài viết này, tôi muốn nói càng chi tiết càng tốt về cách tăng tốc và kiểm tra việc lập chỉ mục của một trang web, cách xóa một trang khỏi chỉ mục. Nếu bạn có thắc mắc, hãy hỏi trong phần bình luận.

lập chỉ mục trang web, Google, SEO,

Google là công cụ tìm kiếm đầu tiên trên thế giới. Cho dù bạn đang quảng cáo trang web của mình ở khu vực nào, bạn chắc chắn cần phải thêm nó vào công cụ tìm kiếm này. Trong bài viết này, tôi sẽ chỉ cho bạn cách thêm một trang web vào Google và lập chỉ mục trang web đó một cách nhanh chóng và chính xác.

Và bạn có thể tìm hiểu cách thêm một trang web vào Yandex.

Cách thêm trang web vào Google

Hãy kiên nhẫn, bởi vì mọi thứ công cụ tìm kiếm rất chậm. Sẽ mất vài tuần để trang web được lập chỉ mục. Điều này có nghĩa là bạn không cần phải trì hoãn việc thêm trang web của mình vào công cụ tìm kiếm. Nếu bạn vừa tạo một trang web và chưa có mục nào trong đó, bạn đã có thể thêm chúng.

Để thêm một trang web vào Google, bạn phải có tài khoản trong công cụ tìm kiếm này (nếu bạn sử dụng bởi Gmail, thì hãy coi như bạn có một tài khoản, qua đó bạn có thể truy cập mọi thứ công cụ của Google). LÀM những hành động sau theo thứ tự:

  1. Đi đến công cụ Quản trị viên web của Google, được định vị và nhấp vào nút " Thêm tài nguyên" Nhập địa chỉ của trang web bạn đang thêm và nhấp vào " Tiếp tục».

    Thêm trang web vào Google

  2. sẽ xuất hiện Trang tiếp theo, nơi bạn cần xác nhận quyền đối với trang web của mình. Có một số cách, nhưng cách dễ nhất và thuận tiện nhất là sử dụng tệp HTML. Tải xuống tệp được cung cấp cho bạn ở bước 1 hướng dẫn của Google và tải nó lên thư mục gốc của trang web của bạn. Nếu bạn đã làm mọi thứ chính xác thì khi nhấp vào liên kết ở bước 3 trong hướng dẫn của Google, bạn sẽ thấy nội dung của trang web này. Nếu không thì là trang 404. Nhấp vào " Xác nhận».

    Xác nhận quyền đối với trang web

  3. Để thêm một trang web vào Google và đạt được kết quả chính xác và lập chỉ mục nhanh, bạn cần hiển thị robot tìm kiếm ở nơi bạn có . Để thực hiện việc này, hãy đi tới bảng điều khiển trang web trong Công cụ quản trị trang web của Google, nhấp vào “ Đang quét" và chọn mục phụ " Các tập tinSơ đồ trang web" Nhấn nút Thêm/kiểm tra tập tinSơ đồ trang web" và nhập địa chỉ vào thẻ ở dòng chẳng hạn " ru/sơ đồ trang web.xml" Xin lưu ý rằng tên miền của trang web đã được ghi ở đó, vì vậy bạn cần nhập nó mà không cần - “ sơ đồ trang web.xml" Sau đó nhấp vào " Gửi fileSơ đồ trang web" Nếu bạn muốn kiểm tra lỗi trước khi thực hiện việc này, hãy nhấp vào " Kiểm traSơ đồ trang web».

    Thêm sơ đồ trang web

Nếu bạn đã làm mọi thứ về những điểm này thì hãy coi như bạn đã thành công trong việc thêm trang web của mình vào Google. Bây giờ bạn cần đợi một chút để công cụ tìm kiếm lập chỉ mục mọi thứ. Theo quy định, việc này mất 1-3 tuần. Bạn có thể kiểm soát toàn bộ quá trình lập chỉ mục trong

Thoạt nhìn, có vẻ như việc lập chỉ mục một trang web bằng robot tìm kiếm Google là một việc bình thường, không có gì nổi bật và sẽ không gây khó khăn ngay cả với những người mới bắt đầu.

Tuy nhiên, trên thực tế quá trình này cũng có nhiều cạm bẫy và những sắc thái mà bạn thậm chí có thể không biết, nhưng những sắc thái này phải được tính đến để có được kết quả tốt. Lập chỉ mục là một quá trình rất thú vị và chất lượng của nó không phụ thuộc vào cơ hội hay ý thích của robot tìm kiếm mà phụ thuộc vào chính bạn, cụ thể là vào các hành động bạn thực hiện.

Lập chỉ mục cũng Điều kiện cần thiếtđể thực hiện một chương trình tiếp thị trực tuyến. Tất nhiên, đây không phải là liên kết quan trọng nhất, nhưng chắc chắn là một trong những liên kết đầu tiên. Nếu không lập chỉ mục các trang đích của bạn hoặc xem qua nó bằng cách nào đó, bạn sẽ thất bại.

Bạn có thể đạt được việc lập chỉ mục trang web tốt hơn bằng những cách nào, hãy xem bài viết bên dưới.

Tính năng lập chỉ mục trong hệ thống Google

Đầu tiên, hãy xác định lập chỉ mục là gì và bản chất của quá trình này là gì.
Vì Google là công cụ tìm kiếm lớn nhất thế giới nên hãy tập trung chủ yếu vào chỉ mục của nó.

Chỉ mục web là gì?

Bạn biết chỉ mục là gì phải không? Đây là danh sách thông tin, một loại hướng dẫn về cách tìm thông tin này hoặc thông tin kia. Một trong những ví dụ đơn giản nhất về mục lục là mục mục chủ đề theo thứ tự bảng chữ cái ở cuối bất kỳ sách giáo khoa nào.

Chỉ mục web hơi khác một chút. Đây là một cơ sở dữ liệu, tức là danh sách tất cả các tài liệu được đăng trên Internet, cho biết vị trí của từng tài liệu. Thuộc tính chỉ mục này cho phép bạn nhanh chóng có được một số tài liệu nhất định trên mạng.

Khối lượng tài liệu được đăng trên Internet lớn đến mức không thể tưởng tượng được. Do đó, thông tin về từng tài liệu được đặt trong cơ sở dữ liệu lớn.

Hãy tưởng tượng rằng Internet là một thư viện khổng lồ chứa hàng triệu, hàng tỷ loại sách (trang web). Máy tìm kiếm hệ thống Google và là chỉ mục cho thư viện này. May mắn thay, để sử dụng chỉ mục này, bạn không cần biết Phân loại thập phân Dewey là gì hoặc cách sử dụng nó; Tất cả những gì bạn cần là khả năng gõ.

Khi bạn nhập truy vấn vào thanh tìm kiếm của hệ thống và nhấp vào nút “Tìm kiếm”, bạn tìm kiếm cụ thể theo chỉ mục. Trang kết quả là trang chỉ mục.

Google lập chỉ mục Internet như thế nào?

Để có thể lập chỉ mục cho một thư viện lớn như Internet, bạn cần phải có những công cụ mạnh mẽ nhất. Những công cụ này được gọi là “nhện” (từ tiếng Anh - nhện) hoặc robot tìm kiếm.

Tại sao lại là nhện? Bởi vì họ thu thập thông tin từ trang này sang trang khác, về cơ bản là tạo ra thông tin web. Quá trình này được gọi là tìm nạp. Nhện chọn thông tin, sau đó được lưu trữ trong chỉ mục của Google.

Một con nhện web bò vào một trang web, lập chỉ mục tất cả các trang có sẵn ở đó, bò tới trang tiếp theo, lập chỉ mục cho nó và tiếp tục di chuyển theo hướng mà chuỗi liên kết được đăng trên mạng chỉ đạo nó.

Đây là cách chỉ số toàn năng được hình thành.

Nhện lưu trữ những loại thông tin gì?

Spider đang cố gắng xem lại hầu hết thông tin được đăng trên trang web, nhưng anh ấy không thể nhìn thấy tất cả mọi thứ. Nó lập chỉ mục nhiều nhất Thông tin quan trọng.

Thang màu đỏ - tầm quan trọng đối với công cụ tìm kiếm; thang màu xanh lam - tầm quan trọng đối với người dùng.
Từ trên xuống dưới: địa chỉ trang, thẻ Tiêu đề, siêu dữ liệu, thẻ hình ảnh, tiêu đề, liên kết, nội dung.

1. Địa chỉ trang - URL (Uniform Resource locator - định vị tài nguyên thống nhất).
2. Thẻ tiêu đề. Tiêu đề là tên của trang đích.
3. Siêu dữ liệu. Mô tả trang web với bộ từ khóa.

Đây chính là tập hợp thông tin chính mà robot tìm kiếm gửi tới chỉ mục của Google. Và đây chính xác là thông tin bạn nhìn thấy trên trang kết quả tìm kiếm.

Đây là ý tưởng cơ bản. Rõ ràng, sẽ có nhiều khó khăn hơn khi tìm kiếm thông tin bằng cách sử dụng chỉ mục, cách tổ chức và hiển thị kết quả phù hợp.

Chúng tôi, với tư cách là quản trị viên web, nên quan tâm đến các vấn đề khác, cụ thể là, cần thực hiện những bước nào để robot tìm kiếm của Google xem trang web của bạn càng sớm càng tốt và nhập thông tin về trang web đó vào cơ sở dữ liệu chung.

Bạn có thể làm gì để Google lập chỉ mục trang web của bạn nhanh nhất có thể?

Cần phải nói rằng bất kể bạn có thực hiện bất kỳ điều nào sau đây hay không, Google có thể sẽ lập chỉ mục trang web của bạn trừ khi bạn cố tình ngăn việc lập chỉ mục trang web đó (thông qua tệp robots.txt).

Nhưng nếu bạn để quá trình này có cơ hội, thì bạn có thể vào chỉ mục vô thời hạn trong một khoảng thời gian dài. Đối với một số người, trang web sẽ được lập chỉ mục sau 2 tuần và đối với những người khác - sau 2 tháng. Vì lợi ích của bạn, trang đích được lập chỉ mục càng sớm càng tốt và để làm được điều này, bạn cần phải thực hiện một số hành động đặc biệt. Chính xác những gì cần phải làm - đọc phần bên dưới.

Bước # 1: tạo sơ đồ trang web

Bản đồ là một tài liệu ở định dạng XML phải được đặt trong thư mục gốc của trang web của bạn. Robot tìm kiếm tham chiếu đến tài liệu này để xem xét toàn bộ trang web của bạn, hiểu trang/phần nào trên đó là quan trọng nhất và nơi chứa nội dung mới nhất. Sơ đồ trang web là thứ không thể thiếu và là một trong những yếu tố quan trọng nhất để lập chỉ mục thành công.

Robot tìm kiếm rất thông minh nhưng nó cần có sơ đồ trang web. Để làm gì? Nếu không có sơ đồ trang web, việc lập chỉ mục trang đích hoặc tài liệu mới có thể mất tới 24 giờ. Chuyện này quá dài. Với sự trợ giúp của bản đồ trang web, bạn có thể giảm thời gian của quá trình này xuống còn vài phút. Đồng ý: một sự khác biệt đáng kể.

Để chứng minh tính hợp lệ của quan điểm này, một thử nghiệm đã được tiến hành trong đó đo tốc độ lập chỉ mục một trang web không có sơ đồ trang web và một trang web có bản đồ. Kết quả còn hơn cả tuyệt vời:

Lập chỉ mục các trang web mà không cần sơ đồ trang web. Dọc: thời gian tính bằng phút, ngang: số trang được lập chỉ mục.

Lập chỉ mục các trang web bằng cách sử dụng sơ đồ trang web. Dọc: thời gian tính bằng phút, ngang: số trang được lập chỉ mục.

Sau khi bạn đã tạo tập tin sơ đồ trang web, bạn có thể tải nó lên Google Search Console. Để làm điều này, hãy làm như sau:

  • trên chính trang Google Search Console chọn trang web của bạn;
  • trong bảng điều khiển ở bên trái màn hình, nhấp vào “Cấu hình trang web” rồi nhấp vào “Sơ đồ trang web”;
  • ở bên phải góc trên cùng nhấp vào nút “Thêm/Kiểm tra sơ đồ trang web”;
  • nhập /system/feeds/sitemap vào hộp văn bản xuất hiện;
  • Nhấp vào "Gửi sơ đồ trang web".

Bước #2: Tạo tệp Robots.txt

Robots.txt là tập tin thông thường trang web của bạn, chứa các hướng dẫn dành cho rô-bốt tìm kiếm: nó cho biết nội dung nào cần lập chỉ mục và nội dung nào không lập chỉ mục. Đây là điểm dừng đầu tiên mà một con nhện thực hiện trên tài nguyên web của bạn. Nếu robots.txt của bạn có vẻ như nói “đừng lập chỉ mục cho tôi”, thì rô-bốt tìm kiếm sẽ không lập chỉ mục bất cứ thứ gì và sẽ tiếp tục thu thập thông tin. Do đó, điều rất quan trọng là robots.txt của bạn phải cấp cho Googlebot quyền không hạn chế để xem xét trang web của bạn.

Tất nhiên, nếu bạn muốn ngăn một số trang nhất định trên trang web của mình xuất hiện trong kết quả tìm kiếm, bạn có thể hạn chế quyền truy cập vào chúng.

Đây là những gì công cụ tìm kiếm Google nói về robots.txt:

“Hầu hết các trang web không cần ẩn một số trang nhất định khỏi robot tìm kiếm, vì vậy chúng sẽ xuất hiện trong kết quả tìm kiếm mà không cần nỗ lực thêm. Robots.txt, cùng với các công cụ quản trị trang web khác, cung cấp cho chủ sở hữu tài nguyên web cơ hội không giới hạn để quản lý việc lập chỉ mục trang web và hành vi của robot tìm kiếm trên trang web. Bằng cách sử dụng tệp này, chủ sở hữu tài nguyên Internet có thể chặn Google (hoặc các công cụ tìm kiếm khác) lập chỉ mục trang web và đưa ra một số hướng dẫn đặc biệt để lập chỉ mục một số trang nhất định.”

Chỉ có một kết luận: hơn nhiều trang hơn trang web của bạn được mở để lập chỉ mục thì càng tốt.

Bước số 3: Đăng ký trang web trên công cụ tìm kiếm

Trước đây, người ta tin rằng để công cụ tìm kiếm lập chỉ mục một trang web, quản trị viên web phải gửi đơn đăng ký và đăng ký tài nguyên trong hệ thống. Tuy nhiên, ngày nay những thợ thủ công như vậy đang xuất hiện Tối ưu hóa công cụ tìm kiếm, có thể đẩy các trang web lên trang đầu tiên ngay cả khi không cần đăng ký kết quả tìm kiếm. Nếu bạn chưa thể tự hào về kỹ năng như vậy, chúng tôi khuyên bạn vẫn nên đăng ký trang web của mình trên tất cả các công cụ tìm kiếm phổ biến. Trên Google, bạn có thể thực hiện việc này thông qua Google Search Console.

Bước #4: Thực hiện liên kết nội bộ

Cách hiệu quả nhất để tăng tốc độ lập chỉ mục trang web là liên kết nội bộ các trang của trang web.

Lộ trình mà robot tìm kiếm di chuyển tới mạng toàn cầu, được hình thành thông qua các liên kết. Khi một trang được liên kết với một trang khác, con nhện cũng tự động chuyển đến trang đó. Nhiệm vụ của bạn là đảm bảo rằng tất cả các trang chính của trang web được kết nối với nhau bằng các liên kết.

Nếu trang web của bạn được tổ chức tốt, liên kết nội bộ sẽ diễn ra một cách tự nhiên. Hãy xem ví dụ này về kiến ​​trúc trang web nhà hàng điển hình: Tất cả các trang chính được kết nối với nhau.

Càng nhiều trang liên kết với nhau thì càng tốt. Ngay khi bạn xuất bản tài liệu mới trên trang web của mình, hãy thêm ngay các liên kết đến các trang khác.

Bước #5: Tăng chỉ số trích dẫn của bạn

Đó là một chuyện khi bạn tạo và đặt các liên kết đến trang web của bạn trong chính trang web đó nhưng lại là một chuyện khác khi mọi người liên kết với bạn từ bên ngoài. Tất nhiên, để lên trang của các trang web khác, bạn cần phải nổi bật với điều gì đó khác thường và hữu ích. Người khác càng nói về bạn thường xuyên thì trang web của bạn sẽ được lập chỉ mục càng nhanh và xếp hạng trong kết quả tìm kiếm càng cao.

Bước #6: Khuyến khích chia sẻ trên mạng xã hội

Chia sẻ trên mạng xã hội là một phần quan trọng trong việc lập chỉ mục hiệu quả, vì vậy hãy liên kết rộng rãi tới nội dung của bạn. trong mạng xã hội. Vì Google và Twitter đã đạt được thỏa thuận Hiệp định hợp tác, để chia sẻ dữ liệu một cách liền mạch, Google có thể truy cập loại thông tin này rất nhanh và bạn sẽ cải thiện việc lập chỉ mục trang web của mình.

Bước # 7: Bắt đầu một Blog

Một blog sẽ buộc bạn phải tạo ra vô số điều thú vị và nội dung hữu ích, và điều này cực kỳ cần thiết cho những vị trí cao trong kết quả tìm kiếm. Hãy nhớ rằng: bạn càng đăng nhiều nội dung trực tuyến thì .

Bước # 8: Tạo nguồn cấp RSS

Nguồn cấp dữ liệu RSS là không bắt buộc, nhưng nó cũng sẽ không thừa. RSS (Tóm tắt trang web phong phú) là một nhóm các định dạng XML được thiết kế để mô tả các nguồn cấp tin tức, thông báo bài viết, thay đổi blog, v.v. Có lẽ đây là một trong những những cách đơn giản thông báo về các bản cập nhật của trang web, blog, v.v., nhưng hiện tại nó đã lỗi thời một phần. Nhưng ngay cả như vậy, nguồn cấp dữ liệu RSS có thể cách hiệu quả truyền đạt tới thông tin Google về tài liệu mới của bạn ngay khi nó xuất hiện trên trang web của bạn.

Bước # 9: Theo dõi lỗi lập chỉ mục

Lỗi và một số điểm không chính xác trong việc lập chỉ mục trang web là không thể tránh khỏi. Điều này thường xảy ra khi bạn thực hiện những thay đổi quan trọng đối với trang web của mình bằng cách thêm, xóa hoặc di chuyển trang.

Gần đây anh ấy đã chia sẻ với tôi một nhận xét rằng nhiều trang web đến với chúng tôi để kiểm tra thường mắc lỗi tương tự. Hơn nữa, những sai lầm này không phải lúc nào cũng được coi là tầm thường - ngay cả những quản trị viên web cấp cao cũng mắc phải chúng. Vì vậy nảy sinh ý tưởng viết một loạt bài hướng dẫn cách theo dõi và sửa những lỗi như vậy. Đầu tiên là hướng dẫn thiết lập lập chỉ mục trang web. Tôi nhường chỗ cho tác giả.

Để lập chỉ mục trang web tốt và xếp hạng trang tốt hơn, công cụ tìm kiếm cần phải bỏ qua các trang được quảng cáo chính của trang web và trên chính các trang đó phải làm nổi bật chính xác nội dung chính mà không bị nhầm lẫn với lượng thông tin dịch vụ và phụ trợ dồi dào.
Các trang web đến với chúng tôi để phân tích gặp phải hai loại lỗi:

1. Khi quảng cáo một trang web, chủ sở hữu của chúng không nghĩ về những gì bot tìm kiếm nhìn thấy và thêm vào chỉ mục. Trong trường hợp này, một tình huống có thể phát sinh khi có nhiều trang rác trong chỉ mục hơn các trang được quảng cáo và bản thân các trang đó bị quá tải.

2. Ngược lại, chủ sở hữu lại quá nhiệt tình trong việc dọn dẹp mặt bằng. Cùng với thông tin không cần thiết Dữ liệu quan trọng để quảng bá và xếp hạng các trang cũng có thể bị ẩn.

Hôm nay chúng ta muốn xem xét điều gì thực sự đáng để trốn tránh robot tìm kiếm và làm thế nào tốt nhất để làm điều đó. Hãy bắt đầu với nội dung của các trang.

Nội dung

Các vấn đề liên quan đến việc đóng nội dung trên trang web:

Trang này được robot tìm kiếm đánh giá một cách toàn diện chứ không chỉ bằng các chỉ báo văn bản. Bằng cách đóng các khối khác nhau, thông tin quan trọng để đánh giá mức độ hữu ích và xếp hạng thường bị xóa.

Hãy để chúng tôi đưa ra một ví dụ nhất lỗi thường gặp:
– tiêu đề trang web bị ẩn. Nó thường là nhà Thông tin liên lạc, liên kết. Nếu tiêu đề trang web bị đóng, các công cụ tìm kiếm có thể không biết rằng bạn đã quan tâm đến khách truy cập và đặt thông tin quan trọng ở vị trí nổi bật;

– bộ lọc, biểu mẫu tìm kiếm và sắp xếp bị ẩn khỏi việc lập chỉ mục. Sự hiện diện của những khả năng như vậy trong một cửa hàng trực tuyến là một chỉ báo thương mại quan trọng, tốt hơn là nên hiển thị thay vì che giấu.
– thông tin về thanh toán và giao hàng bị ẩn. Điều này được thực hiện để tăng tính độc đáo trên thẻ sản phẩm. Nhưng đây cũng là thông tin cần có trên một tấm thẻ sản phẩm chất lượng.
– các menu bị “cắt bỏ” khỏi các trang, làm xấu đi việc đánh giá mức độ dễ dàng điều hướng trên trang web.

Tại sao một số nội dung bị chặn trên trang web?
Thường có một số mục tiêu:
– tập trung vào nội dung chính trên trang, loại bỏ các thông tin phụ, khối dịch vụ và menu khỏi chỉ mục;
– làm cho trang trở nên độc đáo và hữu ích hơn bằng cách xóa các khối trùng lặp trên trang web;
– loại bỏ văn bản “thừa”, tăng mức độ liên quan về mặt văn bản của trang.

Tất cả điều này có thể đạt được mà không cần che giấu một số nội dung!
Bạn có một thực đơn rất lớn?
Chỉ hiển thị trên các trang những mục liên quan trực tiếp đến phần này.

Có nhiều tùy chọn bộ lọc để lựa chọn?
Chỉ hiển thị những cái phổ biến trong mã chính. Chỉ tải các tùy chọn khác nếu người dùng nhấp vào nút “hiển thị tất cả”. Có, tập lệnh được sử dụng ở đây, nhưng không có sự lừa dối nào - tập lệnh được kích hoạt theo yêu cầu của người dùng. Công cụ tìm kiếm sẽ có thể tìm thấy tất cả các mục nhưng khi đánh giá chúng sẽ không nhận được giá trị giống như nội dung chính của trang.

Trên trang khối lớn với tin tức?
Giảm số lượng, chỉ hiển thị các tiêu đề hoặc đơn giản xóa khối tin tức nếu người dùng hiếm khi nhấp vào các liên kết trong đó hoặc có ít nội dung chính trên trang.

Robot tìm kiếm, mặc dù không còn lý tưởng nhưng vẫn không ngừng cải tiến. Google đã hiển thị các tập lệnh ẩn khỏi lập chỉ mục là một lỗi trong Bảng điều khiển của Google Search Console (tab Tài nguyên bị chặn). Việc không hiển thị một số nội dung cho robot thực sự có thể hữu ích, nhưng đây không phải là một phương pháp tối ưu hóa mà chỉ là những “chiếc nạng” tạm thời chỉ nên sử dụng khi thực sự cần thiết.

Chúng tôi khuyên bạn nên:
– coi nội dung ẩn như một “cái nạng” và chỉ sử dụng nó trong những tình huống cực đoan, cố gắng cải thiện trang đó;
– khi xóa một phần nội dung khỏi trang, không chỉ tập trung vào các chỉ báo văn bản mà còn đánh giá sự thuận tiện và thông tin ảnh hưởng;
– trước khi ẩn nội dung, hãy tiến hành thử nghiệm trên một số trang thử nghiệm. Các bot tìm kiếm có thể phân tích các trang và nỗi lo sợ của bạn về mức độ liên quan giảm có thể là vô ích.

Hãy xem những phương pháp nào được sử dụng để ẩn nội dung:

thẻ noindex

Phương pháp này có một số nhược điểm. Trước hết, thẻ này chỉ tính đến Yandex nên việc ẩn văn bản khỏi Google là vô ích. Ngoài ra, điều quan trọng là phải hiểu rằng thẻ cấm lập chỉ mục và chỉ hiển thị văn bản trong kết quả tìm kiếm. Nó không áp dụng cho các nội dung khác, chẳng hạn như các liên kết.

Bộ phận hỗ trợ của Yandex không nói nhiều về cách hoạt động của noindex. Một chút thêm thông tin là một trong những cuộc thảo luận trên blog chính thức.

Câu hỏi của người dùng:

“Cơ chế hoạt động và tác động lên thứ hạng của thẻ vẫn chưa được hiểu đầy đủ chữ. Tiếp theo tôi sẽ giải thích tại sao chúng ta lại bối rối như vậy. Và bây giờ có 2 giả thuyết, tôi muốn tìm ra sự thật.

#1 Noindex hoàn toàn không ảnh hưởng đến thứ hạng/mức độ liên quan của trang

Theo giả định này: điều duy nhất nó làm là chặn một phần nội dung xuất hiện trong kết quả tìm kiếm. Trong trường hợp này, toàn bộ trang được coi là tổng thể, bao gồm các khối đóng, mức độ liên quan và các thông số liên quan (tính duy nhất, tính tuân thủ, v.v.) vì nó được tính toán theo tất cả nội dung trong mã, thậm chí cả những nội dung đã đóng.

Noindex số 2 ảnh hưởng đến xếp hạng và mức độ liên quan, vì nội dung được đóng trong thẻ hoàn toàn không được đánh giá. Theo đó, mọi thứ lại diễn ra ngược lại. Trang này sẽ được xếp hạng theo nội dung mà robot có thể truy cập được.”

Trong trường hợp nào thẻ có thể hữu ích:
– nếu có nghi ngờ rằng trang bị hạ cấp trong kết quả Yandex do tối ưu hóa quá mức, nhưng đồng thời chiếm vị trí TOP cho các cụm từ quan trọng trong Google. Bạn cần hiểu rằng đây là giải pháp nhanh chóng và tạm thời. Nếu toàn bộ trang web thuộc “Baden-Baden”, noindex, như đại diện của Yandex đã nhiều lần xác nhận, sẽ không giúp ích gì;
– để ẩn thông tin độc quyền chung mà bạn phải chỉ ra trên trang do các quy định của công ty hoặc pháp luật;
– để điều chỉnh các đoạn trong Yandex nếu chúng chứa nội dung không mong muốn.

Ẩn nội dung bằng AJAX

Cái này phương pháp phổ quát. Nó cho phép bạn ẩn nội dung khỏi cả Yandex và Google. Nếu bạn muốn xóa trang khỏi nội dung làm mờ đi mức độ liên quan thì tốt hơn nên sử dụng nó. Tất nhiên, đại diện của PS không hoan nghênh phương pháp này và khuyến nghị các robot tìm kiếm nên xem nội dung giống như người dùng.
Công nghệ sử dụng AJAX Nó phổ biến rộng rãi và nếu bạn không tham gia vào hoạt động che giấu rõ ràng thì sẽ không có biện pháp trừng phạt nào đối với việc sử dụng nó. Nhược điểm của phương pháp này là bạn vẫn phải chặn quyền truy cập vào các tập lệnh, mặc dù Yandex và Google không khuyên bạn nên làm điều này.

Trang web

Để thăng tiến thành công, điều quan trọng không chỉ là loại bỏ thông tin không cần thiết trên các trang, nhưng cũng rõ ràng chỉ mục tìm kiếm trang web từ các trang rác không hữu ích.
Đầu tiên, nó sẽ tăng tốc độ lập chỉ mục các trang được quảng cáo chính của trang web. Thứ hai, sự hiện diện trong chỉ số số lượng lớn các trang rác sẽ ảnh hưởng tiêu cực đến việc đánh giá trang web và việc quảng bá trang web đó.

Hãy liệt kê ngay các trang nên ẩn:

– trang mẫu đơn đăng ký, giỏ người dùng;
– kết quả tìm kiếm trang web;
thông tin cá nhân người dùng;
– trang kết quả so sánh sản phẩm và các module phụ trợ tương tự;
– các trang được tạo bởi bộ lọc tìm kiếm và sắp xếp;
– các trang thuộc phần quản trị của trang web;
– các phiên bản có thể in được.

Hãy xem xét các cách mà bạn có thể chặn lập chỉ mục các trang.

Đóng trong robots.txt

Đây không phải là phương pháp tốt nhất.

Thứ nhất, tệp rô-bốt không nhằm mục đích chống trùng lặp và dọn sạch các trang rác. Đối với những mục đích này, tốt hơn là sử dụng các phương pháp khác.

Thứ hai, lệnh cấm tập tin robot không đảm bảo rằng trang này sẽ không được đưa vào chỉ mục.

Đây là những gì Google nói về nó trong phần trợ giúp của nó:

noindex thẻ meta

Để đảm bảo rằng các trang được loại trừ khỏi chỉ mục, tốt hơn nên sử dụng thẻ meta này.

Dưới đây là phiên bản của thẻ meta mà cả hai công cụ tìm kiếm đều hiểu:

Tâm điểm!

Để Googlebot nhìn thấy thẻ meta ngăn lập chỉ mục, bạn cần mở quyền truy cập vào các trang bị đóng trong tệp robots.txt. Nếu điều này không được thực hiện, robot có thể không truy cập được các trang này.

Tiêu đề thẻ X-Robots

Một ưu điểm đáng kể của phương pháp này là lệnh cấm có thể được đặt không chỉ trong mã trang mà còn thông qua tệp .htaccess gốc.

Phương pháp này không phổ biến lắm trong RuNet. Chúng tôi cho rằng nguyên nhân chính dẫn đến tình trạng này là do Yandex đã không hỗ trợ phương pháp này trong một thời gian dài.
Năm nay, nhân viên Yandex đã viết rằng phương pháp này hiện đã được hỗ trợ.

Phản hồi hỗ trợ không chi tiết lắm))). Trước khi chuyển sang cấm lập chỉ mục bằng X-Robots-Tag, tốt hơn hết bạn nên đảm bảo rằng phương pháp này hoạt động trong Yandex. Chúng tôi chưa tiến hành thử nghiệm của riêng mình về chủ đề này, nhưng có lẽ chúng tôi sẽ làm như vậy trong tương lai gần.

Mật khẩu bảo vệ

Nếu bạn cần ẩn toàn bộ trang web, chẳng hạn như phiên bản thử nghiệm, chúng tôi cũng khuyên bạn nên sử dụng phương pháp này. Có lẽ nhược điểm duy nhất là có thể gặp khó khăn nếu bạn cần quét một miền ẩn dưới mật khẩu.

Loại bỏ các trang rác bằng AJAX

Vấn đề không chỉ là cấm lập chỉ mục các trang được tạo bởi bộ lọc, sắp xếp, v.v. mà còn là không tạo các trang như vậy trên trang web.

Ví dụ: nếu người dùng đã chọn một tập hợp tham số trong bộ lọc tìm kiếm mà bạn không tạo trang riêng, thì những thay đổi đối với sản phẩm hiển thị trên trang sẽ xảy ra mà không thay đổi chính URL.

Khó khăn của phương pháp này là nó thường không thể áp dụng cho tất cả các trường hợp cùng một lúc. Một số trang được tạo ra được sử dụng để quảng cáo.

Ví dụ: lọc các trang. Đối với “tủ lạnh + Samsung + trắng” chúng ta cần một trang, nhưng đối với “tủ lạnh + Samsung + trắng + hai buồng + không đóng băng” chúng ta không cần một trang nữa.

Vì vậy, bạn cần tạo một công cụ cho phép tạo ra các ngoại lệ. Điều này khiến nhiệm vụ của người lập trình trở nên khó khăn hơn.

Sử dụng các phương pháp để chặn lập chỉ mục từ thuật toán tìm kiếm

"Tham số URL" trong Google Search Console

Công cụ này cho phép bạn chỉ định cách xác định một sự cố trong URL trang các thông số mới.

Lệnh clean-param trong robots.txt

Trong Yandex, có thể chỉ định lệnh cấm tương tự đối với các tham số URL bằng lệnh Clean-param.
Bạn có thể đọc về điều này.

Địa chỉ Canonical như một cách để ngăn chặn sự xuất hiện của các trang rác trên một trang web
Thẻ meta này được tạo đặc biệt để chống lại các trang trùng lặp và rác trên trang web. Chúng tôi khuyên bạn nên quy định điều này trên toàn bộ trang web để ngăn chặn các trang trùng lặp và rác xuất hiện trong chỉ mục.

Các công cụ nhằm mục đích xóa các trang khỏi chỉ mục Yandex và Google

Nếu một tình huống phát sinh khi bạn cần khẩn trương xóa thông tin khỏi chỉ mục mà không cần đợi lệnh cấm của bạn được nhìn thấy công việc tìm kiếm, bạn có thể sử dụng các công cụ từ bảng điều khiển Yandex.Webmaster và Google Search Console.

Trong Yandex đây là “Xóa URL”:

Trong Google Search Console "Xóa URL":

Liên kết nội bộ

Các liên kết nội bộ được đóng lại từ việc lập chỉ mục để phân phối lại trọng số nội bộ cho các trang được quảng cáo chính. Nhưng vấn đề là:
– việc phân phối lại như vậy có thể có tác động tiêu cực đến quan hệ chung giữa các trang;
– các liên kết từ các khối xuyên suốt mẫu thường có nhẹ hơn hoặc có thể không được tính đến chút nào.

Hãy xem các tùy chọn được sử dụng để ẩn liên kết:

thẻ noindex

Thẻ này vô dụng để ẩn các liên kết. Nó chỉ áp dụng cho văn bản.

Thuộc tính rel=”nofollow”

Hiện tại, thuộc tính này không cho phép bạn giảm trọng lượng trên trang. Khi sử dụng rel=”nofollow” trọng lượng sẽ giảm đi. Bản thân việc sử dụng thẻ cho các liên kết nội bộ có vẻ không hợp lý lắm.

Ẩn liên kết bằng tập lệnh

Đây thực sự là phương pháp làm việc duy nhất mà bạn có thể ẩn liên kết khỏi các công cụ tìm kiếm. Bạn có thể sử dụng Ajax và tải các khối liên kết sau khi trang được tải hoặc thêm liên kết bằng cách thay thế thẻ bằng tập lệnh TRÊN . Điều quan trọng cần lưu ý là các thuật toán tìm kiếm có thể nhận ra các tập lệnh.

Đối với nội dung, nó là một “cái nạng” đôi khi có thể giải quyết được một vấn đề. Nếu bạn không chắc chắn rằng mình sẽ nhận được tác động tích cực từ một khối liên kết ẩn, tốt hơn hết bạn không nên sử dụng những phương pháp như vậy.

Phần kết luận

Việc loại bỏ các khối lớn từ đầu đến cuối khỏi một trang thực sự có thể có tác động tích cực đến thứ hạng. Tốt hơn hết bạn nên làm điều này bằng cách rút ngắn trang và chỉ hiển thị nội dung mà khách truy cập cần. Ẩn nội dung khỏi công cụ tìm kiếm là một chiếc nạng chỉ nên sử dụng trong trường hợp không thể rút ngắn các khối đầu cuối bằng các cách khác.

Khi xóa một số nội dung khỏi một trang, đừng quên rằng không chỉ tiêu chí văn bản quan trọng đối với việc xếp hạng mà còn cả tính đầy đủ của thông tin và các yếu tố thương mại.

Tình hình gần như tương tự với các liên kết nội bộ. Đúng, đôi khi điều này có thể hữu ích, nhưng việc phân phối lại khối lượng liên kết một cách nhân tạo trên trang web là một phương pháp gây tranh cãi. Sẽ an toàn và đáng tin cậy hơn nhiều nếu bạn chỉ cần từ chối các liên kết mà bạn không chắc chắn về nó.

Với các trang của trang web, mọi thứ đều rõ ràng hơn. Điều quan trọng là đảm bảo rằng các trang rác, không hữu ích không được đưa vào chỉ mục. Có nhiều phương pháp cho việc này mà chúng tôi đã tổng hợp và mô tả trong bài viết này.

Bạn luôn có thể nhận được lời khuyên từ chúng tôi về các khía cạnh kỹ thuật của việc tối ưu hóa hoặc đặt hàng khuyến mãi chìa khóa trao tay, bao gồm.

Để hiểu liệu một trang cụ thể của trang web có được tìm kiếm hay không và có bao nhiêu trang trong tài nguyên của bạn được các công cụ tìm kiếm nhìn thấy, bạn không cần nhiều. Chúng tôi sẽ cho bạn biết thêm về cách kiểm tra việc lập chỉ mục trang web và nhận thông tin cần thiết trong bài viết này.Chúng ta hãy lưu ý ngay rằng khi quét một trang web, robot sẽ chuyển tất cả thông tin nhận được về tài nguyên sang các cơ sở dữ liệu riêng biệt. Và sau đó công cụ tìm kiếm sẽ hoạt động trên các cơ sở dữ liệu này.Tuy nhiên, chúng tôi lưu ý rằng một số quản trị viên web thiếu kinh nghiệm nhầm lẫn hai khái niệm: thu thập thông tin và lập chỉ mục. Thu thập dữ liệu về cơ bản là một robot kiểm tra một trang web. Không mất nhiều thời gian để thu thập dữ liệu toàn bộ tài nguyên. Nhưng việc lập chỉ mục - nghĩa là thêm thông tin về tài nguyên vào cơ sở dữ liệu - mất một thời gian tương đối dài.

1) Cách kiểm tra lập chỉ mục trang web thông qua bảng điều khiển trong dịch vụ quản trị trang web

Phương pháp này là phương pháp chính. Đối với dịch vụ Google, hãy làm theo các bước sau:

  • đi đến bảng điều khiển dịch vụ;
  • chọn tab Search Console;
  • sau đó, chuyển đến tab khác “Google Index”;
  • Nhấp vào trạng thái Lập chỉ mục.

Đối với dịch vụ Yandex, chuỗi hành động sẽ như sau:

  • mở quản trị trang web;
  • tìm mục Lập chỉ mục trang web;
  • chọn dòng Trang trong tìm kiếm.

Bạn cũng có thể thực hiện theo một chuỗi tab khác - sau khi Lập chỉ mục trang web, nhấp vào tab Lịch sử, sau đó nhấp vào tab Trang trong Tìm kiếm. Điều này sẽ cho phép bạn theo dõi số lượng trang được lập chỉ mục thay đổi như thế nào.

Phương pháp xác minh này chỉ khả dụng với những quản trị viên web đã được cấp quyền truy cập thích hợp vào thanh công cụ dịch vụ.

Hình ảnh bên dưới hiển thị biểu đồ của một trang web được lập chỉ mục tốt. Như bạn có thể thấy, số lượng trang trong chỉ mục không ngừng tăng lên.

Và hình ảnh dưới đây cho thấy trường hợp có vấn đề về lập chỉ mục hoặc các trang web thường bị đóng không được lập chỉ mục.

2) Kiểm tra bằng toán tử tìm kiếm

Với sự giúp đỡ của họ, thật dễ dàng để làm rõ các kết quả trong tương lai. Ví dụ: tham số/toán tử “site:” rất phù hợp cho những mục đích này, qua đó bạn có thể biết chính xác có bao nhiêu trang được lập chỉ mục.

Để thực hiện việc này, hãy nhập tổ hợp sau vào thanh tìm kiếm (Yandex hoặc Google hoặc tốt hơn là cả hai):trang web: url trang web

Ghi chú! Sự khác biệt lớn trong kết quả của hai công cụ tìm kiếm có thể cho thấy sự hiện diện của một số vấn đề nhất định trong hoạt động của trang web.

Ví dụ: trang web cubing.com.ua, dữ liệu được hiển thị trong ảnh chụp màn hình bên dưới, nằm trong bộ lọc AGS được áp dụng bởi công cụ tìm kiếm Yandex.

Nhưng các công cụ bổ sung có sẵn trong công cụ tìm kiếm giúp bạn có thể thu được nhiều thông tin thú vị. Ví dụ: việc lập chỉ mục thay đổi như thế nào trong một khoảng thời gian nhất định.

3) Plugin và tiện ích mở rộng

Đây là một phương pháp xác minh tự động. Ngoài các plugin, bạn có thể sử dụng các tiện ích mở rộng đặc biệt. Chúng còn được gọi là bookmarklets, là các chương trình tập lệnh. Chúng được lưu dưới dạng dấu trang trình duyệt thông thường.

Điểm hấp dẫn của tập lệnh là giờ đây bạn không cần phải mở đi mở lại công cụ tìm kiếm và nhập một số từ hoặc ký hiệu. Chương trình sẽ làm mọi thứ cho bạn.

Hình trên cho thấy một ví dụ về plugin hoạt động thanh RDS . Ảnh chụp màn hình hiển thị dữ liệu nào khi được tích hợp vào trình duyệt Google Trình duyệt Chrome. Nhưng trong trình duyệt Mozilla nó thậm chí còn cung cấp nhiều dữ liệu và khả năng hơn.

Đặc biệt, một plugin như vậy giúp bạn có thể lấy dữ liệu dưới dạng trang riêng và trên toàn bộ trang web.

Ghi chú! Plugin có sẵn cả trả phí và miễn phí. Một nhược điểm rõ ràng phiên bản miễn phí– sự cần thiết phải liên tục nhập hình ảnh xác thực. Thật đáng kinh ngạc!

Tập lệnh/bookmarklet “Kiểm tra chỉ mục” nhận được đánh giá tốt. Bạn chỉ cần kéo nó vào bảng điều khiển trình duyệt của bạn. Sau đó mở trang bạn cần và nhấp vào tab script. Điều này sẽ kích hoạt tab mới trình duyệt, hiển thị tất cả dữ liệu.

4) Dịch vụ đặc biệt

Người trợ giúp thực sự của tất cả các chuyên gia SEO. Danh sách các dịch vụ như vậy có thể mất nhiều thời gian – có rất nhiều dịch vụ như vậy. Ví dụ, một tài nguyên được phân bổ Nhện Netpeak.

Ưu điểm chính của dịch vụ là bạn nhận được rất nhiều thông tin thêm Ngoài dữ liệu cơ bản:

  • dữ liệu về số lượng trang được lập chỉ mục;
  • danh sách đầy đủ tất cả các trang có trong chỉ mục;
  • mã phản hồi;
  • thẻ meta;
  • tệp robots.txt và nhiều hơn thế nữa.

Ngoài ra, dịch vụ sẽ cung cấp thông tin về các lỗi trên trang web.

5) Kiểm tra lập chỉ mục trang web bằng Topvisor

Topvisor là dịch vụ giám sát và phân tích tốt nhất khuyến mãi công cụ tìm kiếm. Để kiểm tra việc lập chỉ mục, hãy làm theo các bước sau:

Sau khi đăng ký, chọn dự án bạn muốn lập chỉ mục.

Tại đây, bạn có thể tạo các nhóm từ khóa để thuận tiện và sử dụng dịch vụ để xác định tần suất truy vấn và xem ý nghĩa cơ bản, “cụm từ” và “chính xác” của chúng. Trong trường hợp này, bạn có thể nhập “khóa” theo cách thủ công, nhập chúng từ một tệp và cũng có thể thực hiện lựa chọn từ Yandex.Wordstat và Google AdWords.

Để kiểm tra vị trí, hãy chuyển đến tab “vị trí”, chọn công cụ tìm kiếm mong muốn, ví dụ Yandex, chọn nhóm mong muốn truy vấn chính và nhấp vào nút màu xanh lá cây ở góc trên bên trái “cập nhật”.

Sau một thời gian, dữ liệu sẽ được cập nhật. Trong báo cáo, bạn sẽ thấy vị trí trang web của mình đối với một số truy vấn nhất định và tần suất truy vấn về “khóa”. Ví dụ: khi có bất kỳ thay đổi nào xảy ra, trang web của bạn đã tăng lên một số vị trí cao hơn trong công cụ tìm kiếm, những thay đổi này sẽ được hiển thị ở đây. Tùy chọn cũng có sẵn khởi động tự động kiểm tra vào thời điểm được chỉ định hoặc tùy thuộc vào cập nhật Yandex

Tại sao có vấn đề phát sinh khi lập chỉ mục trang web: mô tả các vấn đề chính và cách giải quyết chúng

Hãy xem xét những lý do chính khiến một trang web có thể không được lập chỉ mục. Thường không mất nhiều thời gian để sửa lỗi nhưng sau đó kết quả tìm kiếm được cải thiện đáng kể.

Trang web trẻ

Nếu tài nguyên của bạn có rất ít ngày/tuần/tháng thì bạn chỉ cần đợi. Một chút. Đó là cách họ làm việc công cụ tìm kiếm rằng các trang và trang đó không được đưa vào chỉ mục ngay lập tức. Đôi khi bạn phải đợi vài tháng.

Sơ đồ trang web bị thiếu

Nếu không có sơ đồ trang web thông thường để đạt được kết quả tốt không có thật. Sơ đồ trang web cung cấp hỗ trợ trực tiếp cho các robot tìm kiếm, giúp tăng tốc đáng kể tốc độ quét trang web cũng như đưa các trang của nó vào chỉ mục. Cách dễ nhất để thêm liên kết vào sơ đồ trang web là thông qua bảng điều khiển trong dịch vụ quản trị trang web.

Sự hiện diện của lỗi

Hãy chú ý đến các thông báo khi truy cập dịch vụ quản trị trang web. Liên tục có những thông báo về sự hiện diện của những thiếu sót và sai sót nhất định. Hãy xem lại chúng và đừng quên sửa chúng.

Vấn đề với robot

Thẻ meta robot rất quan trọng để lập chỉ mục trang web thích hợp. Việc vô tình thay đổi cài đặt trên dịch vụ lưu trữ hoặc CMS của bạn sẽ dẫn đến mục nhập mã sau.

Điều đó có nghĩa là trang này không được lập chỉ mục.

Lỗi với tệp robots.txt

Viết đúng là sự đảm bảo cho việc lập chỉ mục tốt. Bạn thường có thể tìm thấy lời khuyên và đề xuất để đóng cho robot tìm kiếm thông qua tập tin này mọi thứ đều không cần thiết.

Tuy nhiên tính năng độc đáo file là chỉ một ký tự được đặt không chính xác có thể đóng hoàn toàn trang web để các công cụ tìm kiếm lập chỉ mục.

Ngay cả khi bạn cố gắng chỉ đóng một trang, có thể chỉ bằng một cú nhấp chuột, bạn đã đóng nhiều trang, v.v.

Hãy xem kỹ tập tin của bạn. Có ghi chép gì trong đó không?Tác nhân người dùng: * Không cho phép: /? Nếu nó hiện diện thì trang web sẽ bị đóng để lập chỉ mục.

Và một số lý do nữa khiến site không được lập chỉ mục

Một số vấn đề chính với việc lập chỉ mục bao gồm:

  • sự hiện diện của các trang trùng lặp;
  • sử dụng các vật liệu không độc đáo khi lấp đầy trang web;
  • tốc độ tải trang web thấp và các vấn đề khi truy cập nó.

Làm cách nào để tăng tốc độ lập chỉ mục trang web trong Yandex và Google?

Mục tiêu chính của chủ sở hữu trang web là đảm bảo rằng tất cả các trang mở cho robot tìm kiếm đều được lập chỉ mục. Thành thật mà nói, để đạt được kết quả như vậy là rất, rất khó.

Ngoài ra, cần phải liên tục theo dõi toàn bộ quá trình thêm trang vào chỉ mục. Mọi thay đổi – đột ngột – dù tích cực hay tiêu cực đều báo hiệu sự có mặt vấn đề cụ thể, gây trở ngại cho việc lập chỉ mục tài nguyên thông thường.

Để kiểm tra việc lập chỉ mục trang web, hãy sử dụng bất kỳ phương pháp nào (hoặc tốt hơn là từng phương pháp liên tiếp) được mô tả trong bài viết của chúng tôi:

  • thanh công cụ trong dịch vụ dành cho quản trị viên web;
  • trang web toán tử/tham số tìm kiếm: ;
  • plugin và tập lệnh;
  • dịch vụ trực tuyến chuyên biệt.

Phần thưởng cho những người thực sự muốn đạt được kết quả

giới thiệu bàn đặc biệt , điều này sẽ giúp ích cho bạn khi làm việc với việc lập chỉ mục trang web.

Làm việc với một bảng như vậy rất đơn giản. Dưới đây là chuỗi hành động chi tiết:

  • tạo một bản sao của bảng có các cột như trong ảnh chụp màn hình;
  • chọn một vùng miền;
  • Tải URL trang web vào cột A;
  • đợi cho đến khi tất cả các URL được tải - càng có nhiều URL thì càng mất nhiều thời gian để nhận được kết quả.

Cột B và C có thể được sao chép, điều này sẽ cho phép bạn theo dõi động thái lập chỉ mục trang.

Bạn vẫn chưa hoàn thành khóa học ban đầu của tôi “Cách tạo một trang web trong 4 ngày”? Hãy theo liên kết: và đăng ký ngay bây giờ hoặc bạn có thể sử dụng hướng dẫn của tôi, nơi tôi chỉ cho bạn từng bước! Hãy đến, nó sẽ rất thú vị!