Xóa các trang khỏi chỉ mục của công cụ tìm kiếm. Một trang không tồn tại trong Odnoklassniki mang lại những phần thưởng gì?
— Thời gian lưu trữ file tải lên dịch vụ lưu trữ file đã hết
— Thay đổi cấu trúc của blog/trang web
— Thay đổi địa chỉ trang trên trang web hoặc triển khai CNC
— Địa chỉ các trang của các trang web mà bạn liên kết đã thay đổi
Trong quá trình thay đổi như vậy, có thể xuất hiện hàng tá trang không tồn tại mà tài nguyên của bạn sẽ liên kết đến.
Thật dễ dàng để tìm thấy những trang không tồn tại như vậy. Chỉ cần biết một số dịch vụ và có thể sử dụng chúng là đủ.
Chúng tôi sẽ xem xét 4 phương pháp chính để kiểm tra một trang web để tìm các liên kết bị hỏng và bạn sẽ quyết định nên sử dụng phương pháp nào cho mình.
Dịch vụ trực tuyến để kiểm tra các liên kết bị hỏng:
Tôi đã tìm thấy nhiều dịch vụ khác nhau trên Internet, nhưng tôi chỉ có thể đề xuất 2 dịch vụ thực sự xác định chính xác các liên kết có vấn đề:
— createonline.com
— Anybrowser.com
Tôi sẽ không mô tả nguyên lý hoạt động của họ, mọi thứ đều rất đơn giản. Nhập URL bạn quan tâm vào biểu mẫu xác minh và nhấn nút xác minh. Sau một khoảng thời gian nhất định trôi qua, một trang có kết quả quét sẽ xuất hiện.
Sử dụng Yandex
TRONG bảng quản trị trang web Chúng tôi đi theo đường dẫn – – Các trang bị loại trừ và đi theo liên kết Trạng thái HTTP: Không tìm thấy tài nguyên (404). Ảnh chụp màn hình hiển thị đường dẫn.
Sau khi bạn nhấp vào liên kết, một cửa sổ sẽ mở ra, ở cuối cửa sổ sẽ có danh sách các liên kết đến các trang không tồn tại trên trang web của bạn. Trong cùng một cửa sổ sẽ có thông tin về lần truy cập cuối cùng của robot vào trang và các liên kết đến các trang có vấn đề được biểu thị bằng một hình vuông nhỏ có mũi tên xuống. Bây giờ bạn cần phải theo các liên kết này và khắc phục tình hình.
Qua Google
Theo cách tương tự, chúng tôi thực hiện ủy quyền trong bảng quản trị trang web và đi theo đường dẫn – Quét – Quét lỗi. Ở nửa dưới của trang, chúng ta thấy danh sách các liên kết đến các trang không tồn tại. Có một tùy chọn tuyệt vời trong Bảng quản trị trang web của Google cho phép bạn đánh dấu các liên kết đến các trang không tồn tại mà bạn đã sửa trước đó. Tôi đã cho cô ấy xem.
Chương trình Xenu Link Sleuth
Theo liên kết và Tải xuống chương trình. Sau đó chúng tôi cài đặt nó. Sau khi quá trình cài đặt hoàn tất, hãy khởi chạy chương trình và nhập địa chỉ của tài nguyên đang được kiểm tra. Nhấp vào nút OK và chương trình bắt đầu thu thập thông tin.
Bận - xếp hàng để xem xét.
Sau khi thu thập thông tin xong, chương trình sẽ phát ra tín hiệu âm thanh báo hiệu công việc đã hoàn thành và bạn có thể xem báo cáo về công việc đã thực hiện. Một chương trình rất hay, tôi luôn sử dụng nó.
Và phương pháp cuối cùng chúng ta sẽ xem xét là kiểm tra trang web để tìm các liên kết bị hỏng bằng cách sử dụng plugin Trình kiểm tra liên kết bị hỏng.
Vì điều này tải xuống plugin, kích hoạt nó và đi đến địa chỉ – Tùy chọn – Kiểm tra liên kết và chuyển đến tab Nâng cao trong đó chúng tôi nhấp vào Kiểm tra lại tất cả các trang.
Nếu bạn có một trang web lớn với số lượng trang lớn, thì việc tìm kiếm quảng cáo cho một dự án như vậy thường liên quan đến việc xác định và loại bỏ nhiều vấn đề kỹ thuật.
Một trong những lỗi phổ biến là sự hiện diện của các liên kết bị hỏng đến các trang có mã phản hồi “404 không tìm thấy”. Hơn nữa, các trang có lỗi 404 có thể được liên kết đến từ các trang khác và trọng lượng của chúng sẽ bị mất. Trong bài viết này, bạn sẽ học cách lấy lại trọng lượng liên kết bên ngoài đã mất.
“Tôi có thể nói chắc chắn với bạn rằng trên một trang web ít nhiều lớn thì luôn có thứ gì đó bị hỏng”
— Mikhail Slivinsky (Wikimart.ru), Hội nghị SEO 2014.
Bản chất của phương pháp
Các liên kết từ các trang web khác sẽ không có giá trị nếu chúng trỏ đến các trang bị hỏng trên trang web của bạn. Nhiệm vụ là thiết lập chuyển hướng (chuyển hướng 301) từ các trang không tồn tại có liên kết đến các trang có liên quan khác trên trang web. Bằng cách này, sức nặng của các liên kết bên ngoài sẽ bắt đầu được chuyển đến trang web.
Phương pháp này phù hợp hơn với các dự án cũ có số lượng trang lớn. Thuật toán vận hành như sau:
1. Tìm kiếm và tổng hợp danh sách các trang có lỗi 404.
2. Kiểm tra các URL nhận được để biết sự hiện diện của các liên kết bên ngoài đến.
3. Cài đặt chuyển hướng 301 từ các trang bị hỏng đến các trang làm việc phù hợp.
Cách tìm trang lỗi 404 và các trang bị hỏng khác
Ở giai đoạn này, bạn cần xác định các trang không tồn tại trên trang web, các trang có lỗi và biên soạn danh sách URL càng chi tiết càng tốt. Có một số công cụ cho việc này, sẽ được thảo luận chi tiết dưới đây.
Bảng điều khiển Yandex.Webmaster và Google Webmaster Tools
Nếu trang web của bạn chưa được thêm vào bảng quản trị trang web Yandex và Google, hãy nhớ thêm nó ngay bây giờ. Bằng cách này, bạn có thể nhanh chóng xác định các liên kết bị hỏng và các lỗi lập chỉ mục khác.
Để có danh sách các trang có lỗi 404 trong bảng điều khiển Yandex.Webmaster, hãy truy cập http://webmaster.yandex.ru/sites/ trong phần “Lập chỉ mục trang web” → “Các trang bị loại trừ”.
(Nhấn vào hình ảnh để phóng to) 
Để có danh sách các trang không tồn tại từ bảng Công cụ quản trị trang web của Google ( https://www.google.com/webmasters/tools/) theo liên kết “Lỗi quét”.
(Nhấn vào hình ảnh để phóng to) 
Trang này sẽ chứa danh sách các URL có lỗi. Bạn có thể xuất danh sách bằng cách nhấp vào nút “Tải xuống” và chọn định dạng tải lên thuận tiện.
(Nhấn vào hình ảnh để phóng to) 
Chương trình thu thập thông tin
Tại đây bạn có thể đánh dấu các chương trình nổi tiếng để tìm kiếm các liên kết bị hỏng và trùng lặp:
Tất cả đều cho phép bạn tìm trên trang web và tải xuống danh sách các trang có lỗi 404. Với những mục đích này, tôi sử dụng Screaming Frog Seo Spider vì nó có phiên bản dành cho Mac, không giống như những phiên bản khác. Lấy Screaming Frog làm ví dụ, danh sách các trang 404 được dỡ bỏ như thế này:
(Nhấn vào hình ảnh để phóng to) 
Nhật ký lỗi máy chủ
Nếu có thể, bạn nên xem nhật ký lỗi máy chủ. Đây thường là tệp "error_log". Tùy thuộc vào phần mềm được sử dụng trên máy chủ, nhật ký lỗi có thể khác nhau. Nhưng bản chất vẫn giống nhau - hãy xem nhật ký lỗi máy chủ và tải xuống từ đó danh sách các URL có lỗi 404.
Danh sách liên kết thu được phải được kết hợp thành một danh sách và loại bỏ các liên kết trùng lặp. Có nhiều cách để thực hiện việc này, nhưng tôi sử dụng trình soạn thảo văn bản Sublime Text 2 (trên Windows, tôi khuyên dùng Notepad++ với plugin TextFX).
(Nhấn vào hình ảnh để phóng to) 
Kiểm tra danh sách các trang bị hỏng để tìm các liên kết đến
Để kiểm tra danh sách URL cuối cùng xem có sự hiện diện của các liên kết đến từ các trang web khác hay không, hãy sử dụng dịch vụ Ahrefs.com, cụ thể là phần “Phân tích hàng loạt” - https://ahrefs.com/labs/batch-analysis/.
(Nhấn vào hình ảnh để phóng to) 
Thật không may, chức năng này có giới hạn 200 url cho mỗi 1 yêu cầu đối với gói trả phí và 2 url cho mỗi 1 yêu cầu đối với gói miễn phí. Do đó, bạn cần nhập danh sách của mình thành nhiều phần gồm 200 địa chỉ. Sau mỗi lần kiểm tra, bạn cần xuất ra file.
(Nhấn vào hình ảnh để phóng to) 
Kết quả tải xuống của 200 URL cần được kết hợp thành 1 bảng. Để thực hiện, bạn cần mở 1 file và sao chép nội dung của các file khác vào cuối. Các cột bổ sung có thể được loại bỏ. Chúng ta chỉ quan tâm đến cột “Total”; nó có nghĩa là tổng số liên kết bên ngoài đến trang.
(Nhấn vào hình ảnh để phóng to) 
Danh sách kết quả cần được sắp xếp và loại bỏ các hàng trong đó “Tổng” bằng 0. Kết quả là bạn sẽ có một danh sách các trang bị hỏng có liên kết đến từ các trang khác.
Lựa chọn các trang để chuyển hướng
Danh sách kết quả cần phải được tải lại lên Phân tích hàng loạt trên Ahrefs để bạn có thể xem trang web nào và với điểm neo nào có liên kết đến từng trang trong danh sách của chúng tôi. Để thực hiện việc này, hãy sử dụng biểu tượng bên cạnh địa chỉ URL.
(Nhấn vào hình ảnh để phóng to) 
Tiếp theo, bạn cần xem trang nào và trang nào được liên kết với các trang bên ngoài. Để thuận tiện, hãy tạo một bảng có hai cột, bảng này sẽ chứa danh sách các địa chỉ bị hỏng và danh sách các địa chỉ “trực tiếp” mà chuyển hướng sẽ đi tới. Nếu url của một trang trên trang web của bạn vừa thay đổi, hãy nhập url trang mới. Trong các trường hợp khác, hãy chọn trang phù hợp nhất theo ý kiến của bạn, dựa trên văn bản của trang và trang liên kết của nhà tài trợ.
(Nhấn vào hình ảnh để phóng to) 
Thiết lập chuyển hướng 301 đến các trang mới
Cuối cùng, tất cả những gì còn lại là thêm các lệnh cần thiết cho tệp .htaccess. Để chuyển hướng từ trang này sang trang khác, hãy sử dụng lệnh sau:
Đối với mỗi địa chỉ của bảng cuối cùng, bạn cần viết lệnh sau và thêm nó vào tệp “.htaccess”. Ở giai đoạn này, tôi khuyên bạn nên sử dụng dịch vụ của lập trình viên để đảm bảo mọi thứ hoạt động chính xác.
Kết quả là chúng ta sẽ nhận được link juice miễn phí, chỉ cần không làm mất nó.
Xin chào các bạn! Trong bài viết hôm nay, chúng tôi sẽ nói chuyện với bạn về thành tích: chúng là gì, bạn có thể nhận được phần thưởng gì và bạn cần làm gì để đạt được điều này cũng như cách sử dụng số điểm tích lũy được.
Các nhà phát triển mạng xã hội Odnoklassniki đã quyết định rằng nếu một người dùng đang hoạt động trên trang web thì anh ta cần được khuyến khích theo cách nào đó cho việc này. Đó là lý do tại sao Odnoklassniki có toàn bộ phần “Thành tích”, nơi bạn có thể xem các giải thưởng của mình và số điểm tích lũy được cho chúng. Nhưng hãy nói về mọi thứ theo thứ tự.
Thành tích là một phần đặc biệt trên trang web Odnoklassniki nơi người dùng có thể xem tất cả các giải thưởng đã nhận được, được trao cho việc sử dụng tích cực trang web và đáp ứng các điều kiện nhất định.
Cách xem thành tích
Nếu bạn đang tự hỏi danh sách này nằm ở đâu, thì trên trang của bạn, hãy nhấp vào mục menu “Thêm”. Sau đó chọn mục thích hợp từ danh sách thả xuống.
Trang được yêu cầu sẽ mở ra. Trên tab “Thành tích của tôi”, các biểu tượng sẽ được hiển thị - theo một cách nào đó, đây là những phần thưởng. Nếu biểu tượng có màu xám nghĩa là bạn chưa đáp ứng đủ điều kiện để nhận; nếu biểu tượng trông giống hình ảnh màu thì phần thưởng là của bạn.
Làm thế nào để có được thành tích
Để làm được điều này, bạn cần hoàn thành một nhiệm vụ tương ứng với nó. Để xem nhiệm vụ, hãy di chuột qua biểu tượng in nghiêng mong muốn. Một cửa sổ bật lên sẽ xuất hiện mô tả những việc cần làm để nhận được phần thưởng đã chọn.
Chúng được chia thành các nhóm: Nhiệm vụ, Ảnh, Video, Nhóm, Âm nhạc và Trò chơi. Các nhiệm vụ rất đa dạng: sử dụng Odnoklassniki từ điện thoại của bạn, tải một số ảnh nhất định lên trang web, tham gia các cuộc thảo luận và cuộc thi ảnh, tạo nhóm của riêng bạn, v.v. Theo tôi, nhiệm vụ khó hiểu nhất là đây. Bằng cách theo liên kết, bạn có thể đọc một bài viết chi tiết về điều này.
Đối với mỗi phần thưởng nhận được, một số điểm nhất định sẽ được trao, chính xác là bao nhiêu điểm được hiển thị ở cuối cửa sổ bật lên trong trường “Tiền thưởng”.
Cách tiêu điểm thành tích
Bây giờ hãy nói về lý do tại sao cần tích lũy điểm. Bạn có thể xem mình có bao nhiêu điểm trên trang ở góc trên bên phải trong trường “Điểm tích lũy”.
Cách xem thành tích trong ứng dụng di động Odnoklassniki từ điện thoại của bạn
Nếu bạn sử dụng ứng dụng di động Odnoklassniki, bạn có thể xem chúng như sau. Mở menu bên và nhấp vào tên hồ sơ của bạn.
Có các mục menu bên dưới hình đại diện; nhấp vào mũi tên để mở toàn bộ danh sách và chọn “Thành tích” từ đó.
Có hai tab ở đầu trang. Tab của tôi hiển thị tất cả các biểu tượng. Nếu biểu tượng có màu xám nghĩa là bạn chưa đáp ứng được điều kiện; nếu nó có màu, điều đó có nghĩa là bạn được thưởng điểm cho thành tích này. Để xem những gì cần phải làm, hãy nhấp vào biểu tượng.
Sau khi bạn nhấp vào biểu tượng, một cửa sổ nhỏ sẽ xuất hiện chứa mô tả. Ở đó bạn có thể thấy có bao nhiêu điểm sẽ được thưởng khi hoàn thành điều kiện.
Tôi nghĩ bạn hiểu Thành tích trong Odnoklassniki nghĩa là gì, vị trí của chúng và cách xem điều kiện phải đáp ứng để nhận được phần thưởng.
Gần đây có người hỏi tôi về một tính năng của Google. Chúng ta đang nói về việc lập chỉ mục trang web. Google đã thêm các trang không tồn tại có URL kỳ lạ vào chỉ mục của mình. Hơn nữa, nhiều trong số chúng đã bị đóng trong robots.txt. Trả lời câu hỏi, để giúp ích cho người đọc trang web của tôi, tôi không để ý mình đã viết một bài báo ngắn như thế nào.
Câu hỏi hóa ra rất quen thuộc với tôi. Cách đây vài năm, bản thân tôi cũng đang loay hoay tìm kiếm câu trả lời cho câu hỏi này, khi tôi được giao nhiệm vụ căn chỉnh tỷ lệ các trang được lập chỉ mục cho một số trang trong chỉ mục của công cụ tìm kiếm trước khi kiếm tiền từ chúng. Dù tôi đã làm gì, hãy xóa nó khỏi chỉ mục một cách vật lý, đóng nó trong robots.txt, chỉnh sửa mẫu trang web và tệp nguồn công cụ. Hoàn toàn không có gì giúp được, và những đồng nghiệp giàu kinh nghiệm hơn của tôi cũng không giúp được tôi vào thời điểm đó.
Vấn đề này hóa ra xảy ra ở khắp mọi nơi nhưng lại không được nhiều người để ý tới. Google không đóng các bản sao đã lưu của các trang trong robots.txt mà thêm tất cả các URL tìm thấy vào cơ sở dữ liệu của mình. Nếu bạn tìm kiếm trong số tất cả các trang trên trang web, Google sẽ trả về một loạt trang không tồn tại. Mã 404 và việc đóng trong robots.txt không giúp ích được gì. Đó là lý do tại sao, nếu bạn thu thập dữ liệu hàng chục trang web khác nhau, số lượng trang được lập chỉ mục trên Google sẽ nhiều hơn, đôi khi là vài trang và đối với các trang web lớn, mức chênh lệch có thể lên tới vài trăm trang.
Google bổ sung hoàn toàn tất cả các URL mà nó tìm thấy liên kết vào chỉ mục của nó. Trong hầu hết các trường hợp, đây là các liên kết nội bộ (do lỗi triển khai CMS trên máy chủ, có thể có các liên kết bị hỏng trong mã, điều này rất thường xảy ra khi CNC được cấu hình không chính xác), chúng cũng có thể là các liên kết bên ngoài (ai đó đã viết một liên kết). vào trang web của bạn trên một số diễn đàn và mắc lỗi chính tả).
Ngoài ra, một số trang rất thường xuyên bị xóa trên các trang web - URL đã bị thay đổi hoặc tài liệu đã bị xóa về mặt vật lý; trang đó sẽ vẫn còn trong chỉ mục, chỉ được lưu dưới dạng một liên kết trống.
Trong mọi trường hợp, những “trang giả” này sẽ không xuất hiện trong kết quả cho bất kỳ truy vấn nào, trừ khi chúng tôi xem xét tổng số trang được lập chỉ mục. Sự khác biệt giữa số lượng trang thực tế trên trang web và trang được lập chỉ mục chỉ đóng vai trò khi kiếm tiền từ trang web. Nếu có khoảng cách lớn, không gian bán liên kết sẽ bán hết nhanh hơn.
Phương pháp kiểm soát và phòng ngừa
Có nhiều cách để tránh những tình huống như vậy, hãy xem xét các giải pháp:
- Trong bảng điều khiển Quản trị viên web của Google Có thể loại bỏ vật lý các trang không mong muốn khỏi chỉ mục. Nếu một trang bị đóng trong robots.txt hoặc hiển thị mã lỗi 404 thì khi nhận được yêu cầu xóa, trang đó sẽ rời khỏi chỉ mục trong vòng vài ngày. Nếu có nhiều “trang giả” thì phương pháp này không phù hợp, vì đối với mỗi trang bạn cần nộp một đơn đăng ký riêng, tổng cộng sẽ mất rất nhiều thời gian.
- Phương pháp thứ hai phức tạp hơn, nhưng nó sẽ loại bỏ vĩnh viễn trang web của vấn đề được mô tả. Bạn cần ẩn trang khỏi lập chỉ mục bằng cách sử dụng cấu trúc robot, được viết trực tiếp trong phần đầu trên trang. Đây là những gì nó trông giống như:
Bạn cần định cấu hình công cụ trang web theo cách mà khi xảy ra lỗi 404, một sơ khai sẽ được tải - trang lỗi của chính nó (trang này có thể được định cấu hình bằng một dòng theo nghĩa đen trong .htaccess trên dịch vụ lưu trữ Unix). Trong phần đầu của trang sơ khai này, chúng tôi viết đoạn mã trên. Bây giờ, khi Google phát hiện các liên kết bị hỏng, nó sẽ không thêm chúng vào chỉ mục.
Các nhà phát triển Google giải thích cách tiếp cận ban đầu này để lập chỉ mục bởi thực tế là các trang tạo ra mã lỗi 404 chỉ không thể truy cập được trong một thời gian ngắn do cài đặt máy chủ không chính xác hoặc một số loại lỗi cơ sở dữ liệu. Đồng thời, những trang như vậy thường chứa nội dung hữu ích. Google thêm các trang như vậy vào chỉ mục của mình với hy vọng rằng cuối cùng chúng sẽ đi vào hoạt động. Đây là lý do tại sao Google bỏ qua các hướng dẫn trong robots.txt - không có lời giải thích khách quan nào cho việc này nhưng trên thực tế, điều này thường xảy ra chính xác.
