Eliminarea paginilor din indexul motorului de căutare. Ce bonusuri oferă o pagină inexistentă în Odnoklassniki?

— Perioada de stocare a fișierului încărcat în serviciul de găzduire a fișierelor a expirat

— Modificarea structurii blogului/site-ului

— Schimbarea adreselor paginilor de pe site sau implementarea CNC

— Adresele paginilor site-urilor către care trimiteți s-au schimbat

În procesul unor astfel de modificări, pot apărea zeci de pagini inexistente către care va trimite resursa dvs.

Este ușor să găsești astfel de pagini inexistente. Este suficient să cunoști mai multe servicii și să le poți folosi.

Ne vom uita la cele 4 metode principale de verificare a unui site pentru link-uri rupte, iar tu vei decide pe care să o folosești pentru tine.

Servicii on-line pentru verificarea link-urilor întrerupte:

Am găsit multe servicii diferite pe Internet, dar pot să recomand doar 2 care identifică cu adevărat legăturile problematice:

creatingonline.com

anybrowser.com

Nu voi descrie principiul funcționării lor, totul este foarte simplu. Introduceți adresa URL care vă interesează în formularul de verificare și apăsați butonul de verificare. După ce a trecut o anumită perioadă de timp, va apărea o pagină cu rezultatele scanării.

Folosind Yandex

ÎN panouri pentru webmasteri Urmăm calea – – Pagini excluse și urmăm linkul Status HTTP: Resurse not found (404). Captura de ecran arată calea.

După ce faceți clic pe link, se va deschide o fereastră, în partea de jos a căreia va apărea o listă de link-uri către pagini inexistente de pe site-ul dvs. În aceeași fereastră vor apărea informații despre ultima vizită a robotului pe pagină și link-uri către pagini problematice indicate de un pătrat mic cu o săgeată în jos. Acum trebuie să urmați aceste link-uri și să corectați situația.

Prin Google

În același mod trecem prin autorizare în panouri pentru webmasteriși urmați calea – Scanare – Erori de scanare. În jumătatea de jos a paginii vedem o listă de link-uri către pagini inexistente. Există o opțiune minunată în Google Webmaster Panel care vă permite să marcați link-uri către pagini inexistente pe care le-ați corectat anterior. i-am arătat.

Programul Xenu Link Sleuth

Urmați linkul și Descarca program. Apoi îl instalăm. Odată ce instalarea este finalizată, lansați programul și introduceți adresa resursei care este verificată. Faceți clic pe butonul OK și programul începe să colecteze informații.

Ocupat – în coadă pentru examinare.

După ce ați terminat de colectat informații, programul va emite un semnal sonor care indică finalizarea lucrării și puteți vizualiza un raport despre munca efectuată. Un program foarte bun, il folosesc tot timpul.

Și ultima metodă la care ne vom uita este verificarea site-ului pentru link-uri rupte folosind pluginul Broken Link Checker.

Pentru aceasta descărcați pluginul, activează-l și mergi la adresa – Opțiuni – Verifică link-uri și mergi la fila Avansat în care facem clic pe Reverificare toate paginile.

Dacă aveți un site web mare, cu un număr mare de pagini, atunci promovarea căutării unui astfel de proiect se reduce adesea la identificarea și eliminarea multor probleme tehnice.

Una dintre erorile comune este prezența link-urilor întrerupte către pagini cu un cod de răspuns „404 nu a fost găsit”. Mai mult, paginile cu erori 404 pot fi legate de pe alte site-uri, iar greutatea lor se va pierde. În acest articol, veți învăța cum să recâștigați greutatea legăturii externe pierdute.

„Pot să vă spun cu siguranță că pe un site web mai mult sau mai puțin mare ceva se rupe tot timpul”
— Mikhail Slivinsky (Wikimart.ru), Conferința SEO 2014.

Esența metodei

Link-urile de pe alte site-uri nu au greutate dacă indică pagini rupte de pe site-ul tău. Sarcina este de a configura o redirecționare (redirecționare 301) de la pagini inexistente care au link-uri de intrare către alte pagini relevante de pe site. În acest fel, ponderea linkurilor externe primite va începe să fie transferată pe site.

Această metodă este mai potrivită pentru proiecte mai vechi cu un număr mare de pagini. Algoritmul de operare este următorul:

1. Căutați și compilați o listă de pagini cu erori 404.
2. Verificarea adreselor URL primite pentru prezența legăturilor externe de intrare.
3. Instalarea redirecționărilor 301 de la paginile sparte către paginile de lucru adecvate.

Cum să găsiți pagini de eroare 404 și alte pagini sparte

În această etapă, trebuie să identifici paginile inexistente pe site, paginile cu erori și să alcătuiești o listă cât mai detaliată de URL-uri. Există mai multe instrumente pentru aceasta, care vor fi discutate în detaliu mai jos.

Panourile Yandex.Webmaster și Google Webmaster Tools

Dacă site-ul dvs. nu a fost încă adăugat la panourile pentru webmasteri Yandex și Google, asigurați-vă că îl adăugați acum. În acest fel, puteți identifica rapid link-urile rupte și alte erori de indexare.

Pentru a obține o listă de pagini cu erori 404 în panoul Yandex.Webmaster, accesați http://webmaster.yandex.ru/sites/ în secțiunea „Indexare site” → „Pagini excluse”.


(click pe imagine pentru marire)

Pentru a obține o listă de pagini inexistente din panoul Instrumente Google pentru webmasteri ( https://www.google.com/webmasters/tools/) urmați linkul „Erori de scanare”.

(click pe imagine pentru marire)

Pagina va avea o listă de adrese URL cu erori. Puteți exporta lista făcând clic pe butonul „Descărcare” și selectând un format de încărcare convenabil.

(click pe imagine pentru marire)

Programe crawler

Aici puteți evidenția programe binecunoscute pentru căutarea link-urilor întrerupte și a duplicatelor:

Toate vă permit să găsiți pe site și să descărcați o listă de pagini cu erori 404. În aceste scopuri, folosesc Screaming Frog Seo Spider, deoarece are o versiune pentru Mac, spre deosebire de celelalte. Folosind Screaming Frog ca exemplu, lista de 404 pagini este descărcată astfel:

(click pe imagine pentru marire)

Jurnal de erori de server

Dacă este posibil, merită să vă uitați la jurnalul de erori de server. Acesta este de obicei fișierul „error_log”. În funcție de software-ul utilizat pe server, jurnalul de erori poate diferi. Dar esența rămâne aceeași - uitați-vă la jurnalul de erori de server și descărcați din el o listă de adrese URL cu erori 404.

Listele rezultate de link-uri trebuie să fie combinate într-o singură listă și duplicatele eliminate. Există multe modalități de a face acest lucru, dar folosesc editorul de text Sublime Text 2 (pe Windows recomand Notepad++ cu pluginul TextFX).

(click pe imagine pentru marire)

Verificarea listei de pagini sparte pentru link-uri de intrare

Pentru a verifica lista finală de URL-uri pentru prezența link-urilor de intrare de pe alte site-uri, utilizați serviciul Ahrefs.com, și anume secțiunea „Analiza loturi” - https://ahrefs.com/labs/batch-analysis/.

(click pe imagine pentru marire)

Din păcate, această funcție are o limită de 200 de adrese URL pentru 1 cerere în planurile plătite și 2 URL-uri pentru 1 solicitare în planurile gratuite. Prin urmare, trebuie să introduceți lista în mai multe porțiuni de 200 de adrese. După fiecare verificare, trebuie să exportați într-un fișier.

(click pe imagine pentru marire)

Descărcările rezultate de 200 de adrese URL trebuie combinate într-un singur tabel. Pentru a face acest lucru, trebuie să deschideți 1 fișier și să copiați conținutul altor fișiere până la sfârșit. Coloanele suplimentare pot fi eliminate. Ne interesează doar coloana „Total”; înseamnă numărul total de link-uri externe către pagină.

(click pe imagine pentru marire)

Lista rezultată trebuie sortată și rândurile în care „Total” este egal cu zero eliminate. Ca rezultat, veți ajunge cu o listă de pagini sparte care au link-uri de pe alte site-uri.

Selectarea paginilor pentru redirecționare

Lista rezultată trebuie încărcată din nou în Analiza loturilor pe Ahrefs, astfel încât să puteți vedea de pe ce site-uri și cu ce ancore există link-uri către fiecare pagină a listei noastre. Pentru a face acest lucru, utilizați pictograma de lângă adresa URL.

(click pe imagine pentru marire)

În continuare, trebuie să vă uitați la ce pagini și cu ce ancore site-uri externe au legat. Pentru comoditate, creați un tabel cu două coloane, care va conține o listă de adrese sparte și o listă de adrese „în direct” către care va merge redirecționarea. Dacă adresa URL a unei pagini de pe site-ul dvs. sa schimbat pur și simplu, atunci introduceți noua adresă URL a paginii. În alte cazuri, selectați pagina cea mai relevantă în opinia dvs., pe baza textului paginii donatorului și al ancorei.

(click pe imagine pentru marire)

Configurarea redirecționărilor 301 către pagini noi

La final, tot ce rămâne este să adăugați comenzile necesare pentru fișierul .htaccess. Pentru a redirecționa de la o pagină la alta, utilizați următoarea comandă:

Pentru fiecare adresă a tabelului final, trebuie să scrieți următoarea comandă și să o adăugați în fișierul „.htaccess”. În această etapă, recomand să folosiți serviciile unui programator pentru a vă asigura că totul funcționează corect.

Drept urmare, vom primi link juice gratuit, pur și simplu prin faptul că nu îl pierdem.

Bună prieteni! În articolul de astăzi vă vom vorbi despre realizări: care sunt acestea, ce recompense puteți obține și ce trebuie să faceți pentru aceasta și cum să cheltuiți punctele acumulate.

Dezvoltatorii rețelei sociale Odnoklassniki au decis că, dacă un utilizator este activ pe site, atunci trebuie să fie recompensat într-un fel pentru asta. De aceea, Odnoklassniki are o întreagă secțiune „Realizări”, unde puteți vedea premiile dvs. și numărul de puncte acumulate pentru ele. Dar să vorbim despre totul în ordine.

Realizările sunt o secțiune specială de pe site-ul Odnoklassniki unde utilizatorul poate vizualiza toate premiile primite, care sunt acordate pentru utilizarea activă a site-ului și îndeplinirea anumitor condiții.

Cum să vedeți realizările

Dacă vă întrebați unde se află această listă, atunci pe pagina dvs., faceți clic pe elementul de meniu „Mai multe”. Apoi selectați elementul corespunzător din lista verticală.

Se va deschide pagina necesară. În fila „Realizările mele”, vor fi afișate pictograme - acestea sunt, într-un fel, recompense. Dacă pictograma este gri, înseamnă că nu ai îndeplinit încă condițiile pentru a o primi; dacă pictograma arată ca o imagine color, atunci recompensa este a ta.

Cum să obțineți realizări

Pentru a face acest lucru, trebuie să finalizați o sarcină care îi corespunde. Pentru a vizualiza sarcina, treceți mouse-ul peste pictograma cursiv dorită. Va apărea o fereastră pop-up care descrie ce trebuie făcut pentru a primi recompensa selectată.

Acestea sunt împărțite în grupuri: Misiuni, Fotografii, Videoclipuri, Grupuri, Muzică și Jocuri. Sarcinile sunt foarte variate: utilizați Odnoklassniki de pe telefon, încărcați un anumit număr de fotografii pe site, participați la discuții și concursuri foto, creați-vă propriul grup etc. Cea mai de neînțeles sarcină, după părerea mea, este aceasta. Urmând link-ul, puteți citi un articol detaliat despre asta.

Pentru fiecare recompensă primită, se acordă un anumit număr de puncte, exact câte sunt afișate în partea de jos a ferestrei pop-up în câmpul „Bonus”.

Cum să cheltuiți punctele de realizare

Acum să vorbim despre motivul pentru care sunt necesare puncte acumulate. Puteți vedea câte puncte aveți pe pagina din colțul din dreapta sus în câmpul „Puncte acumulate”.

Cum să vizualizați realizările în aplicația mobilă Odnoklassniki de pe telefon

Dacă utilizați aplicația mobilă Odnoklassniki, le puteți vizualiza după cum urmează. Deschideți meniul lateral și faceți clic pe numele profilului dvs.

Există elemente de meniu sub avatar; faceți clic pe săgeată pentru a deschide întreaga listă și selectați „Realizări” din ea.

Există două file în partea de sus a paginii. Fila Meu afișează toate pictogramele. Dacă pictograma este gri, înseamnă că încă nu ai îndeplinit condiția; dacă este colorat, înseamnă că vi se acordă puncte pentru această realizare. Pentru a vedea ce trebuie făcut, faceți clic pe pictogramă.

După ce faceți clic pe pictogramă, va apărea o mică fereastră care conține o descriere. Acolo puteți vedea câte puncte vor fi acordate pentru îndeplinirea condiției.

Cred că înțelegeți ce înseamnă Realizările din Odnoklassniki, unde sunt situate și cum să vedeți condiția care trebuie îndeplinită pentru a primi o recompensă.

Recent, cineva m-a întrebat despre o funcție a Google. Vorbeam despre indexarea site-urilor. Google a adăugat pagini inexistente cu adrese URL bizare la indexul său. Mai mult, multe dintre ele au fost închise în robots.txt. Răspunzând la întrebare, pentru a ajuta cititorul site-ului meu, nu am observat cum am scris un articol scurt.

Întrebarea s-a dovedit a fi foarte familiară pentru mine. Acum câțiva ani, eu însumi căutam mai mult răspunsul la această întrebare, când aveam sarcina de a alinia raportul paginilor indexate pentru mai multe site-uri în indexul motorului de căutare înainte de a le monetiza. Orice am făcut, l-am eliminat fizic din index, l-am închis în robots.txt, am editat șabloanele de site și fișierele sursă ale motorului. Absolut nimic nu m-a ajutat, iar colegii mei mai experimentați nu m-au ajutat la momentul respectiv.

Această problemă s-a dovedit a fi peste tot, dar nu mulți oameni îi acordă atenție. Google nu face copii salvate ale paginilor închise în robots.txt, dar adaugă toate adresele URL găsite în baza sa de date. Dacă cauți printre toate paginile de pe site, Google va returna o grămadă de pagini inexistente. Codul 404 și închiderea în robots.txt nu ajută. De aceea, dacă accesați cu crawlere o duzină de site-uri diferite, numărul de pagini indexate în Google va fi mai mare, uneori cu câteva pagini, iar pentru site-urile mari diferența poate ajunge la câteva sute de pagini.

Google adaugă absolut toate adresele URL la care găsește linkuri către indexul său. În cele mai multe cazuri, acestea sunt legături interne (din cauza erorilor de implementare CMS pe server, pot exista legături rupte în cod, acest lucru se întâmplă foarte des când CNC-ul este configurat incorect), pot fi și legături externe (cineva a scris un link pe site-ul dvs. pe un forum și a făcut o greșeală de ortografie).

În plus, unele pagini sunt foarte des șterse pe site-uri - URL-ul a fost schimbat sau materialul a fost șters fizic; pagina va rămâne în continuare în index, salvată doar ca link gol.

În orice caz, aceste „pagini fictive” nu vor apărea în rezultate pentru nicio interogare, decât dacă ne uităm la numărul total de pagini indexate. Diferența dintre numărul real de pagini de pe site și cel indexat joacă un rol doar la monetizarea site-ului. Dacă există un decalaj mare, spațiul pentru vânzarea de link-uri se va epuiza mai puțin rapid.

Metode de control și prevenire

Există modalități de a evita astfel de situații, să luăm în considerare soluții:

  1. În panou Google Webmasters Este posibilă eliminarea fizică a paginilor nedorite din index. Dacă o pagină este închisă în robots.txt sau afișează un cod de eroare 404, la primirea unei cereri de ștergere, pagina părăsește indexul în câteva zile. Dacă există o mulțime de „pagini false”, această metodă nu este potrivită, deoarece pentru fiecare pagină trebuie să depuneți o cerere separată, ceea ce în total va dura mult timp.
  2. A doua metodă este mai complicată, dar va elimina definitiv site-ul de problema descrisă. Trebuie să ascundeți pagina de la indexare folosind construcția roboților, care este scrisă în secțiunea de cap direct pe pagină. Iată cum arată:


    Trebuie să configurați motorul site-ului în așa fel încât, atunci când apare o eroare 404, să fie încărcat un stub - propria pagină de eroare (aceasta poate fi configurată literalmente cu o singură linie în .htaccess pe Unix hosting). În secțiunea de cap a acestei pagini stub scriem codul de mai sus. Acum, când Google detectează linkuri rupte, nu le va adăuga la index.

Dezvoltatorii Google explică această abordare originală a indexării prin faptul că de multe ori paginile care produc un cod de eroare 404 nu sunt accesibile doar pentru o perioadă scurtă de timp din cauza setărilor incorecte ale serverului sau a unui fel de eșec al bazei de date. În același timp, de foarte multe ori astfel de pagini conțin conținut util. Google adaugă astfel de pagini la index în speranța că în cele din urmă vor funcționa. Dar acesta este motivul pentru care Google ignoră instrucțiunile robots.txt - nu există explicații obiective pentru acest lucru, dar în practică, acest lucru se întâmplă adesea.