Indexarea unui site în motoarele de căutare. Cum indexează site-ul în "Yandex" și "Google"

Ce este indexarea site-ului? Cum se întâmplă? Puteți găsi răspunsuri la aceste și la alte întrebări din articol. Indexarea pe web (indexarea în motoarele de căutare)

Datele privind resursele web constau adesea din cuvinte cheie, articole, link-uri, documente. Indexarea poate, de asemenea, audio, imagini și așa mai departe. Este cunoscut faptul că algoritmul de detecție este dependentă de căutător de cuvinte cheie.

Tipurile de informații indexate (fișiere flash, jаvascript) există unele limitări.

Gestionați afilierea

Indexarea unui site este un proces complex. Pentru a le gestiona (de exemplu, pentru a interzice includerea unei anumite pagini), trebuie să utilizați un fișier robots.txt și instrucțiuni cum ar fi Permis, Dezactivare, Întârziere cu accesare cu crawlere, Agent utilizator și altele.

De asemenea, etichetele sunt folosite pentru indexare și recuzită , ascunzând conținutul resursei de la roboții Google și "Yandex" (Yahoo aplică eticheta).

În motorul de căutare Goglle, site-urile noi sunt indexate de la câteva zile la o săptămână, iar în Yandex - de la o săptămână la patru.

Doriți ca site-ul dvs. să apară în interogările privind rezultatele motoarelor de căutare? Apoi, ar trebui să fie procesate de către Rambler, Yandex, Google, Yahoo și așa mai departe. Ar trebui să spuneți motoarelor de căutare (păianjeni, sisteme) despre existența site-ului dvs. și apoi îl vor scana complet sau parțial.

Multe site-uri nu sunt indexate de ani de zile. Informațiile care sunt pe ele nu sunt vizibile nimănui, cu excepția proprietarilor lor.

Modalități de procesare

Indexarea unui site poate fi efectuată în mai multe moduri:

1. Prima opțiune este adăugarea manuală. Trebuie să introduceți detaliile site-ul dvs. printr-un formular special furnizate de motoarele de căutare.
2. În cel de-al doilea caz, robotul de căutare însuși găsește site-ul dvs. prin link-uri și îl indexează. El poate urmări site-ul dvs. pentru link-uri de la alte resurse care conduc la proiectul dvs. Această metodă este cea mai eficientă. Dacă motorul de căutare găsește site-ul în acest fel, consideră că este semnificativ.

termeni

Indexarea site-ului nu este prea rapidă. Termenii diferă, de la 1-2 săptămâni. Legăturile din resursele autoritare (cu PR și Titz excelent) accelerează în mod semnificativ plasarea site-ului în baza de date a motoarelor de căutare. Astăzi, Google este considerat cel mai lent, deși până în 2012 ar putea face acest lucru într-o săptămână. Din păcate, totul se schimbă foarte repede. Este cunoscut faptul că Mail.ru lucrează cu site-uri web din această zonă timp de aproximativ șase luni.

Indexarea unui site în motoarele de căutare nu poate fi făcută de fiecare specialist. Momentul de adăugare a unor noi pagini în baza de date a site-ului deja procesat de motoarele de căutare este afectată de frecvența actualizării conținutului. Dacă resursa este actualizată în mod constant, sistemul găsește că este adesea actualizat și util pentru oameni. În acest caz, munca sa este accelerată.

Puteți urmări progresul indexării unui site Web pe secțiuni speciale pentru webmasteri sau pe motoarele de căutare.

schimbări

Deci, am aflat deja cum este indexat site-ul. Trebuie remarcat faptul că bazele de date ale motoarelor de căutare sunt adesea actualizate. Prin urmare, numărul de pagini ale proiectului pe care le adăugați poate varia (atât să scadă, cât și să crească) din următoarele motive:

• Sancționează motorul de căutare pe site;
• prezența erorilor pe site;
• schimbarea algoritmilor motoarelor de căutare;
• gazdă dezgustătoare (inaccesibilitatea serverului pe care se află proiectul) și așa mai departe.

Yandex răspunde la întrebările obișnuite

"Yandex" este un motor de căutare folosit de mulți utilizatori. Se situează pe locul cinci printre sistemele de căutare ale lumii prin numărul de cereri de cercetare procesate. Dacă ați adăugat la site-ul, acesta poate fi prea lung pentru a fi adăugate la baza de date.

Adăugarea unei adrese URL nu garantează indexarea acesteia. Aceasta este doar una dintre metodele prin care robotul sistemului este informat că a apărut o nouă resursă. Dacă site-ul nu are link-uri de la alte site-uri web sau nu există multe dintre ele, adăugarea va ajuta să-l găsiți mai rapid.

Dacă indexarea nu are loc, trebuie să verificați dacă pe server s-au produs defecțiuni la momentul creării aplicației de la robotul "Yandex". Dacă serverul raportează o eroare, robotul își va finaliza activitatea și va încerca să o execute într-un sens giratoriu cuprinzător. Angajații companiei "Yandex" nu pot crește viteza de adăugare a paginilor în motorul de căutare al bazei de date.

Indexarea unui site în Yandex este o sarcină dificilă. Nu știți cum să adăugați o resursă la motorul de căutare? Dacă are legături de la alte site-uri web, atunci nu este nevoie să adăugați un site special - robotul îl va găsi automat și îl va indexa. Dacă nu aveți astfel de linkuri, puteți utiliza formularul "Adăugați URL" pentru a le spune motorului de căutare despre existența site-ului web.

Rețineți că adăugarea unei adrese URL nu garantează indexarea creării (sau a vitezei sale).

Mulți oameni se întreabă de cât timp este nevoie pentru indexarea site-ului în Yandex. Angajații acestei companii nu oferă garanții și nu prevăd termeni. De regulă, de când robotul a aflat despre site, paginile sale apar în căutare în două zile, uneori în câteva săptămâni.

Procesul de procesare

Yandex este un motor de căutare care necesită precizie și atenție. Situl de indexare este alcătuit din trei părți:

1. Crawler crawlează pagini de resurse.
2. Conținutul (conținutul) site-ului este înregistrat în baza de date (index) a sistemului de căutare.
3. După 2-4 săptămâni, după actualizarea bazei de date, puteți vedea rezultatele. Site-ul dvs. va apărea (sau nu va apărea) în SERP.

Verificarea indexării

Cum să verificați indexarea unui site? Puteți face acest lucru în trei moduri:

1. Introduceți numele companiei în bara de căutare (de exemplu, "Yandex") și verificați fiecare legătură pe prima și a doua pagină. Dacă găsiți adresa URL a creierului dvs. acolo, atunci robotul și-a îndeplinit sarcina.
2. Puteți introduce adresa URL a site-ului dvs. în șirul de căutare. Puteți vedea câte pagini de Internet sunt afișate, adică indexate.
3. Înregistrați-vă pe paginile webmasterilor din Mail.ru, Google, Yandex. După ce treceți verificarea site-ului, puteți vedea atât rezultatele indexării, cât și alte servicii ale motorului de căutare create pentru a îmbunătăți performanța resursei.

De ce refuză Yandex?

Indexarea unui site pe Google se realizează în felul următor: robotul intră în baza de date toate paginile site-ului, substandard și calitativ, fără a alege. Numai documentele utile sunt implicate în clasament. Și Yandex exclude imediat toate materialele web. Poate indexa orice pagină, dar motorul de căutare va elimina în cele din urmă toate gunoiul.

Ambele sisteme au un indice suplimentar. Ambele pagini de o calitate slabă afectează clasamentul site-ului ca întreg. O filozofie simplă funcționează aici. Resursele favorizate ale unui anumit utilizator vor ocupa poziții superioare în emiterea sa. Dar același individ, cu dificultate, va găsi un site pe care nu la plăcut ultima oară.

De aceea, trebuie mai întâi să acoperiți copiile documentelor web de la indexare, să verificați prezența paginilor goale și să nu lăsați conținuturi sărace.

Accelerarea activității Yandex

Cum pot accelera indexarea site-ului în „Yandex“? Este necesar să urmați pașii următori:

• Instalați browserul Yandex pe computerul dvs. și străpungeți-l prin paginile site-ului.
• Confirmați dreptul de gestionare a resurselor „Yandex.Webmaster“.
• În Twitter, publicați un link către articol. Este cunoscut faptul că, începând din 2012, Yandex a colaborat cu această companie.
• Pentru site adăugați căutarea de la Yandex. În secțiunea "Indexare", puteți specifica propriile adrese URL.
• Introduceți codul "Yandex.Metrica" ​​fără a specifica caseta de selectare "Trimiterea paginilor pentru indexare este interzisă".
• Efectuați un Sitemap care există numai pentru robot și nu este vizibil pentru public. Verificarea va începe cu ea. Adresa Sitemap-ului este introdusă în robots.txt sau în formularul corespunzător din "Webmaster" - "Indexing Setup" - "Sitemaps".

Acțiuni intermediare

Ce ar trebui să fac până când pagina web "Yandex" este indexată? Motorul de căutare intern ar trebui să considere site-ul sursa primară. De aceea, chiar înainte de publicarea articolului, este absolut necesar să adăugăm conținutul acestuia la formularul "Texte specifice". În caz contrar, plagiarii copiază înregistrarea în propria lor resursă și vor fi primii din baza de date. Ca urmare, ei vor fi recunoscuți ca autori.

Baza de date Google

Pentru Google, se vor aplica aceleași recomandări ca cele descrise mai sus, numai serviciile vor fi diferite:

• Google+ (în loc de Twitter);
• Google Chrome
• Dispozitive Google pentru programatori - "Scanare" - "Arata ca Googlebot" - optiunea "Scanare" - optiunea "Add to index";
• căutare în cadrul resurselor de la "Google";
• Google Analytics (în schimb pentru Yandex.Metrica).

interdicție

Care este interzicerea indexării site-ului? Puteți să o suprapuneți atât pe întreaga pagină, cât și pe partea separată (link sau text). De fapt, există o interdicție globală de indexare și locală. Cum se realizează acest lucru?

Luați în considerare interzicerea adăugării unui motor de căutare pe site-ul web în Robots.txt. Utilizând fișierul robots.txt, puteți exclude indexarea unei singure pagini sau a unei rubrici de resurse întregi, cum ar fi:

1. User-agent: *
2. Dezactivați: /kolobok.html
3. Respingeți: / foto /

Primul paragraf indică faptul că instrucțiunile sunt definite pentru toate statele membre, al doilea indică faptul că indexarea fișierului kolobok.html este interzisă, iar al treilea nu permite adăugarea directorului foto în baza de date. Dacă doriți să excludeți mai multe pagini sau dosare, specificați-le pe toate în "Roboți".

Pentru a împiedica indexarea unei foi de Internet separate, puteți utiliza eticheta meta roboți. Aceasta diferă de robots.txt prin faptul că oferă instrucțiuni simultan tuturor PC-urilor. Această etichetă meta respectă principiile generale ale formatului html. Ar trebui să fie plasat în antetul paginii între etichete . Intrarea pentru interdicție, de exemplu, poate fi scrisă astfel :.

Ajax

Și cum arată indexarea site-urilor Ajax Yandex? Astăzi, tehnologia Ajax este folosită de mulți dezvoltatori de site-uri web. Desigur, are mari oportunități. Cu ajutorul acestuia puteți crea pagini web interactive de mare viteză și productivitate.

totuși robot motor de căutare pagina web a sistemului "vede" nu este modul în care utilizatorul și browserul. De exemplu, o persoană se uită la o interfață confortabilă cu pagini Internet încărcate mobil. Pentru crawler, conținutul aceleiași pagini poate fi golit sau reprezentat ca restul conținutului HTML static, pentru generarea de scripturi care nu intră în acțiune.

Pentru a crea site-uri Ajax poți folosi URL-ul cu #, dar motorul de căutare robot nu-l folosește. De obicei, o parte a URL-ului după ce # este separat. Acest lucru trebuie luat în considerare. Prin urmare, în loc de adresa URL a formularului https://site.ru/#example, face o cerere pe pagina principală a resursei, localizată la https://site.ru. Aceasta înseamnă că conținutul listei de Internet nu poate intra în baza de date. În consecință, acesta nu va apărea în rezultatele căutării.

Pentru a îmbunătăți indexarea site-urilor Ajax, Yandex a sprijinit modificările în robotul de căutare și regulile de procesare a adreselor URL ale unor astfel de site-uri Web. Astăzi, webmasterii pot indica motorul de căutare "Yandex" pentru necesitatea indexării, creând o schemă adecvată în structura resursei. Pentru a face acest lucru aveți nevoie de:

1. Înlocuiți adresa URL a paginii # simbol la #!. Acum, robotul va înțelege că va putea aplica pentru o versiune HTML a umplerii acestei foi de Internet.
2. Versiunea HTML a conținutului unei astfel de pagini ar trebui plasată pe adresa URL unde #! înlocuit cu? _escaped_fragment_ =.