Svaki webmaster zna da kako bi ljudi počeli posjećivati njegov resurs iz tražilica, on mora biti indeksiran. O tome što je indeksiranje web-mjesta, kako se provodi i što je njegovo značenje, reći ćemo u ovom članku.
Što je indeksiranje?
Dakle, riječ "indeksiranje" sama po sebi znači unošenje nečega u registar, popis materijala koji je dostupan. Isti princip vrijedi i za indeksiranje stranica. Zapravo, ovaj se proces može nazvati i unosom informacija o internetskim resursima u bazu podataka tražilica.
Dakle, čim korisnik unese drugu frazu u Google polje za pretraživanje, skripta će mu vratiti rezultat, uključujući naslov vaše stranice i njezin kratak opis, što vidimo u nastavku.
Kako se vrši indeksiranje?
Samo indeksiranje ("Yandex" je, ili Google - ne igra ulogu) prilično je jednostavno. Cijelu internetsku mrežu, fokusirajući se na bazu podataka ip adresa koje imaju tražilice, skeniraju moćni roboti - "pauci" koji skupljajuinformacije o vašoj web-lokaciji. Svaka od tražilica ih ima ogroman broj, a rade automatski 24 sata dnevno. Njihov zadatak je otići na vašu stranicu i "pročitati" sav sadržaj na njoj, a pritom unositi podatke u bazu podataka.
Slijedom toga, u teoriji, indeksiranje stranice ne ovisi puno o vlasniku resursa. Odlučujući faktor ovdje je robot za pretraživanje koji dolazi na stranicu i istražuje je. To je ono što utječe na to koliko se brzo vaša stranica pojavljuje u rezultatima pretraživanja.
Indeksiranje pojmova?
Naravno, svakom webmasteru je korisno da se njegov resurs pojavi u rezultatima pretraživanja što je prije moguće. To će utjecati, prvo, na uvjete dovođenja stranice na prve pozicije, a drugo, kada počnu prve faze monetizacije stranice. Dakle, što prije robot za pretraživanje "pojede" sve stranice vašeg resursa, to bolje.
Svaka tražilica ima svoj vlastiti algoritam za unos podataka o web stranici u svoju bazu podataka. Na primjer, indeksiranje stranica u Yandexu provodi se u fazama: roboti neprestano skeniraju web-mjesta, zatim raspoređuju informacije, nakon čega dolazi do takozvanog "ažuriranja", kada sve promjene stupe na snagu. Redovitost ovakvih događaja nije utvrđena od strane tvrtke: održavaju se jednom svakih 5-7 dana (u pravilu), no mogu se održati i 2 i 15 dana unaprijed.
Istovremeno, indeksiranje stranice u Googleu slijedi drugačiji model. U ovoj tražilici takva se “ažuriranja” (base updates) redovito odvijaju, stoga svaki put pričekajte dok roboti ne unesu podatke u bazu podataka, a zatimnaručuje se svakih nekoliko dana, nije potrebno.
Na temelju gore navedenog možemo izvući sljedeći zaključak: stranice u Yandexu dodaju se nakon 1-2 "ažuriranja" (to jest, u prosjeku za 7-20 dana), au Googleu se to može dogoditi puno brže - doslovno u danu.
Istovremeno, naravno, svaka tražilica ima svoje posebnosti načina na koji se indeksira. Yandex, na primjer, ima takozvani "brzi bot" - robota koji može unijeti podatke u problem za nekoliko sati. Istina, nije ga lako natjerati da posjeti vaš resurs: to se uglavnom odnosi na vijesti i razne događaje visokog profila koji se razvijaju u stvarnom vremenu.
Kako ući u indeks?
Odgovor na pitanje kako indeksirati svoju web stranicu u tražilicama je jednostavan i složen. Indeksiranje stranica je prirodna pojava, a ako o tome niti ne razmišljate, nego samo, recimo, zadržite svoj blog, postupno ga puneći informacijama, tražilice će s vremenom savršeno "progutati" vaš sadržaj.
Druga stvar je kada trebate ubrzati indeksiranje stranica, na primjer, ako imate mrežu takozvanih "satelita" (stranice dizajnirane za prodaju veza ili postavljanje oglasa, čija je kvaliteta obično lošija). U tom slučaju morate poduzeti mjere kako bi roboti primijetili vašu stranicu. Sljedeće se smatra uobičajenim: dodavanje URL-a web-mjesta u poseban obrazac (naziva se "AddUrl"); pokretanje adrese resursa kroz direktorije veza; dodati adresu u imenikeoznake i još mnogo toga. Na SEO forumima postoje brojne rasprave o tome kako svaka od ovih metoda funkcionira. Kao što praksa pokazuje, svaki je slučaj jedinstven i teško je točnije pronaći razloge zašto je jedna stranica indeksirana za 10 dana, a druga za 2 mjeseca.
Kako ubrzati ulazak u indeks?
Međutim, logika koja stoji iza bržeg ulaska stranice u indeks temelji se na povezivanju s njom. Konkretno, govorimo o postavljanju URL-ova na besplatnim i javnim stranicama (oznake, imenici, blogovi, forumi); o kupnji poveznica na velikim i popularnim stranicama (pomoću Sape burze, na primjer); kao i dodavanje karte web-lokacije u addURL obrazac. Možda postoje i druge metode, ali one koje su već navedene mogu se sa sigurnošću nazvati najpopularnijim. Podsjetimo, općenito, sve ovisi o stranici i sreći njenog vlasnika.
Koje su stranice indeksirane?
Prema službenom stavu svih tražilica, stranice koje prolaze kroz niz filtera ulaze u indeks. Nitko ne zna koje zahtjeve sadrže potonji. Poznato je samo da se s vremenom svi oni poboljšavaju na način da filtriraju pseudo-stranice stvorene za zaradu prodajom linkova i drugih resursa koji ne nose korisne informacije za korisnika. Naravno, za kreatore ovih stranica glavni je zadatak indeksirati stranice što je više moguće (privući posjetitelje, prodati linkove itd.).sljedeći).
Koje resurse tražilice zabranjuju?
Na temelju prethodnih informacija možemo zaključiti koje stranice najvjerojatnije neće ući u SERP-ove. Iste informacije iznose i službeni predstavnici tražilica. Prije svega, to su stranice s nejedinstvenim, automatski generiranim sadržajem koji posjetiteljima nije koristan. Zatim slijede resursi u kojima postoji minimum informacija, kreirani za prodaju linkova i tako dalje.
Istina, ako analizirate rezultate tražilica, u njemu možete pronaći sve ove stranice. Stoga, ako govorimo o stranicama koje neće biti prisutne u rezultatima pretraživanja, treba napomenuti ne samo neunikatan sadržaj, već i niz drugih čimbenika – mnogo veza, nepravilno organiziranu strukturu i tako dalje.
Skrivanje sadržaja. Kako onemogućiti indeksiranje stranica?
Tražilice indeksiraju sav sadržaj na stranici. Međutim, postoji tehnika kojom možete ograničiti pristup robotima za pretraživanje određenom odjeljku. To se radi pomoću datoteke robots.txt, na koju reagiraju "pauci" tražilica.
Ako se ova datoteka postavi u korijen stranice, indeksiranje stranica će se nastaviti prema skripti koja je u njoj napisana. Konkretno, možete onemogućiti indeksiranje jednom naredbom - Disallow. Osim toga, datoteka također može navesti dijelove web-mjesta na koje će se primjenjivati ova zabrana. Na primjer, da biste zabranili indeks cijele stranice, dovoljno je navestijedna kosa crta "/"; a da biste isključili odjeljak “shop” iz rezultata pretraživanja, dovoljno je navesti sljedeću karakteristiku u vašoj datoteci: “/shop”. Kao što vidite, sve je logično i krajnje jednostavno. Indeksiranje stranica se vrlo lako zatvara. U isto vrijeme roboti za pretraživanje posjećuju vašu stranicu, čitaju robots.txt i ne unose podatke u bazu podataka. Tako možete jednostavno manipulirati da biste vidjeli određene karakteristike web-mjesta u pretraživanju. Sada razgovarajmo o tome kako se indeks provjerava.
Kako mogu provjeriti indeksiranje stranica?
Postoji nekoliko načina da saznate koliko i koje stranice su prisutne u Yandex ili Google bazi podataka. Prvi - najjednostavniji - je postaviti odgovarajući zahtjev u obrazac za pretraživanje. To izgleda ovako: site:domen.ru, gdje umjesto domen.ru pišete adresu svoje stranice. Kada podnesete takav zahtjev, tražilica će prikazati sve rezultate (stranice) koji se nalaze na navedenom URL-u. Štoviše, osim jednostavnog popisa svih stranica, možete vidjeti i ukupan broj indeksiranih materijala (desno od izraza "Broj rezultata").
Drugi način je provjeriti indeksiranje stranica pomoću specijaliziranih usluga. Sada ih ima velik broj, a mogu se nazvati xseo.in i cy-pr.com. Na takvim resursima ne samo da možete vidjeti ukupan broj stranica, već i odrediti kvalitetu nekih od njih. Međutim, ovo vam je potrebno samo ako dublje razumijete ovu temu. U pravilu su to profesionalni SEO alati.
O "prisilnom" indeksiranju
Napisao bih malo i o tzv"Prisilno" indeksiranje, kada osoba pokušava utjerati svoju stranicu u indeks koristeći različite "agresivne" metode. Optimizatori to ne preporučuju.
Tražilice, u najmanju ruku, primijetivši pretjeranu aktivnost povezanu s novim resursom, mogu nametnuti neku vrstu sankcija koje negativno utječu na stanje stranice. Stoga je bolje učiniti sve kako bi indeksiranje stranica izgledalo što je više moguće organski, postupno i glatko.