Indexelés: teljes útmutató

Az indexelés az a lépés, amikor a kereső eldönti, hogy a letöltött és megjelenített oldalt eltárolja-e a saját adatbázisában. Nem minden bejárt oldal kerül be: a duplikált, a tartalmatlan és a kifejezetten kizárt oldalak kimaradnak. Ami nincs indexben, az nem tud megjelenni a találatok között.

Alapfogalmak

Index

A kereső adatbázisa, amiben a feldolgozott oldalak állnak. Amikor valaki keres, a kereső ebből válogat. Az index nem tartalmazza a teljes webet, és nem is törekszik rá: a kereső folyamatosan dönt arról, mit érdemes tárolni.

Kanonikus cím

Amikor ugyanaz a tartalom több címen is elérhető, a kereső kiválaszt egyet, és azt tekinti az eredetinek. Ezt hívjuk kanonikus címnek. Te is jelezheted, melyiket szeretnéd, de ez javaslat: a kereső dönthet másképp, ha a jelek ellentmondanak neki.

Duplikált tartalom

Nem büntetés, hanem válogatási kérdés. Ha két oldalad lényegében ugyanazt mondja, a kereső az egyiket választja, a másikat kihagyja. A baj nem a büntetés, hanem hogy a te szándékod helyett a kereső dönt.

Vékony tartalom

Olyan oldal, ami önmagában nem ad elég értéket: egy terméklista szöveg nélkül, egy címkeoldal két bejegyzéssel, egy generált oldal, ami csak egy adatbázis-sort jelenít meg. Ezek jellemzően kimaradnak az indexből.

Index-felfúvódás

Amikor sok értéktelen oldalad kerül be, és ezek elnyomják a fontosakat. Nem közvetlen büntetés, de rontja azt a képet, amit a kereső az oldaladról alkot, és elviszi a bejárási figyelmet.

Hogyan működik?

A megjelenített oldal feldolgozásra kerül: a kereső kiszedi belőle a szöveget, azonosítja a témáját és a benne szereplő fogalmakat, megnézi a jelzéseket, és ezután dönt a tárolásról.

Mit néz a döntésnél

• Van-e kifejezett kizárás. Ha az oldalon indexelést tiltó jelzés van, a kereső kihagyja.
• Van-e már ugyanilyen tartalma. Ha igen, az egyiket választja.
• Van-e egyáltalán érdemi tartalom. Ha az oldal lényegében üres, nincs mit tárolni.
• Van-e rá kereslet. Ha a kereső szerint soha senki nem keresne rá, a tárolás nem éri meg.

A jelzések hierarchiája

Több jelzés is vonatkozhat ugyanarra az oldalra, és ezek ütközhetnek. Az általános sorrend: a kifejezett indexelés-tiltás erősebb, mint a kanonikus javaslat, a kanonikus javaslat pedig erősebb, mint az oldaltérképben szereplés. Ha a jelzéseid ellentmondanak egymásnak, a kereső a saját döntését hozza, és az ritkán az, amit szerettél volna.

Az indexelés nem végleges

Egy bekerült oldal ki is eshet. Ha sokáig változatlan, ha a kereső szerint elavult, vagy ha jobb alternatíva született rá, akkor kikerülhet. Ez nem hiba, hanem karbantartás, és ellene a tartalom frissítése segít.

Fő módszerek

1. Döntsd el oldaltípusonként, mi kerüljön indexbe

Ez a legfontosabb lépés, és a legtöbben kihagyják. Nem oldalanként, hanem típusonként kell dönteni. Egy tipikus felosztás:

• Indexelendő: főoldal, szolgáltatás- és kategóriaoldalak, cikkek, termékoldalak.
• Nem indexelendő: belső keresési találatok, kosár és fiók, köszönőoldalak, nyomtatóbarát változatok, üres címkeoldalak.
• Egyedi mérlegelés: szűrőoldalak, lapozott oldalak, archívumok.

2. Rendezd a duplikációt

Négy tipikus forrása van, és mindegyiknél más a teendő:

1. Cím változatai. Ugyanaz az oldal elérhető több írásmóddal. Válassz egy alakot, a többit irányítsd át rá.
2. Paraméterek. Rendezés és megjelenítés. Kanonikus jelölés az alapváltozatra.
3. Hasonló tartalmú oldalak. Két cikk ugyanarról. Vond össze őket.
4. Átvett szöveg. Gyári termékleírás, amit ötven bolt használ. Írj sajátot.

3. Használd a helyes eszközt a kizáráshoz

Ez a leggyakoribb hibaforrás, ezért érdemes külön kimondani. Ha ki akarsz zárni valamit az indexből, az oldalon kell jeleznie, és a bejárást engedni kell, hogy a kereső lássa a jelzést. Ha a bejárást tiltod, a kereső nem tudja letölteni, tehát a kizáró jelzést sem olvassa el.

4. Szüntesd meg a vékony oldalakat

Három lehetőség van, és mindig valamelyiket kell választani: tölts rá érdemi tartalmat, vond össze egy erősebb oldallal, vagy zárd ki az indexből. A semmittevés a legrosszabb, mert az oldal ott marad, és rontja az összképet.

Gyakori hibák

A bejárás tiltása indexelés-tiltás helyett

A tiltott oldal megjelenhet a találatok között, leírás nélkül. Ez a legismertebb csapda, mégis a leggyakoribb, mert a két dolog neve hasonló.

Az oldaltérkép mindenhatóságának hite

Az oldaltérképbe felvenni egy címet javaslat, nem parancs. Ha az oldal vékony vagy duplikált, a felvétel nem segít rajta.

Ellentmondó jelzések

Az oldal szerepel az oldaltérképben, de kanonikus jelölése egy másik oldalra mutat. Vagy belső linkek ezrei mutatnak rá, közben indexelés-tiltás van rajta. Ilyenkor a kereső bizonytalan, és a végeredmény kiszámíthatatlan.

A teljes index-lefedettség elvárása

Nem cél, hogy minden oldalad indexben legyen. Egy egészséges oldalon vannak szándékosan kihagyott részek. Az igazi kérdés az, hogy a FONTOS oldalak bent vannak-e.

Az azonnali eltávolítás elvárása

Ha kizársz egy oldalt, az nem tűnik el másnap. A keresőnek vissza kell térnie, meg kell néznie a jelzést, és ki kell vennie. Ez napokig vagy hetekig tart.

Hogyan vegyél ki valamit az indexből

Ez külön téma, mert több út van, és mindegyik máskor helyes. A rossz választás vagy nem oldja meg a problémát, vagy többet vesz ki a kelleténél.

Ha az oldal megmarad, csak ne legyen indexben

Tedd rá az indexelést tiltó jelzést, és hagyd bejárhatónak. A kereső a következő látogatáskor látja a jelzést, és kiveszi. Ez a leggyakoribb eset: belső keresési oldalak, köszönőoldalak, szűrőkombinációk.

Ha az oldal megszűnik, és van helyette másik

Irányítsd át a legközelebbi értelmes oldalra. Az átirányítás a legjobb megoldás, mert a régi oldal erejének nagy része átkerül az újra, és a látogató sem kap hibát.

Ha az oldal megszűnik, és nincs helyette semmi

Adjon vissza hibakódot. Sokan félnek ettől, pedig ez a helyes jelzés: azt mondja a keresőnek, hogy az oldal megszűnt, és ki lehet venni. Az átirányítás egy teljesen oda nem illő oldalra rosszabb, mert a látogatót becsapja.

Ha sürgős

A keresőkonzolban kérhető gyorsított eltávolítás. Ez átmeneti: néhány hónapig elrejti az oldalt, de nem oldja meg a helyzetet. A tartós megoldáshoz a fenti három valamelyike kell mellé.

Döntési szabály

Kérdezd meg: létezik-e még az oldal, és van-e helyette értelmes cél. Ha létezik és marad, akkor jelzés. Ha megszűnt és van utódja, akkor átirányítás. Ha megszűnt és nincs utódja, akkor hibakód. A negyedik lehetőség, hogy nem csinálsz semmit, mindig rossz.

Egy végigvitt eset: a felfúvódott index

Egy blogot működtető cégnél a keresőkonzol tizennégyezer indexelt oldalt mutatott, miközben a cég szerint körülbelül kétszáz cikkük volt. A forgalom közben hónapok óta esett.

Mit mértünk

1. Az indexelt címek mintája. Kiderült, hogy a rendszer minden címkéhez és minden szerzőhöz archívumoldalt generált, ráadásul lapozással, tehát egyetlen címkéből tucatnyi cím lett.
2. A tartalom. A legtöbb ilyen oldal egy vagy két bejegyzés címét tartalmazta, semmi mást.
3. A forgalom. Ezekre az oldalakra gyakorlatilag nulla látogató érkezett keresésből.
4. A valódi cikkek. A kétszáz cikkből hatvan nem is volt indexben.

Mit csináltunk

A címke- és szerzőarchívumok kikerültek az indexből, a lapozott változatok szintén. A felszabaduló figyelem a cikkekre került, és a hiányzó hatvan cikk belső linket kapott a kapcsolódó anyagokból.

Az eredmény és a tanulság

Az indexelt oldalak száma töredékére esett, és ez jó hír volt, nem rossz. A cikkek bekerültek, a forgalom pedig két hónap alatt megfordult.

A tanulság az, hogy az indexelt oldalak száma nem teljesítménymutató. Sokan büszkék rá, hogy sok oldaluk van bent, pedig a kérdés mindig az, hogy a FONTOS oldalak bent vannak-e, és hogy a bent lévők közül hány hoz tényleg forgalmat.

Mérés

Az indexelési jelentés olvasása

A keresőkonzol megmutatja, mely oldalak vannak indexben, és mely oldalak nincsenek, okkal együtt. A leggyakoribb okok és a hozzájuk tartozó teendő:

Amit a jelentés mond	Mit jelent	Teendő
Kizárva jelzéssel	Te zártad ki	Ha szándékos, semmi
Másik kanonikus lett kiválasztva	A kereső mást tart eredetinek	Nézd meg, egyetértesz-e
Bejárva, de nincs indexelve	Letöltötte, nem tartotta érdemesnek	Tartalom vagy összevonás
Felfedezve, de nincs bejárva	Tud róla, nem jutott el hozzá	Belső link, bejárási keret
Duplikált, nincs kanonikus jelölve	Több azonos oldal, nincs döntés	Jelöld meg a kanonikusat

Egy konkrét cím ellenőrzése

A keresőkonzol egyedi cím-vizsgálata megmondja, indexben van-e, mikor járt ott a bot, és mit látott. Ez a leggyorsabb próba egyetlen oldalra.

Az arányok figyelése

Az abszolút szám kevésbé érdekes, mint az arány. Havonta érdemes megnézni: hány oldalad van összesen, ebből hány van indexben, és ez az arány merre mozog. Ha az index gyorsabban nő, mint a valódi tartalom, akkor felfúvódás van.

Döntési szabály

Ha egy fontos oldal nincs indexben, a kérdés sorrendje: eljutott-e hozzá a bot, meg tudta-e jeleníteni, és ha igen, milyen okot mond a jelentés. A három kérdés három különböző munkát ad, és a jelentés által megnevezett ok szinte mindig pontos.

Mennyi idő, mire bekerül egy új oldal

Erre nincs fix szám, és aki mond egyet, az becsül. Ami befolyásolja, az viszont ismert és részben a te kezedben van.

• Honnan vezet hozzá út. Egy gyakran bejárt oldalról induló link lényegesen gyorsít.
• Milyen gyakran frissül az oldalad. Egy rendszeresen változó oldalhoz a bot sűrűbben tér vissza.
• Mekkora az oldal. Nagy oldalon a sor hosszabb.
• Mennyire tartja értékesnek. Ezt nem tudod közvetlenül befolyásolni, de a tartalom minőségén keresztül igen.

Gyakorlati tanács: egy fontos új oldalnál kérj egyedi ellenőrzést a keresőkonzolban, és tegyél rá linket egy erős oldalról. Tömeges új tartalomnál viszont ne az egyedi kéréssel próbálkozz, hanem az oldaltérképpel és a belső linkeléssel.

A lapozott oldalak kezelése

Ez az egyik leggyakoribb bizonytalanság, ezért érdemes külön kimondani. A lapozott listaoldalak (a kategória második, harmadik oldala) önálló oldalak, saját tartalommal.

Amit érdemes csinálni

• Legyenek bejárhatók, valódi linkekkel, hogy a bot elérje rajtuk keresztül a termékeket.
• Mindegyik önmagára mutasson kanonikusként, ne az első oldalra.
• A leíró szöveget ne ismételd meg minden lapon, mert attól lesznek duplikáltak.

Amit nem érdemes

• Az összes lapozott oldalt kizárni az indexből, mert azzal a termékek elérési útját is gyengíted.
• Minden lapozott oldalt az elsőre kanonizálni, mert akkor a kereső a többi oldal tartalmát nem dolgozza fel rendesen.

Döntési szabály: a lapozott oldal legyen bejárható és önmagára kanonikus, és ha nem akarod a találatokban látni, akkor is maradjon elérhető a bot számára.

Negyedéves indexelési ellenőrzőlista

• Az indexelt oldalak száma arányban van a valódi tartalom mennyiségével.
• Minden fontos oldal bent van, egyet sem hagyott ki a kereső.
• Nincs olyan oldal, amit te zártál ki, mégis bent van, vagy fordítva.
• A kanonikus jelölések oda mutatnak, ahova szeretnéd.
• Nincs olyan oldaltípus, ami tömegesen generálódik, és senki nem döntött a sorsáról.
• A megszűnt oldalak vagy átirányítanak, vagy tiszta hibakódot adnak.

Ez a hat pont húsz perc negyedévente, és pont azokat a problémákat fogja meg, amik lassan, észrevétlenül épülnek fel. Az indexelési gondok ritkán egyik napról a másikra keletkeznek: jellemzően egy rendszerfrissítés vagy egy új funkció hoz be egy oldaltípust, amiről senki nem döntött, és fél év múlva derül ki, hogy ezer címet generál.

Érdemes az ellenőrzés eredményét leírni, akár egy egyszerű sorba: dátum, indexelt oldalszám, valódi tartalom mennyisége. Negyedév múlva így nem emlékezetből kell megmondani, hogy nőtt-e a felfúvódás, hanem két szám összehasonlításából.

A leggyakoribb kiváltó ok egyébként a rendszerfrissítés, ezért érdemes minden nagyobb verzióváltás után lefuttatni ezt a hat pontot, függetlenül attól, mikor volt az utolsó negyedéves kör.

Kapcsolódó részletes útmutatók

A bejárás útmutatója arról szól, hogyan jut el a bot az oldalhoz, a megjelenítésé arról, mit lát belőle. Az indexelés ezek után következik, az organikus keresés pedig onnan folytatja, hogy az oldal már bent van. Ha most kezded, ebben a sorrendben haladj, mert a későbbi szakasz kérdéseit nem lehet megválaszolni a korábbi nélkül.

• SEO: teljes útmutató
• Organikus keresés: teljes útmutató
• Keresőmotorok: teljes útmutató
• Googlebot: teljes útmutató
• SEO alapok