... az például az IWIW. Ami több ok miatt is meglepő: egyrészt az Origó keresőjének a motorja a Google, az IWIW pedig az Origó tulajdona, másrészt egy iszonyatosan nagy és fontos adatbázisról van szó.

Az persze nem véletlen, hogy nem keres a Google az IWIW-en: nincs beengedve. Ennek megfelelően az ott található adatok jobban védettek, és nem tükrözi le egy harmadik fél. Másrészt rengeteg találattól elesik az IWIW - ami viszont nem fáj nekik, hiszen így is nagyon sokan használják. Ugyanakkor lehetne köztes megoldást használni: például a nevekben lehetne keresni, de másban nem.

Egyébként ez egy általános gyakorlat: a belépéshez kötött oldalakat általában nem indexelik a keresők, pontosabban nem tudnak belépni, ezért nem is látják azokat. Nagyon helyesen, teszem hozzá, hiszen így nem tud turkálni a leveleinkben, vagy például a weboldalunk zárt részében.

Amikor megtervezünk egy webes szolgáltatást, akkor el kell döntenünk, akarunk-e keresőkből forgalmat. Elsőre könnyű rávágni: persze, akarunk! De aztán kiderülhet, hogy vannak olyan tartalmaink, amiket nem akarunk megmutatni. Ilyen tartalmak nemcsak zárt, jelszóval védett helyeken lehetnek. Ilyen tartalmak lehetnek például azok, amelyek ideiglenesek: ügyfélnek készített weboldal tervek ha webdesigner cég vagyunk, vagy mintahirdetések, esetleg weben keresztül megosztott ideiglenes dokumentumok.

A triviális, jelszavas védelmen kívül két egyéb módon biztosan el tudjuk zárni a kereső, és így a Google szeme elől a tartalmunkat. Az egyik megoldás az, hogy nem linkeljük sehonnan az eldugni kivánt oldalt. Mivel a Google linkeket követ, így nem fog tudni eljutni oda, ahova nem vezet link. A másik lehetőség, ha mégis linkelnünk kell az adott lapot, hogy kap a link egy "nofollow" elemet. Valahogy így:

<a rel="nofollow" href="weboldal címe">link leírás</a>

Ez utóbbi formát lehet egyébként akkor is használni, ha azt akarjuk, hogy a link ne erősítse (vagy gyöngítse) a keresőoptimalizálásban a linkelt oldalt.

A Google tehát nem lát mindent. Egyrészt mert nem bír látni, másrészt, mert el lehet zárni előle tartalmakat. Tudjuk ezt akkor, amikor keresünk, de akkor is, amikor webes megjelenést tervezünk.

U.i.: persze közben rájöttem, hogy kimaradt egy fontos megoldás, ami kizárja a keresőket. A weboldal gyökerében (alap könyvtárában) kell egy robots.txt file-t elhelyezni, amiben meg lehet adni, mit nézzen és mit ne nézzen a Google. (Vajon mit felejtettem még el?...)