Nem csak egy verseny kapcsán - legyen az akár a seonyár2008 kulcsszóra kiírt SEO verseny - fontos, hogy képet kapjunk a keresők által kiküldött robotok aktivításáról, hanem egyébként is érdemes időnként rápillantani, hogy mit és mikor is csinálnak nálunk a crawlerek, és persze, hogy honnan jönnek.

Persze mint ahogy én sem szeretem a seonyár2008 versenyen indult blogommal kapcsolatos weblogokat turkálni, másnak sem ez az elsődleges hobbija. Bizonyos platformokon pl. wordpress, megvan a lehetőség, hogy ezt szép grafikonos formában is láthassuk, és ott van a Google Webmaster Tool is. Előbbiről Longhand SEO blogjában olvashattok, az utóbbival pedig az a gond, hogy elég lassan frissűl, ráadásul csak Google related infókat mutat. (Mondjuk kishazánkban ez bőven elég, 95%-os részesedés mellett.)

Lényeg a lényeg, The Bot Project néven indult egy kezdeményezés, melynek az a célja, hogy információkat adjon a világban szanaszét kószáló robotokról. Honnan jönnek, mikor jönnek, milyen gyakran jönnek, stb. A megvalósításhoz pedig a már jól bevált közösséget hívjáksegítségül. Arra kérik ugyanis a webmastereket, hogy a robotok által elsőként vizsgát robots.txt módosításával jutassák el az információkat hozzájuk, ők pedig feldolgozván ezeket, publikussá teszik. (Ha nem akarod, akkor nem teszik publikussá a Te adataidat.)

A projecten belül lehetőség nyílik csak egyéni (grafikonos) statisztikát kapnunk, de amennyiben engedélyezzük, úgy a köz javára is tehetjük ezeket az infókat. Hozzásegítve mindenkit, hogy egy átfogó képet kapjunk a spiderek világáról. A project honlapján thebotproject.com minden szükséges infót megkapunk a beállításokról, ha gondunk van a fórumban kérdezhetünk, vagy egyszerűen csak nézegethetjük a statisztikákat. :)

Inkább érdekes ez a kezdeményezés mint kihagyhatatlan, mindenesetre egy pillantást megér.

Oszd meg!