Na službě Horoskopy.cz je pochopitelně nasazen iAudit, protože se jedná o hlavní měřící sytém v ČR. Kromě iAuditu je na službě výjimečně nasazen i Toplist, který používáme proto, že obsahuje on-line statistiky v průběhu dne. Před několika dny jsme pak na službu nasadli i nový polský systém Gemius (Netmonitor) protože jej chceme otestovat.

Protože každý z měřících systémů používá jinou metodiku měření, rozhodl jsem se čísla z těchto tří systému porovnat. Pro měření jsem zvolil období od 11.3 do 17.3. Je to málo, ale více dat jsem neměl k dispozici. Rozdíl mezi jednotlivými technologiemi je následující:

iAudit:

• Ve stránce je vložen kód obrázku, který se tahá ze serveru iAuditu. URL obrázku je statické, tj. nemění se.

• Obrázek je vložen na začátku stránky

• iAudit měří UV, Návštěvy, VTS, UVTS a PV

• Komerční systém

Toplist:

• Ve stránce je vložen kus JavaScriptu. Tento JavaScript do stránky vygeneruje HTML tag obrázku. Tento obrázek se tahá ze serveru TopListu. URL obrázku se pro každý dotaz mění.

• Měřící kód je vložen na začátku stránky

• Toplist měří Návštěvy a PV

• Zdarma

Gemius:

• Do stránky je dohrán kus JavaScriptu, který leží na našem serveru. Následně je zavolána JS funkce, který kód spustí. V této funkci se vytvoří HTML objekt img a obrázek je následně tahán ze serveru Gemiusu. URL tohoto obrázku se pro každý dotaz mění.

• Měřící kód jsme umístili na konec stránky, neboť měřící JavaScript je opravdu zběsilý (na to jak primitivní funkci má vykonávat).

• Gemius měří UV, Návštěvy, VTS, UVTS a PV

• Komerční systém. Dražší než iAudit.

Tabulka naměřených hodnot je zde:

V této tabulce jsem pak porovnal rozdíly návštěv a UV:

Z výsledné tabulky je patrné následující:

• Nejvyšší hodnoty Návštěv naměřil TopList. Následuje Gemius a jako poslední je iAudit.

• Zatímco TopList se v počtu Návštěv s Gemiusem shodne, iAudit měří o 5 až 11% návštěv méně, a 7 až 13% UV méně než Gemius. Tento rozdíl bude patrně způsoben rozdílnou metodikou měření. Obrázek s neměnným URL, které iAudit pro měření používá, zůstává v keši (cache) prohlížeče, proxy keších a transparentních proxy keších. Ať už je v hlavičce http odpovědi této tečky napsáno cokoliv, pokud je URL obrázku neměnné, není možné kešování obrázku zabránit.

• Překvapující je, jak přesně se TopList shodne v počtu naměřených Návštěv s Gemiusem. Chyba je vždy nižší než 3%. Osobně tento rozdíl přisuzuji tomu, že skript TopListu je nasazen na vrchu stránky, takže TopList měří o trošičku více.

• Přesnost TopListu je o to víc udivující, když uvážíme, že jako jediný ze tří systémů je zdarma. Občas sice trpí výpadky a chybami, ale i tak je jeho shoda s Gemiusem potěšující.

• Zajímavé výsledky jsou z pondělí 14.3. V tento den je totiž návštěvnost Horoskopů.cz rekordní. Rozdíl mezi TopListem a Gemiusem je v tento den minimální a tvoří pouhá 0,31%(!), avšak rozdíl mezi iAuditem a Gemius je právě v tento den také rekordní. iAudit naměřil 14.3. o 11,6% méně návštěv a o 13,36% méně UV. Zajímavé.

Zajímavé je, že návštěvnost serveru má vliv na měřící odchylku iAuditu a Gemiusu:

• Čím vyšší návštěvnost Horoskopy.cz zaznamenávají, tím je větší rozdíl mezi iAuditem a Gemiusem. A to nikoliv pouze v absolutní, ale i v relativní oblasti (tj v procentech). O víkendu se rozdíl v UV pohybuje kolem 6,7% a v pracovní dny je to již od 8,5 do 13,3%

• První vysvětlení této oscilace je následující: Čím je server navštěvovanější, tím je větší pravděpodobnost, že se měřící tečka iAuditu bude nalézat v nějaké keši (cache) a iAudit tedy nezaznamená dotaz na ní.

• Druhé vysvětlení disproporce je následující: Sběrný server iAuditu je ve špičkách přetížený a v pracovní dny nestíhá dostatečně rychle reagovat na množství požadavků.

Závěrem:

• Seznam.cz není členem SPIRU. V oblasti různých profesních združení jsem vždy skeptik v tom k čemu jsou dobrá. Petru Bednářovi a lidem ve SPIRU však patří dík, že se jim mezinárodní systém Gemius podařilo na český trh dostat. Asi budu muset svůj skeptický názor přehodnotit.

• V hodnocení TopListu jsem neobjektivní. Zakladatel a majitel TopListu Pavel Francírek pracuje v Seznamu jako jeden z šéf programátorů. To je ale to poslední, co má Seznam s TopListem společného, snad až na to, že můžeme být hrdí na to, že programátoři jako je Franci, kopou za náš špičkový tým. Franci je navíc můj bývalý spolužák z ČVUT a svého času jsem mu pomáhal naší stařičkou Škodou 120L roztlačovat jeho stařičkou Škodovku. Čtěte zde..

• Kromě těchto měřících systémů u nás existují ještě systémy eMerite a Navrcholu. Tyto systémy však osobně neznám, takže o nich nemohu nic říci. Snad jen to, že Navrcholu je dílo mého bývalého spolužáka a opět se jedná o systém zdarma, který navíc měří i UV.

• UPDATE: V pondělí 21.3.2005 došlo vůbec k nejvyšší denní návštěvnosti na českém Internetu (měřeno dle iAuditu) tak jsem si narychlo spočetl rozdíl Gemiusu a iAuditu a činil 8%. Zdá se tedy, že 13% rozdíl mezi Gemiusem a iAuditem zaznamenaný v pondělí 14.3. byl vyjímečný a normálně se odchylka těchto dvou systémů pohybuje od 6% do 10%.

---------------------------------------------
Jaké máte vy zkušenosti s iAuditem, TopListem a Gemiusem. Srovnával někdo Navrcholu s ostatními systémy? Napište mi o tom na ilblog(zavinac)seznam.cz