Googlebot/Test - umí interpretovat JavaScript?
Před časem jsem si všiml, při prohlížení logů a při čtení konference SEO, že se začíná objevovat nový robot vyhledávače …
Před časem jsem si všiml, při prohlížení logů a při čtení
konference SEO, že se začíná objevovat
nový robot vyhledávače Google,
který se běžně hlásí jako Googlebot/2.1. Jedná se o robota
Googlebot/Test. Podle dostupných informací
by měl umět interpretovat, například, přesměrování stránek řešené
pomocí JavaScriptu. Takové stránky doteď neměly šanci se objevit
ve výsledcích Google.
Březen – do Googlu vlezem
Co jsem zjistil z několika logů z března (každý měl skoro 2GB)? Několik zajímavých věcí, v březnu se objevil poprvé 19.3. a do konce března provedl jen několik málo návštěv, přesně 15. Vždy si přečetl jen robots.txt a externí JavaScriptový soubor, jiné stránky si neprohlédl, čili věděl kde JS soubory hledat!
V dubnu je to jinak
Změna je v tom, že nyní chodí Googlebot/Test zcela běžně
a současně s Googlebotem/2.1. Indexuje již tedy nejen
externí JS jako v březnu, ale i klasické stránky jako jeho
starší bratr.
Kupříkladu včera bylo z 540 návštěv Googlebota
93 přístupů Googlebota/Test.
Co bude dál
Věštit neumím a je dokonce možné, že se v něčem pletu, ale podle mě si na začátku března Google ověřoval, že dokáže pracovat s JS soubory a protože znal adresy těchto souborů z indexovaných stránek tak k nim prostě přistupoval přímo. V dubnu nastal zlom, protože zřejmě testy byly úspěšné a tak se testování dostalo do nové fáze. Stránky jsou nyní indexovány novým robotem s rozšířenými funkcemi.
Chyť si svého robota
Stejně mě zajímá jestli Googlův nový robot umí přesměrování JavaScriptem, na cílovou stránku Test robota Googlebot/Test, cílovou sránkou myslím tu na kterou se dostanete po přesměrování, nevede žádný externí odkaz (opovažte se někdo nějaký vyrobit) a proto ji dokáže zaindexovat jen robot, který má JS „v paži“.
Třeba se pletu, ale stejně to zkusím.
Závěrem
Vím, že titulek spotu je tázací, ale tentokrát je to myslím k věci. Odpovezme si sami kolegové blogeři, prozkoumejte své logy, napiště o svých poznatcích a vyčkejme výsledků pokusu. Pokud narazíte v indexu Google na odkaz, který se tam prokazatelně dostal díky novým vlastnostem, tak mě o tom prosím informujte.
Jirka Ch | 23. Duben 2004, 1:03 | „Články“ | Trvalý odkaz | Komentáře (7) | Štítky: google, javascript, robot
Komentáře:
Jak to vypadá na Jak psát web za půlku března a půlku dubna:
cat $log | grep „Googlebot/Test“ | cut -d " " -f 7 | sort | uniq -c
4 /javascript/priklady/externi_skript.js
8 /robots.txt
Logy o kterých jsem psal nejsou odsud a vypadají tak jak jsem popsal. V březnu to byla pravda, ale teď už indexuje i klasické stránky.
Je to velmi zajímavé, ale dalo se to předpokládat. Google se snaží, aby byl lepší a lepší.
Díky Ti Jirko za informaci. Jsi v Českých krajích první, kdo to otestoval a publikoval. Tak je to správné: Napiš a publish. ;-)
Také musím Vaši snahu ocenit, ikdyž už jsem na zahraničním foru Abych viděl odkaz že je tato schopnost Googlu potvrzena. Zajímavé je že hlavní důvod proč to G. dělá asi není snaha si zvětšit index, ale zabránit machinacím v distribuci pageranku plus identifikovat weby které skrytě posílají návštěvníky do penalizovaných domén.
to s tim neexistujicim odkazem je nesmysl – staci ze tady byl nekdo s google toolbarem a uz o te strance google stejne vi, i bez javascriptu :-)
[5] Nicméně lze stejně vysledovat jaký robot si stránku přečetl, případně externí JS.
chci najit věštení s koule a asi to neegzistuje!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!