Tag: Googlebot
Bots
by admin on Mrz.16, 2009, under Netzwelt
Da der Googlebot zu meinen Besuchern zählt, welcher ca. alle 6 Stunden
die Seite indexiert, hab ich mal geschaut, was noch so an Bots die Seite Scannen:
Ein Bot fehlt noch, welcher wohl von awStats nicht als solcher erkannt
wird:
ec2-xx-xxx-xx-xxx.compute-1.amazonaws.com
Außer dem Googlebot und dem W3C, ist mir bisher noch keiner der Bots bekannt.
Die Webseiten, auf die man kommt, nach einer kleinen Recherche, lassen wohl auf Statistikpages und
sonstige Datensammelstellen schließen.
