Meta: noindex oder doch index?
Mir sind in letzter Zeit ein paar Seiten aufgefallen, die trotz entsprechender Metatags (< meta name="robots" content="noindex" >) von Google in den Index aufgenommen wurden. Allerdings scheint die Suchmaschine das Tag auch nicht generell zu ignorieren. Bisher konnte ich noch keine Logik in dem Verhalten von Google ausfindig machen. Allerdings ergibt sich daraus ein weiteres nutzloses Metatag, sollten Google und Konsorten diese Seiten dauerhaft in die SERPs aufnehmen.
Außerdem kann damit dann nicht mehr zuverlässig die eigene Präsenz in den Suchmaschinen gesteuert werden.
Die sicherste Variante bleibt also doch duch die robots.txt die Crawler von Seiten fern zu halten, die sie nichts angehen, obwohl die Metatags in diesem Fall ja das gleiche leisten sollen. Hat jemand ähnliches Verhalten beobachtet?
