Google indicizza il robots.txt

Qualche settimana fa ho notato alcune anomalie da parte di Google nell'indicizzazione delle pagine. In molte SERP, al posto dei titoli, comparivano parole assurde, a volte addirittura il DOCTYPE della pagina.

Oggi ho notato un altro aspetto altrettanto assurdo!

Google indicizza il robots.txt

Google indicizza il file robots.txt analizzandolo come semplice testo. Non solo, anche il suo è in SERP: allinurl:/robots.txt.
Strano, non è per nulla un comportamento normale...