Böse Falle: Unsichtbares Zeichen in URL
Grmpf, mein WTF-Moment für heute abend waren zwei URLs, die identisch angezeigt, aber vom robots.txt-Analysator in den Google-Webmaster-Tools unterschiedlich bewertet wurden (die eine mit "Blocked", die andere mit "Syntax not understood").
Die Lösung: Eine der beiden enthielt ein nur im Quellcode sichtbares Zeichen: Das Unicode-Zeichen "LEFT-TO-RIGHT MARK" (U+200E) (als HTML-Entity: ‎)
Trackback URL for this post:
http://ich.war-es-wirklich.net/trackback/185