Schlagwort-Archive: robots.txt funktioniert nicht mehr richtig

Bis vor zirka einem halben Jahr funktionierte die robots.txt noch so wie es sollte. Doch auf einmal wurden über die robots.txt gesperrte Seiten in den Google Index aufgenommen. Zwar ohne Titel und ohne Beschreibung, aber immerhin da. “Das kann nicht … Weiterlesen →