Jede vierte große deutsche Website sperrt mindestens einen KI-Crawler, knapp jede fünfte sogar einen Such- oder Antwort-Crawler. Das zeigt die Auswertung der robots.txt von 870 der 1.000 meistbesuchten .de-Domains. Vieles davon dürfte unbeabsichtigt sein. Wer jetzt in einen Imagefilm, ein Erklärvideo…