Translations:Help:Robots.txt/2/de

Sie bestimmt, ob und wann die Webcrawler der Suchmaschinen die Seiten einer Website besuchen und in den Index der Suchmaschine aufnehmen können.