Translations:Help:Robots.txt/18/de

[Erforderlich, eine oder mehrere pro Gruppe] Die Direktive gibt den Namen des automatischen Clients an, der als Suchmaschinen-Crawler bekannt ist und für den die Regel gilt. Dies ist die erste Zeile für jede Regelgruppe. Die Namen der Google User Agents sind in der [$googlelink1 Google Liste der User Agents] aufgeführt. Wenn du ein Sternchen verwendest, werden alle Crawler mit Ausnahme der verschiedenen AdsBot-Crawler berücksichtigt, die explizit genannt werden müssen.