Wenn man alle Inhalte für alle User-Agents verbieten möchte, dann muss man folgenden Inhalt der Datei robots.txt hinzufügen:
User-agent: *
Disallow: /
robots.txt >
Alle Inhalte für alle User-Agents verbietenWenn man alle Inhalte für alle User-Agents verbieten möchte, dann muss man folgenden Inhalt der Datei robots.txt hinzufügen: User-agent: * Disallow: / |