Konfigurieren Sie, welche Pfade Suchmaschinen-Bots auf Ihrer Website crawlen dürfen oder nicht.
Fügen Sie Sitemap-Verweise und benutzerdefinierte Disallow-Regeln in Sekunden hinzu.
Downloadfertige robots.txt-Ausgabe für Webmaster und SEO-Spezialisten.