Generator robots.txt

Przygotuj robots.txt z regułami User-agent, Allow i Disallow oraz adresem mapy witryny. Sprawdź dozwolone i blokowane ścieżki.

Przetwarzanie w przeglądarce: dane nie są przesyłane.

Ustaw dane

Ustaw dane

Wpisz robota i ścieżki. Upewnij się, że reguły nie blokują potrzebnych stron ani zasobów. robots.txt nie zabezpiecza danych i nie jest uwierzytelnianiem. Nie gwarantuje usunięcia URL z wyników wyszukiwania.

Wynik

Tutaj pojawi się wynik.

Liczymy użycie narzędzi bez wprowadzonych wartości i zawartości plików w statystykach. Prywatność

Jak korzystać z narzędzia

  1. Możesz podać domenę z www lub bez niego oraz dodać ścieżkę i parametry. Jeśli pominiesz protokół, zostanie użyty HTTPS.
  2. Wpisz robota i ścieżki.
  3. Upewnij się, że reguły nie blokują potrzebnych stron ani zasobów.
  4. robots.txt nie zabezpiecza danych i nie jest uwierzytelnianiem.
  5. Nie gwarantuje usunięcia URL z wyników wyszukiwania.

Praktyczny przykład

Dane wejściowe
  • User-agent: *
  • Dozwolone ścieżki (jedna na wiersz): /
  • Blokowane ścieżki (jedna na wiersz): /private/
  • URL mapy witryny (opcjonalnie): https://example.com/sitemap.xml
Wynik
User-agent: * Allow: / Disallow: /private/ Sitemap: https://example.com/sitemap.xml

Ograniczenia i kontrola

Ograniczenia i kontrola
ParametrWartość
Dozwolone ścieżki (jedna na wiersz)≤ 5000000 znaków
Blokowane ścieżki (jedna na wiersz)≤ 5000000 znaków

Źródła i dalsze informacje

Ulubione