Przejdź do treści

Generator robots.txt

Darmowy generator robots.txt online. Ustaw reguły pozwolenia/blokady dla botów wyszukiwarek i URL mapy witryny. Niezbędne dla SEO. Przetwarzane w przeglądarce.

Generator robots.txt to darmowe narzędzie online, które łatwo tworzy pliki robots.txt do kontrolowania dostępu robotów wyszukiwarek. Ustaw reguły Allow/Disallow, adresy URL map witryny i opóźnienia indeksowania. Przetwarzanie w przeglądarce, bez przesyłania na serwer — całkowicie za darmo, do zarządzania możliwością indeksowania Twojej witryny.

Szablony
User-Agent
Opóźnienie indeksowania
URL mapy strony
Wynik
User-agent: *
Allow: /
lock Pliki nie są wysyłane na żaden serwer

Jak używać Generator robots.txt?

  1. Wybierz user agenta (robota).
  2. Ustaw reguły ścieżek Allow i Disallow.
  3. Dodaj adres URL mapy witryny i skopiuj wygenerowany plik robots.txt.

Najczęściej zadawane pytania o Generator robots.txt

Czym jest robots.txt?

robots.txt to plik tekstowy umieszczany w katalogu głównym witryny, który informuje roboty wyszukiwarek, które strony mają indeksować, a które pomijać.

Czy robots.txt może całkowicie ukryć strony przed wynikami wyszukiwania?

Nie. robots.txt kontroluje jedynie indeksowanie — strony mogą nadal pojawiać się w wynikach wyszukiwania, jeśli są do nich odnośniki z innych witryn. Aby całkowicie je usunąć, użyj metatagu noindex.