Generatore robots.txt
Configura le regole per i crawler del tuo sito e scarica il file robots.txt pronto all'uso.
Regole per User-agent
Preview robots.txt
# Il tuo robots.txt apparirà qui
FAQ
Domande frequenti
Dove va messo il file robots.txt?
Nella root del dominio: https://tuosito.com/robots.txt. Deve essere raggiungibile esattamente a quell'URL per essere riconosciuto dai motori di ricerca.
Bloccare una cartella con robots.txt la rende privata?
No! robots.txt è una convenzione; le pagine bloccate restano accessibili a chi conosce l'URL. Per sicurezza reale usa password o .htaccess. robots.txt dice ai crawler di non visitare quelle pagine, ma non le protegge dall'accesso diretto.
Cos'è il Crawl-delay?
Indica ai bot quanti secondi aspettare tra una richiesta e l'altra. Google lo ignora ma altri bot (come Bingbot e Yandex) lo rispettano. Utile per ridurre il carico sul server durante la scansione.
I miei dati vengono inviati a server esterni?
No. Tutti gli strumenti LYNK TOOLS funzionano interamente nel browser, senza inviare file o dati a server esterni. L'elaborazione avviene localmente sul tuo dispositivo: i tuoi file restano privati e non vengono mai caricati online.
