Generatore robots.txt

Crea un file robots.txt con un gruppo user-agent, percorsi esclusi dalla scansione e una sitemap facoltativa.

Sul tuo dispositivo · Senza account

Generatore robots.txt elabora i dati inseriti in questo browser. Dati inseriti e risultati sono esclusi dalle analisi statistiche. Gli strumenti recenti memorizzano i nomi degli strumenti, il numero di visite e la data e l'ora dell'ultima visita. Gli strumenti salvati memorizzano solo i nomi. Il salvataggio delle bozze è facoltativo e avviene su questo dispositivo; elimina il testo salvato con i comandi della bozza. Caricare testo da un URL è facoltativo e contatta il relativo server, che può vedere l'URL e il tuo indirizzo IP. L'azione facoltativa “Usa in” conserva in questa scheda i dati da passare allo strumento successivo. Lo strumento successivo li rimuove all'apertura e li ignora se è trascorso più di un minuto.

“Copia link” include nell'indirizzo i dati che scegli di condividere. Chiunque abbia il link può riaprirli. File e risultati generati sono esclusi. Gli strumenti per password e chiavi condividono solo le impostazioni.

Italiano

Percorsi da escludere, uno per riga

Altre opzioni

User-agent

URL della sitemap (facoltativo)

Risultato

Altro

Scorciatoie da tastiera

Link e ripristino

I link includono i dati inseriti e le impostazioni. Chiunque abbia il link può vederli, quindi non inserire testi privati. I file e i risultati generati sono esclusi; le estrazioni casuali vengono ripetute.

Il ripristino ricarica lo strumento con i valori iniziali e rilascia i file aperti e il controllo dei dispositivi. Le bozze salvate restano su questo dispositivo finché non le elimini.

Come funziona

Il generatore robots.txt scrive un solo gruppo user-agent e verifica la sintassi dei percorsi prima dell'esportazione. Una lista Disallow vuota lascia la scansione senza restrizioni per l'agente selezionato.

Successivo: Generatore di meta tag

Esempio

Una riga Disallow per /private/ chiede ai crawler corrispondenti di non richiedere percorsi con quel prefisso.

Prima di usare il risultato

Il file robots.txt è pubblico e il suo rispetto è volontario. Non protegge i file privati né garantisce la rimozione dai risultati di ricerca. Pubblicalo nella radice del sito; il controllo degli accessi e le direttive di indicizzazione sono decisioni separate.

Cita questa pagina

Stile di citazione

ToolOctopus. “Generatore robots.txt.” Aggiornato 7 ottobre 2026. https://tooloctopus.com/it/generatore-robots-txt.

Aggiungi la data di consultazione se le istruzioni che segui la richiedono.

Le citazioni sono formattate con citeproc-js di Frank Bennett e gli stili Citation Style Language. Licenza e codice sorgente.