Robots.txt Generator

Robots.txt Generator

Predefinito: tutti i robot sono:	Permesso rifiutato
Crawl-Delay:	Predefinito - Nessun ritardo 5 Seconds 10 Seconds 20 Seconds 60 seconds 120 Seconds
Mappa del sito: (lascia vuoto se non hai)
Cerca robot:	Google	Lo stesso di Default Permesso rifiutato
	Google Image	Lo stesso di Default Permesso rifiutato
	Google Mobile	Lo stesso di Default Permesso rifiutato
	MSN Search	Lo stesso di Default Permesso rifiutato
	Yahoo	Lo stesso di Default Permesso rifiutato
	Yahoo MM	Lo stesso di Default Permesso rifiutato
	Yahoo Blogs	Lo stesso di Default Permesso rifiutato
	Ask/Teoma	Lo stesso di Default Permesso rifiutato
	GigaBlast	Lo stesso di Default Permesso rifiutato
	DMOZ Checker	Lo stesso di Default Permesso rifiutato
	Nutch	Lo stesso di Default Permesso rifiutato
	Alexa/Wayback	Lo stesso di Default Permesso rifiutato
	Baidu	Lo stesso di Default Permesso rifiutato
	Naver	Lo stesso di Default Permesso rifiutato
	MSN PicSearch	Lo stesso di Default Permesso rifiutato
Directory ristrette:	Il percorso è relativo a root e deve contenere una barra finale "/"

Ora crea il file "robots.txt" nella tua directory principale. Copia sopra il testo e incollalo nel file di testo.

Di Robots.txt Generator

Creating a Robots.txt is easy now with the help of Robots.txt Generator. This online tool is important for creating robot.txt files to instruct web robots. 

It is fast, free, and easy to use. You can create your own robot.text files in seconds. 

 

How to use Robots.txt Generator? 

To create Robots.txt files using Robots.txt Generator:

• Determine whether you allow or refuse Default - All Robots.
• Choose the Crawl-Delay
• Sitemap: (leave blank if you don't have) 
• Determine Search Robots wanted
• Determine the Restricted Directories
• Click Robots.text or Create and save as Robots.text