Analizzatore File Robots.txt Gratuito Online
26 agosto 2011
I file robots.txt vengono creati dai webmaster per marcare quei file e quelle directory di un sito web che non si vuole rendere accessibili agli spider dei motori di ricerca o ad altri tipi di robot. Per saperne di più su come creare un file robots.txt, visita questo servizio online gratuito già citato in precedenza che, tra le altre cose permette di analizzare qualunque file robots.txt per vedere se è il file è valido secondo lo Standard per l’esclusione dei robot oppure se contiene errori.
| Sito Ufficiale |