Archivio

Posts Tagged ‘Analizzatore File Robots.txt’

Analizzatore File Robots.txt Gratuito Online

26 agosto 2011

Analizzatore File Robots.txt Gratuito Online

I file robots.txt  vengono creati dai webmaster per marcare quei file e quelle directory di un sito web che non si vuole rendere accessibili agli spider dei motori di ricerca o ad altri tipi di robot. Per saperne di più su come creare un file robots.txt, visita questo servizio online gratuito già citato in precedenza che, tra le altre cose permette di analizzare qualunque file robots.txt  per vedere se è il file  è valido secondo lo Standard per l’esclusione dei robot oppure se contiene errori.

Sito Ufficiale |

»crosslinked«