Programas por lionheart

Esta herramienta de análisis .txt robots puede verificar fácilmente el contenido de "robots.txt" de un servidor web arbitrario (archivo que especifica el comportamiento en el servidor para el robot del motor de búsq