no entiendo bien esta linea en los logs

Cuando realizas una busqueda en google, msn, etc, etc, cualquier buscador en
definitiva, puedes encontrar las cosas facilmente porque previamente (hay
mas formas) un "robot" de estos buscadores se ha encargado de leer todo el
contenido de los distintos sitios web y luegos los ha indexado.
Esa entrada de log indica que un bot de MSN esta buscando el fichero
robots.txt para saber si puede "mirar" dentro de tus sitios web.
El fichero robots.txt tiene una estructura definida en la que puedes
especificar si esta permitido que los bots accedan, que robots se permiten,
limites de tu sitio en el que pueden buscar, etc, etc
Busca en google por robots.txt y encontraras toda la informacion necesaria.

Un saludo.
Ivan
MS MVP ISA Server


"jose" escribió en el mensaje
news:

Buenos dias:

Revisando los logs, he encontrado esta linea que no acabo de tener muy
clara, y no me da buena espina, a ver si alguien me puede ayudar y decirme
que es:


65.54.188.x, anonymous, msnbot/0.3 (+http://search.msn.com/msnbot.htm), N,
11/1/2004, 6:23:53, W3ReverseProxy, SERVER, -, www.MIPAGINAWEB.COM,
192.168.2.X, 80, 0, 156, 4340, http, TCP, GET,
http://192.168.2.X/robots.txt,
text/html, Inet, 404, 0x40000000, MIDOMINIO, -

Gracias.