googlebot y sus visitas...

¿Seguro que es el Googlebot?

Yo tuve un problema parecido con el Slurp! de Yahoo (me indexaba una y
otra vez los PDF hasta "chuparse" casi todo el ancho de banda) y me vi
forzado a restringirle el acceso a este tipo de archivos.

Nota: si cambia a menudo el contenido del sitio web el bot lo visita más
a menudo. Revisa si tienes directivas de "no-cache" en las páginas, eso
puede influir para que el bot estime su contenido ha cambiado.

Saludos!

Miguel

Luciano A. Ferrer escribió:

Tienen idea si googlebot le hace caso al meta tag revisit after?
en un sitio tuve que ponerlo, en 7 días... voy a ver si funciona...

el asunto es que no sé por qué razón al parecer googlebot está pasando MUY
seguido
un sitio de 20mb, este mes googlebot se ha descargado 600mb... tan
interesante será el contenido?
buf...


Luciano A. Ferrer