Google rastrea el robots.txt a diario
Leo en seroundtable que Google solo comprueba una vez al día el robots.txt de algunos sitios web, así le responde JohnMu, trabajador de Google, a un usuario.
Con esta respuesta queda claro que Google sí rastrea el robots.txt todos los días y en muchos casos varias veces al día. Yo puedo asegurar que el googlebot está contínuamente visitando algunascosas.com.
Google rastrea robots.txt
También te puede interesar...
- Vulnerabilidad en MySQL
- Google genera el 6% del tráfico de Internet
- La calle del software libre
- Cloud Computing. Y eso qué es?
- Google. Búsquedas visuales!
Si te ha gustado este post, haz un comentario ó suscríbete a nuestro feed y mantente informado de nuestros nuevos post.
