Hace poco incluí en una web un link para reportar enlaces rotos y al poco rato me encontré la tabla de log llena de avisos de enlaces rotos. Como no podía ser borré todo y agregé un campo donde guardar todas las cabeceras de los navegadores que entraban y limité a un máximo de clicks por ip. En seguida volvió a llenarse, el problema eran los bots que andaban rastreando la web.
Le puse un nofollow al link pero como si quieres arroz catalina, los bots seguían entrando. Así que empecé a no grabar datos de los bots más pesados. Esto me dió la idea de hacerlo al reves. He puesto un conjunto de 5 links 1 normal y 4 generados con javascript que solo se muestran a Googlebot.
Teoricamente Google es capaz de seguir los enlaces de javascript normales. Ahora solo hay que esperar a ver que enlaces son clickados por googlebot y cuales son ignorados.
Bueno pues Google no ha pulsado ninguno de los enlaces con javascript, ni los simples ni los complicados. Ha entrado muchas veces en los links normales pero no los de javascript.
Lo que ha resultado curioso es que hay otro boot rondando por el barrio y pese a que los links se le muestran únicamente al googlebot el consigue llegar a hacer clicks en los enlaces y escribir que la visita la hace: Mozilla/5.0 (compatible; AMZNKAssocBot/4.0) desde la ip 72.21.196.66 desde kentucky http://www.geoiptool.com/es/?IP=72.21.196.66
Si miras más sobre esta Ip resulta que en Ripe no dicen a quien está asignada :S En otros sitios he visto referencias a Amazon pero no puedo confirmarlas.
Artículos relacionados:
- Tremendo artículo sobre el valor de los enlaces Señor Muñoz ha hecho una “encuesta” entre los seos para ver cual es la opinion del sector sobre el valor de los enlaces. De todos...
- backlinks de dominios caducados y recomprados. Hace poco me encontré un dominio abandonado con una key bastante competida. Estaba navegando y al pulsar sobre la key que me gustaría estar posicionado...
- Los 200 criterios que usa google para elegir el orden de las páginas web Arranco este artículo con la intención de numerar los 200 criterios que usa Google para elegir la posición de los resultados. Este es un ejercicio...
- Relevancia en el posicionamiento de la extensión del dominio y los dominios con tilde [IDN] Con este test seo pretendo descubrir si los dominios con acento/eñe [IDN] posicionan mejor o peor que los dominios sin carácteres especiales y analizar la...
- ¿Afectan los tiempos de carga al posicionamiento en los resultados de búsqueda de Google? Los chicos de GoogleWebmaster-es nos traducen los videos de Matt!! El primero trata sobre como afectan los tiempos de carga al posicionamiento en el buscador....
mosqueante
He estado revisandolo y estoy seguro que el bot que se ha colado es amazon.
La url que ha visitado es la que yo he cargado para testear los links. así que imagino que su script dice: Anda me han cargado desde XXXX voy a ver que hay.