Llevo un tiempo dándole vueltas a restringir el acceso a Actual World Reader en el robots.txt para todos los robots de los buscadores. Veo cantidad de visitas que entran directamente buscando algo que no se ha tratado en el blog. El problema es que Googlebot y los demás, ven el lector de feeds como texto plano, es decir, todo desplegado, y los visitantes cuando entran y lo ven, la mayoría salen despavoridos sin saber por qué les ha mandado allí el buscador. Perderé visitas en estadísticas totales, pero es que esas visitas a mí no me interesan, porque no sirven de nada. Otra razón es que desde que ha pasado el robot hasta que el visitante entra, pueden haber pasado 5-6 días, por lo que al ser una página que cambia diariamente su contenido, no tiene ninguna lógica. ¿Qué haríais?
Comentarios
Una respuesta a «Restringir acceso en robots.txt»
Yo las restringiría porque lo interesante no es que lleguen muchas visitas, sino que lleguen visitas que puedan obtener una información de tu blog y no de rebote. Te invito a mirar mi archivo robots.txt y verás el monton de páginas que tengo restringidas, demasiadas quizá, pero así me libro de visitas que no valen de nada.