Cómo bloquear Yandex bot desde su sitio
Me di cuenta de los registros de su servidor Web que Yandex
Bot (un robot) analizar mi sitio con una gran
banda. En mi caso somos algo más de 2 GB por
día y sinceramente a los rusos para mi sitio
me parece poca cantidad.
Yandex es el buscador más utilizado en Rusia,
sólo creo que aproximadamente el 75% de las
búsquedas es suyo; así que mira este robot de bloqueo porque
hacerlo le excluiría visibilidad hacia Rusia. En mi caso no me
importa porque no creo que los rusos estén interesados en mi
Blog, como está escrito sólo en español.
Para bloquear este robot el más rápido y
correcto son utilizar el archivo robots.txt en el directorio
raíz de su anfitrión:
# The following allows all robots to visit all files
User-agent: Yandex
Disallow: /
Con esto hemos evitado que este Robot tenga
acceso a nuestro sitio Web, por supuesto, este método es
válido para otros robots como Yandex, sólo
cambiar el nombre de robots que desea excluir del
robot tartessos.