Cómo controlar un Google Bot

El robot de Google es la herramienta algorítmica utilizada por Google para indexar la Web. El programa busca en Internet para el contenido nuevo y actualizado, descargando todo lo que encuentra al índice de Google para que los usuarios pueden buscar rápidamente la base de datos de Google para los sitios web que cumplen con su consulta. Los webmasters pueden controlar cómo Googlebot índices de su sitio web en una variedad de maneras. La forma más sencilla de interactuar con el robot de Google es implementar un archivo de exclusión de robots en su página web que instruye el robot de Google para excluir ciertos archivos o directorios de la indexación. También puede controlar el robot de Google mediante el uso de las Herramientas para webmasters de Google, un servicio que le permite tasas de índice del acelerador y presentar un mapa del sitio para la indexación más eficiente.

Instrucciones

Los robots de exclusión de archivos

1 Haga clic en "Inicio", escribe "Bloc de notas" en el cuadro de búsqueda en la parte inferior del menú, a continuación, pulse "Enter".

2 Copia y pega el código siguiente para formar la base de su archivo de exclusión de robots:

Agente de usuario: *

3 Desactivar la indexación de ciertos directorios o tipos de archivo por el robot de Google y otros motores de búsqueda mediante el modelado de su código después de los siguientes ejemplos. Cada comando debe añadirse, uno por línea, después de la inicial "User-Agent: *" código:

No permitir: / música /

No permitir: /*.gif$

4 Haga clic en "Archivo" y seleccione "Guardar como". Guarde el archivo como "robots.txt" y subirlo al directorio raíz de su sitio web. Googlebot y otros rastreadores de motores de búsqueda seguirán las instrucciones dadas por este archivo.

Herramientas para webmasters de Google

5 Navegue a Herramientas para webmasters de Google (ver referencias) e inicie sesión con sus credenciales de la cuenta de Google.

6 Haga clic en "Añadir un sitio."

7 Haga clic en "Descargar el archivo HTML de verificación" para guardar el archivo en su ordenador, a continuación, cargar el archivo en el directorio raíz de su sitio web y haga clic en "Verificar" para confirmar que usted es el propietario del sitio web.

8 Selecciona tu web de la sección "Sitios".

9 Seleccione "Configuración" de la sección "Configuración" de la barra lateral izquierda.

10 Haga clic en el botón de opción al lado de "frecuencia de rastreo personalizada Ajuste" y ajuste el control deslizante de acuerdo a sus preferencias de frecuencia de rastreo.

11 Seleccione "Mapas del sitio" de la sección "Configuración" de la barra lateral izquierda.

12 Haga clic en el botón "Enviar un mapa de sitio" para guardar una ubicación en mapa del sitio con Google que Googlebot puede utilizar para indexar su sitio web rápidamente.