Tecnología

Inicio

Cómo incrustar una tela de araña de secuencias de comandos

Siempre que se inicia una página web, arañas web (también conocido como arañas de los motores de búsqueda) rastrear automáticamente las páginas del sitio. Esto permite a los motores de búsqueda para indexar su sitio web en la base de datos del motor de búsqueda. El problema con las arañas web es que a veces el índice voluntad araña su sitio antes de que se terminó el diseño de la misma. La araña también puede añadir páginas web que no desea incluir en los resultados de búsqueda. La buena noticia es que mediante la incorporación de un simple script HTML, puede bloquear páginas web específicas de las arañas.

Instrucciones

1 Iniciar sesión en el "Panel de control" de su sitio web.

2 Haga clic en "Directorio de archivos" para acceder a todos sus archivos y carpetas de página. Anote el nombre de cada carpeta que desea bloquear de arañas web. Por ejemplo, las imágenes de la carpeta, la carpeta de documentos y la carpeta de inicio.

3 Haga clic en "Nuevo" para crear un nuevo archivo de paginación. El nombre del nuevo archivo de página "robots.txt". Haga clic en "Guardar".

4 Haga clic en el archivo de paginación "robots.txt" dentro del directorio de archivos. Seleccione "Editar" para iniciar el editor HTML de la página.

5 Busque el "<head>" y "</ head>" etiquetas dentro de la ventana del editor HTML.

6 Pegue el siguiente código HTML en cualquier lugar entre las dos etiquetas de la cabeza. El código indica arañas web no acceder a sus imágenes, documentos o carpetas de inicio. Vuelva a colocar los nombres de las carpetas con sus propios nombres de las carpetas. Siéntase libre de agregar más carpetas según sea necesario.

Agente de usuario: *
No permitir: / images
No permitir: / documentos
No permitir: / home

7 Haga clic en "Guardar" para guardar los cambios de página.