Inicio » SEO » Cómo crear y configurar el archivo Robots.txt para WordPress

Cómo crear y configurar el archivo Robots.txt para WordPress

por | Oct 16, 2017 | SEO, WordPress | 0 Comentarios

¿Desconoces totalmente todo acerca de cómo crear y configurar el archivo Robots.txt para WordPress? Si la respuesta a esta pregunta es afirmativa, entonces va siendo hora de que sepas cómo hacerlo. ¡Cosa que podrás descubrir a continuación! Sigue leyendo y aprende todo lo que necesitas para llevar tu sitio web hasta un nuevo nivel de popularidad. ¡Todo gracias al archivo Robots.txt!

Aspectos a considerar antes de configurar el archivo Robots.txt para WordPress

Antes de entrar tocar el tema de la modificación del archivo Robots.txt, se deben tomar en cuenta varios aspectos. Uno de ellos podría ser el que hace referencia a los robots de búsqueda. ¿Qué son estas cosas realmente?

Un robot de búsqueda no es otra cosa que un software encargado de rastrear páginas web. Esto, con el fin de encontrar cosas específicas de las mismas que la diferencien del resto de las páginas. ¡Esta clase de robot es lo que usa  Google para encontrar y mostrar resultados de búsqueda!

Son muy versátiles esta clase de robots que también indexan información de nuestra web en otras páginas similares. Esto, con el fin de ganar mucho más posicionamiento en el internet. Se debe recordar que el internet es un lugar basto donde existen cientos de miles de millones de páginas web. También, que se ha convertido en el medio de comunicación más utilizado a nivel mundial. ¡Sencillamente no es fácil posicionarse en internet!

En lo antes dicho queda plasmada la importancia de estos bots para cualquier plataforma que necesite posicionarse rápidamente. Ahora bien, ¿cómo se hace para alterar, crear o modificar esta clase de programas? Pues con el ya mencionado archivo de nombre Robots.txt. El mismo, no es más que un archivo de texto con toda la información que los robots necesitan para buscar. ¡Con este archivo puedes manejar ese robot para que trabaje a tu beneficio!

En resumidas cuentas, el archivo robots.txt sirve para:

  • Bloquear el acceso de los robots a las zonas prohibidas de tu plataforma.
  • No permitir que se indexe archivos duplicados.
  • Prohibir que los robots rastreen URLs ya eliminadas.
  • Mejorar la indexación de tu web y colocar la misma en el panorama de los cibernautas.

¡Sí que es útil modificar este archivo!

Pasos para crear y configurar el archivo Robots.txt para WordPress

Con lo antes dicho en mente, se pueden citar entonces los siguientes pasos para crear y modificar el archivo Robots.txt. Dichos pasos se encuentran enlistados a continuación:

  • Para crear el archivo Robots.txt solo debes:
    1. Abrir el bloc de notas.
    2. Guardarlo con el nombre de Robots.txt.
    3. Subirlo al directorio raíz de tu dominio. ¡Eso es todo! Puede usar Filezilla para llevar a cabo este último paso.
  • Para modificar el archivo Robots.txt solo debes:
    1. Buscar tu archivo robots.txt y descargarlo a tu computador. Esto puedes hacerlo tanto por cPanel o por FTP.
    2. Una vez obtenido el archivo, deberás ingresar toda serie de parámetros útiles al mencionado archivo para que funcione correctamente. Entre estos parámetros puedes encontrar:
      • El parámetro Allow, el cual permite el acceso a una zona específica del directorio.
      • El parámetro Disallow, el cual bloquea el acceso a una zona específica del directorio.
      • El parámetro Sitemap, capaz de indicarte a los robots donde está el mapa del sitio XML.
      • El parámetro User-agent, el cual concreta a qué tipo de robot va dirigido el o los parámetros.
    3. Sube el archivo de nuevo a tu plataforma y ya estará listo.

¡No es tan difícil como creías, ¿o sí?! La clave ahora es determinar qué aspecto modificar y qué no. La mejor manera de hacerlo es obteniendo mucha más practica en el tema y perspicacia en general. Aunque, también puedes acudir a la ayuda de herramientas SEO que te hagan el trabajo mucho más fácil y seguro.

Entre las herramientas SEO antes mencionadas destaca la que se conoce como el plugin Yoast SEO. El mismo, te puede ayudar en varios aspectos técnicos que tienen que ver con tu página web. ¡No hace falta ser un experto para lograr posicionarse en internet!

Ten presente siempre que el internet es una red muy competitiva y que no es fácil sobrevivir en ella. Tienes que valerte de todo lo que esté a tu alcance para superar los obstáculos y lograr esa aclamada popularidad. ¡Todo depende de ti ahora para lograr esa meta tan particular!

El Robots.txt perfecto para WordPress

Pero si lo que quieres es coger un modelo estándar, te dejamos el robots.txt perfecto para WordPress. Solo tendrás que copiarlo y subirlo a tu web.

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-login
Disallow: /wp-admin
Disallow: //wp-includes/
Disallow: /*/feed/
Disallow: /*/trackback/
Disallow: /*/attachment/
Disallow: /author/
Disallow: /*/page/
Disallow: /*/feed/
Disallow: /tag/*/page/
Disallow: /tag/*/feed/
Disallow: /page/
Disallow: /comments/
Disallow: /xmlrpc.php
Disallow: /*?s=
Disallow: /*/*/*/feed.xml
Disallow: /?attachment_id*
Sitemap: http://tudominio.com/sitemap.xml

1 Star2 Stars3 Stars4 Stars5 Stars (4 votes, average: 4,00 out of 5)

Cargando…

Los mejores themes de WordPress

Divi WordPress Theme

Hosting Recomendado

Consigue ahora un 20% de DESCUENTO introduciendo el código "gracias20"

servidores wordpress

Adsense

SEO Wolf Newsletter

Suscríbete a nuestra Newsletter

Únete a nuestra lista de correo para recibir las últimas noticias y actualizaciones de nuestro equipo.

Gracias por suscribirse