Title: Errores habituales utilizando “noindex” y el Robots.txt en WordPress Author: alexserramar Published: 26 de octubre de 2023 Last modified: 25 de octubre de 2023 --- España * [Temas](https://es.wordpress.org/themes/) * [Plugins](https://es.wordpress.org/plugins/) * [Noticias](https://es.wordpress.org/news/) - [Documentación](https://es.wordpress.org/support/) - [Foros](https://es.wordpress.org/support/forums/) * [Acerca de](https://es.wordpress.org/about/) * [Patrones](https://es.wordpress.org/patterns/) * [Eventos](https://events.wordpress.org/upcoming-events/filtered/country/ES/) - [Equipo](https://es.wordpress.org/team/) - [Manuales](https://es.wordpress.org/team/handbook/) * [Consigue WordPress](https://es.wordpress.org/download/) [ Consigue WordPress ](https://es.wordpress.org/download/) [Noticias](https://es.wordpress.org/news/) Errores habituales utilizando “noindex” y el Robots.txt en WordPress 26 de octubre de 2023 Por [alexserramar](https://profiles.wordpress.org/alexserramar/) # Errores habituales utilizando “noindex” y el Robots.txt en WordPress --- No vengo a descubrir ahora que **WordPress ayuda mucho a optimizar una web para posicionarla mejor**. Facilita implementar el SEO. Tampoco seré el primero que advierte que los plugins de SEO no hacen SEO por ti, pero como digo, facilitan bastante implementar acciones que pueden repercutir positivamente. Algunas de las acciones que podemos hacer en WordPress, y que se suelen hacer mediante plugins SEO es marcar una página con “noindex” a través de su etiqueta _meta robots_ o bien utilizar el robots.txt para bloquear o permitir el acceso a ciertas partes de la web. Y esas dos acciones tienen sentido para SEO, pero **hay que saber utilizarlas** porque se pueden cometer errores, que suelen ser habituales además. ## En primer lugar, ¿qué implica “noindex”? Empecemos por lo básico. Existe la etiqueta _meta robots_, la cual encontramos en el de una página y ésta puede hacer que los motores de búsqueda indexen o no páginas concretas en los resultados de búsqueda (las SERPs). Aspecto de una etiqueta _meta robots_: `` Dentro de la etiqueta meta robots podemos indicar diferentes reglas, siendo las más habituales: * **index:** por defecto es la que suele formar la etiqueta _meta robots_ junto con “follow”. De esta forma un motor de búsqueda** indexará** la página siempre y cuando cumpla con una serie de requisitos, porque **una página indexable no siempre se tiene por qué indexar** (pero de eso hablamos otro día). * **noindex:** protagonista de este post. Hace lo contrario a la anterior, le estamos diciendo a Google u otro motor de búsqueda que** no indexe esa página**. Lo que introducimos en la etiqueta _meta robots_ es una directiva, por lo que Google obedece y no la indexa, y en el caso de que la página estuviera indexada y hemos cambiado su estado a “noindex”, la desindexará más pronto que tarde (aunque en ocasiones sean varias semanas). * **follow:** le decimos a los motores de búsqueda que sus bots sigan los enlaces que hay en esa página, es decir, que vayan a las páginas que hay en dichos enlaces, internos o externos. * **nofollow:** lo contrario a la anterior.  Quiero profundizar un poco más en el “noindex” y en qué hacen los bots a grandes rasgos cuando se encuentran con este caso. Para poder ver que una página tiene “noindex” debe **poder acceder a esa página**, es decir, a su código para llegar a la etiqueta _meta robots_. Una vez comprueba que es “noindex follow”, por ejemplo, el bot seguirá rastreando los enlaces (por el “follow”) pero **no indexará la página.** Y repito, para poder desindexar la página o bien no indexarla de inicio, debe poder acceder a ella. ## El uso del Robots.txt Vamos con el coprotagonista de este post, el robots.txt He adelantado al comienzo del post que el robots.txt puede **bloquear el acceso** de los motores de búsqueda a ciertas partes de una web, o bien dar acceso.  No voy a detenerme en cómo funciona un robots.txt, te dejo [esta documentación de Google](https://developers.google.com/search/docs/crawling-indexing/robots/intro?hl=es) en el que lo explican. Cuando en un archivo robots.txt bloqueamos el acceso mediante la regla disallow conseguimos que un bot **no acceda a esa URL o directorio**.  Tengamos en cuenta que un _user-agent_ puede rastrear cualquier página por defecto que no esté bloqueada mediante disallow. Lo que conseguimos bloqueando el acceso a una página es que Google o cualquier otro motor de búsqueda **no emplee recursos ni tiempo de rastreo en ella. ** A veces lo hacemos por cuestiones SEO, como optimizar el rastreo para que vaya a lo realmente importante para la web y el negocio. En otras ocasiones por cuestiones técnicas o de seguridad. Podemos pensar que si el disallow consigue que Google no acceda a una página, ésta no puede indexar, porque para que haya indexación primero debe rastrearse, ¿verdad? Correcto, pero el **robots.txt tiene limitaciones**. Lo más importante es reconocer que el robots.txt no es una herramienta para evitar la indexación, sino para evitar rastreos. Una página que está bloqueada por robots.txt y que a su vez está enlazada desde otra web **puede ser rastreada** desde esa referencia y si la página es **indexable**, se puede indexar. Limitas el rastreo, pero no la indexación en este caso. ## La mala combinación del robots.txt y el “noindex” en la etiqueta meta robots Ahora que entendemos el funcionamiento básico tanto de la etiqueta_ meta robots_ como del archivo robots.txt y la regla disallow, abordemos el error habitual. Te voy a plantear una pregunta: ¿qué ocurriría si marco una página con “noindex” en el _meta robots_, y a su vez bloqueo su rastreo mediante disallow en el robots. txt?  Es lícito pensar que esa página **no se indexará** y en efecto, es probable que no se indexe, pero **no estamos haciendo lo correcto.** Una página que está marcada con “noindex” y a su vez está bloqueada en el robots. txt mediante disallow **puede llegar a indexar** o bien no desindexarse si venimos de una página que lo estaba previamente. ¿Por qué? Porque para que un bot sepa que una página tiene “noindex” en el _meta robots_** tiene que poder acceder a su HTML**, cosa que no puede hacer si marcamos la URL con disallow en el robots.txt Y el resultado de esto es que una página que queremos desindexar no se desindexe o tarde más de la cuenta. Es habitual ver como ciertas páginas o secciones de una web se marcan como no indexables a la vez que se bloquean mediante robots. Cuando quieras limitar el rastreo por cualquier motivo: robots.txt Cuando quieres no indexar una página: “noindex” en el _meta robots_. Podríamos pensar en para qué queremos que Google rastree una página que no se indexa. Eso da para otro post, pero por resumir; puede que dentro de esa página haya **enlaces que sí queremos que Google rastree**, y para ello un “noindex follow” ayuda, y claro, que se rastree esa página y sus enlaces. **Otra opción **que se puede dar por válida, es bloquear mediante disallow una página o directorio que ya lleva tiempo desindexado, además de estar marcado con “noindex”. Raro sería que se indexara de nuevo. Como ves, son varias las aristas de la posible combinación y usos tanto del robots.txt como del “noindex”, pero si quieres asegurarte de** hacer las cosas correctamente**, este es el camino (“this is the way”). ### Compártelo: * [ Facebook ](https://es.wordpress.org/2023/10/26/errores-habituales-utilizando-noindex-y-el-robots-txt-en-wordpress/?share=facebook) * [ X ](https://es.wordpress.org/2023/10/26/errores-habituales-utilizando-noindex-y-el-robots-txt-en-wordpress/?share=twitter) * [ Correo electrónico ](https://es.wordpress.org/2023/10/26/errores-habituales-utilizando-noindex-y-el-robots-txt-en-wordpress/?subject=%5BEntrada%20compartida%5D%20Errores%20habituales%20utilizando%20%E2%80%9Cnoindex%E2%80%9D%20y%20el%20Robots.txt%20en%20WordPress&body=https%3A%2F%2Fes.wordpress.org%2F2023%2F10%2F26%2Ferrores-habituales-utilizando-noindex-y-el-robots-txt-en-wordpress%2F&share=email) ## Una respuesta a «Errores habituales utilizando “noindex” y el Robots.txt en WordPress» 1. ![Avatar de Yordan Soares](https://secure.gravatar.com/avatar/c854810e0b49aa59ba86c0e670c7cc847dfc3b6cb94528b4459d2a572cea82c1? s=40&d=mm&r=g) 2. [Yordan Soares](https://profiles.wordpress.org/yordansoares/) 3. [26 de octubre de 2023](https://es.wordpress.org/2023/10/26/errores-habituales-utilizando-noindex-y-el-robots-txt-en-wordpress/#comment-301547) 4. Muy bien explicado, Álex. No había pensado sobre la mala combinación de ‘disallow’ + ‘noindex’, pero tiene mucho sentido. Gracias por el dato 😉 ### Deja una respuesta Lo siento, debes estar [conectado](https://login.wordpress.org/?redirect_to=https%3A%2F%2Fes.wordpress.org%2F2023%2F10%2F26%2Ferrores-habituales-utilizando-noindex-y-el-robots-txt-en-wordpress%2F&locale=es_ES) para publicar un comentario. [Anterior State of the Word 2023 – Apunta esta fecha](https://es.wordpress.org/2023/10/20/state-of-the-word-2023-apunta-esta-fecha/) [Siguiente WordCamp Madrid 2023: WordPress, a lo grande](https://es.wordpress.org/2023/10/27/wordcamp-madrid-2023/) ## Categorías * [Accesibilidad](https://es.wordpress.org/category/accesibilidad/) (4) * [Actualizaciones](https://es.wordpress.org/category/actualizaciones/) (217) * [Código](https://es.wordpress.org/category/codigo/) (7) * [Comunidad](https://es.wordpress.org/category/comunidad/) (30) * [copywriting](https://es.wordpress.org/category/copywriting/) (2) * [Edición](https://es.wordpress.org/category/edicion/) (4) * [Equipos](https://es.wordpress.org/category/equipos/) (5) * [General](https://es.wordpress.org/category/general/) (164) * [Mantenimiento](https://es.wordpress.org/category/mantenimiento/) (49) * [Marketing](https://es.wordpress.org/category/marketing/) (3) * [Meetup](https://es.wordpress.org/category/meetup/) (25) * [Plugins](https://es.wordpress.org/category/plugins/) (5) * [Redacción](https://es.wordpress.org/category/redaccion/) (3) * [Seguridad](https://es.wordpress.org/category/seguridad/) (63) * [SEO](https://es.wordpress.org/category/seo/) (3) * [Traducciones](https://es.wordpress.org/category/traducciones/) (26) * [WordCamp](https://es.wordpress.org/category/wordcamp/) (73) * [WordPress TV](https://es.wordpress.org/category/wordpress-tv/) (2) ## Suscribirse Escribe tu correo electrónico… * [Acerca de](https://es.wordpress.org/about/) * [Noticias](https://es.wordpress.org/news/) * [Alojamiento](https://wordpress.org/hosting/) * [Privacidad](https://es.wordpress.org/about/privacy/) * [Escaparate](https://wordpress.org/showcase/) * [Temas](https://es.wordpress.org/themes/) * [Plugins](https://es.wordpress.org/plugins/) * [Patrones](https://es.wordpress.org/patterns/) * [Aprender](https://learn.wordpress.org/?locale=es_ES) * [Soporte](https://es.wordpress.org/support/) * [Desarrolladores](https://developer.wordpress.org/) * [WordPress.tv ](https://wordpress.tv/) * [Involúcrate](https://make.wordpress.org/) * [Eventos](https://events.wordpress.org/) * [Donar ](https://wordpressfoundation.org/donate/) * [Regalos ](https://mercantile.wordpress.org/) * [WordPress.com ](https://wordpress.com/?ref=wporg-footer) * [Matt ](https://ma.tt/) * [bbPress ](https://bbpress.org/) * [BuddyPress ](https://buddypress.org/) [ España ](https://make.wordpress.org/polyglots/teams/?locale=es_ES) The WordPress® trademark is the intellectual property of the WordPress Foundation. * [Visita nuestra cuenta de X (anteriormente Twitter)](https://www.x.com/WordPress) * [Visita nuestra cuenta de Bluesky](https://bsky.app/profile/wordpress.org) * [Visita nuestra cuenta de Mastodon](https://mastodon.world/@WordPress) * [Visita nuestra cuenta de Threads](https://www.threads.net/@wordpress) * [Visita nuestra página de Facebook](https://www.facebook.com/WordPress/) * [Visita nuestra cuenta de Instagram](https://www.instagram.com/wordpress/) * [Visita nuestra cuenta de LinkedIn](https://www.linkedin.com/company/wordpress) * [Visita nuestra cuenta de TikTok](https://www.tiktok.com/@wordpress) * [Visita nuestro canal de YouTube](https://www.youtube.com/wordpress) * [Visita nuestra cuenta de Tumblr](https://wordpress.tumblr.com/) El código es poesía.