Todo apunta a que el error está en el archivo robots.txt
que has subido. Tiene que estar en el mismo nivel en el que se encuentre el archivo wp-config.php
. Una vez descartada esta posibilidad, comprueba que su contenido sea correcto. Si lo pegas aquí podremos ayudarte mejor a localizar el código erróneo.
Saludos
Quita el archivo robots.txt que has puesto. Salvo que sepas muy bien lo que estás haciendo, deja el robots.txt que genera WordPress. Este robots.txt generado por WordPress no existe de forma real, no lo verás entre los arvhicos de tu web ya que se crea «al vuelo», pero si pones un archivo de verdad, como has hecho, WordPress pierde esa capacidad de generar el robots.txt al vuelo.
Si necesitas modificar el robots.txt que genera WordPress, hazlo desde PHP con los filtros que WordPress pone a tu disposicíon. Por ejemplo:
add_filter( 'robots_txt', function( $output ) {
// Nueva línea que quiero añadir
$output .= "Disallow: /cgi-bin/\n";
return $output;
});
Pero nunca subas un archivo robots.txt de verdad a tu servidor (repito, salvo que sepas muy bien lo que haces) o dejarás a WordPress sin la capacidad de trabajar con robots.txt.
Y una vez que lo quites, tendrás que esperar un tiempo a que el índice de Google se actualice, no es algo inmediato.