Quiero hacer un subdirectorio (/*/) y hacer un listado de todos los artículos en la raíz de acceso público, como home del subdirectorio. Ese listado sobrepasa los recomendados 100 links internos (de hecho bastante más) ya que lista todos los artículos en forma de biblioteca alfabetizada (que son muchos más y no vienen ramificados en diferentes URLS). Lo veo más usable para el usuario que listar estilo blog porque sale como información itinerante, incluso mejor que ramificado estilo árbol (como los directorios al uso).

Quiero que se indexen los artículos, que es lo más importante, pero no me interesa indexar el contenido que los lista (archive) dado que es demasiado largo y se asemeja a una granja de links (aunque inbound).

Ahora bien, si añado nofollow a la lista de artículos estaría indicándole a Google que los elementos children no son suficientemente importantes. Si añado noindex al archive page estaría condicionando también los sub-elementos y tendría que crear asociaciones sobre el parent y el children en el robots.txt. Si no pusiera nofollow repartiría un juice superfluo.

¿Qué solución le véis? Por ahora he optado por:

User-agent: *
Allow: /
Allow: /raiz/elementos/
Disallow: /raiz/
Disallow: /raiz/*?

Posted By: Corso

Posted By: EROSALIANZASi añado noindex al archive page estaría condicionando también los sub-elementos y tendría que crear asociaciones sobre el parent y el children en el robots.txt.

No entiendo el problema del noindex.:: el roce hace el dominio ::

Me preocupa que haciendo noindex en la raíz el rastreo no pase de ahí a nivel de indexación SEO a pesar de lo listado en sitemap o que pueda bajar el rank por la relevancia del parent.

¿Esas páginas individuales sólo reciben enlaces internos desde esa página índice?:: el roce hace el dominio ::

En teoría debería de pasar... no deshabilita directorios recursivamente en ningún momento.
Creo que no hace falta repetir el user agent.

COCK AND BALL TORTURE

Yo lo dejaría que lo indexara tal cual, cuanto menos noindex metas en tu web mejor, no te preocupes por que sobrepase los 100 links, si por eso Google va a devaluar ese listado es gallo de otro corral, pero no afectas ni al valor de los enlaces internos ni al rastreo natural de tu web, encima si no los tienes enlazados desde otro lugar y es el único enlace que Google va a encontrar aparte del sitemap, no veo el sentido de ponerle un noindex o intentar quitarte de encima ese listado por presuntas penalizaciones SEO que no creo que tengas ni evaluadas ni contrastadas. Otra cosa sería que me dijeras que vas a hacer mil páginas de listados así con esa cantidad de inbound links... entonces ya habría que pensárselo.

Eso no deja de ser un sitemap en html por lo que comentas, salvo que sean miles de páginas con esos listados y muy desproporcionadas al resto del contenido de tu sitio, no debería perjudicarte para nada, solo beneficiarte.