Help > Forum > Moteurs de recherche > Pourquoi certaines pages sont-elles bloquées dans le fichier robots.txt ?

Pourquoi certaines pages sont-elles bloquées dans le fichier robots.txt ?

Le fichier robots.txt que nous avons spécifié est optimisé pour assurer le classement le plus élevé possible dans les moteurs de recherche. Il indique aux moteurs de recherche de ne pas indexer certaines pages qui auraient un impact négatif sur le placement dans les moteurs de recherche. Par exemple, les pages avec très peu de contenu (comme la page Composer un nouveau sujet), les URL légèrement différentes qui pointent vers le même contenu (cela serait compté comme un contenu en double par les moteurs de recherche) et les pages transactionnelles réservées aux membres (comme suivre un sujet, modifier votre profil, etc.). Cela garantit que les moteurs de recherche voient principalement les pages hautement pertinentes et riches en contenu de votre forum afin qu'il classe votre forum plus haut dans les résultats de recherche.

Les autres pages répertoriées dans le fichier robots.txt sont des pages privées qui ne sont accessibles qu'aux membres connectés. Il n'est pas possible pour les moteurs de recherche d'accéder à ces pages de toute façon. En les limitant au niveau robots.txt, il augmente votre classement avec le moteur de recherche car il ne continue pas à voir la page de connexion, pensant que votre forum n'a pas beaucoup de contenu de haute qualité. Il réduit également les pages vues inutiles générées par le moteur de recherche, ce qui finirait par coûter de l'argent et n'entraînerait pas un meilleur positionnement du moteur de recherche ou une meilleure diffusion d'annonces de toute façon (puisque la page de connexion n'est pas prise en compte par le moteur de recherche).

Les réseaux publicitaires contextuels, comme Google Adsense, préfèrent également ne pas utiliser les pages contenant peu ou dupliquées pour le ciblage contextuel des annonces. Notre fichier robots.txt garantit que seules les pages hautement pertinentes sont utilisées pour la publicité contextuelle afin que les annonceurs préfèrent la publicité sur votre forum, ce qui entraîne une augmentation des revenus à long terme.

Le fichier robots.txt pour votre forum peut être vu ici.


If you still need help, please contact us.