moteur de recherche , bots , xml

Catégories:

Bonjour à tous

Voilà , depuis quelques temps j’observe les sites et la façon dont les bots les scannent . Le probléme est que sur de trés gros sites , les bots peuvent prendre plusieurs giga de bande passante par jour .

Je suis débutant en la matiére . Mais , ne serait t’il pas mieux de redirigé les bots vers une archive sitemap xml . Pour éviter les ralentissements du site et économisé la bande passante .

Vous en pensez quoi ? Est-ce une bonne idée ?

Cordialement

#

Bonjour,

En général, on peut déjà commencer par optimiser son site.
Le fichier robots.txt est très pratique pour exclure les pages inutiles. Il est déjà configuré pour Drupal, mais des modules complémentaires peuvent générer des pages qui n’ont pas besoin d’être vu par les bots.

Je pense que c’est déjà un bon début. Pour la suite, gros site veut dire gros service d’hébergement…

Cordialement.

Sites web sous Drupal.
http://creation-site.arthur-com.net

#

Bonjour

Merci de votre réponse . Auriez-vous des voies ou conseils pour avoir un site optimisé ? svp

Cordialement

Syndiquer le contenu