Les bots peuvent-ils parcourir les éléments de la "case à cocher" qui servent de filtre pour les produits?
Par exemple, mon site contient une liste de produits, avec une boîte à filtres qui vous permet de les cibler par prix, fonctionnalités, etc. une longue URL), puis indexer cette URL?
Ils peuvent suivre ce type de filtres mais pas s'il s'agit de formulaires. Quant à AJAX, ils ne sont généralement pas suivis, mais cela est possible mais rarement par accident!
Toutefois, s’il s’agit de liens, cela peut générer un nombre excessif et presque infini d’URL, ce qui risque de semer la confusion parmi les robots et d’empêcher l’indexation de pages importantes, car ceux-ci verraient davantage d’URL à analyser.
Google Webmaster Tools vous permet de spécifier comment chaque paramètre rencontré est utilisé. C'est un bon endroit pour voir ceux qu'ils ont déjà explorés. Regardez sous Configuration -> Paramètres URL.
L'option qui vous intéresse est la suivante: Yes: Changes, reorders or narrows page content que vous pouvez spécifier pour chacun de vos paramètres de filtre. Ensuite, vous pouvez dire à Google de décider quoi faire, d’indexer très peu une variation, une seule ou aucune. Par exemple, vous pouvez les laisser indexer un seul ordre de tri.