Google et le crawl du javascript à bloquer ?

Accueil > Google et le crawl du javascript à bloquer ?

Google et Javascript

Il y a encore quelques années, le javascript n’était pas compris, ni lu par les robots des différents moteurs de recherche.
Les robots de comprenaient pas cette technologie qui était alors jugée de pseudo-néfaste au référencement de site web.
Menus et autres onglets dynamiques n’étaient pas parcourus et rendaient le crawl de certains liens et pages impossibles par les bots.

Désormais, chez Google (uniquement ?) la situation est différente : les robots sont capables de parcourir du javascript.
Ils le détectent, le comprennent et suivent ainsi les liens présents.
Cependant, pour certains acteurs du web, la question de laisser les robots parcourir cette technologie se pose.
Est-ce utile au référencement ?
Faut-il leur bloquer l’accès ?

Google recommande fortement de ne pas bloquer l’accès au Javascript !

En réponse à cette question du javascript qu’il faut ou non rendre explorable pas les robots, Google a fourni sa réponse.
C’est Matt Cutts qui, dans une vidéo, indique qu’il ne faut surtout pas bloquer l’accès au Javascript.
Cet accès, qui se gère via le fichier robots.txt doit laisser les bots parcourir ce type de code pour qu’il puisse ainsi explorer toutes les pages et tous les liens d’un site internet.
Une bien meilleure compréhension des sites en résulte, ce qui rendant l’indexation et le référencement des pages plus pertinente.
Par ailleurs, M. Cutts nous indique qu’il est préférable de bloquer localement l’accès à certaines lignes de ce code en utilisant l’attribut « nofollow ».
Ces derniers temps, Google fournit plusieurs recommandations relatives au seo.
Par l’intermédiaire de cette intervention, Google nous affirme clairement que le Javascript est crawlé et compris par les robots de Google. Cette technologie n’est plus nuisible au référencement des sites web et il est donc important de laisser les robots du moteur la parcourir !
Autrement, la situation pourrait se retourner contre vous, alors vérifiez votre fichier robots.txt !

Source : Youtube | Google Webmaster Help
+Marc Buchlin est l’auteur de cet article.