Comment traiter un robots.txt avec trop de restrictions pour Baidu ? #SEO

Bonjour tout le monde !

En effectuant ma veille informationnelle avec mon logiciel de veille automatique, je suis tombée sur un article offiicel de Baidu (pour débutants) qui explique comment traiter un robots.txt avec un nombre de restrictions élevées qui empêche le site d’être indexé dans Baidu. Vous pouvez le lire ici (et faire un Google Translate si nécessaire) :

网站误封Robots该如何处理

L’exemple récupéré par Baidu concerne le site 258 qui est bloqué par un robots.txt … oui et le nom de domaine n’est pas très optimisé ^^.

Les sites chinois utilisent souvent des chiffres pour leurs marques, domaines, mais cela a un sens : les sons phonétiques des chiffres sont parfois similaires à certains mots comme le site 57France, qui a le son de « Wu Qi » France (= 我去法国), mais je vous avoue qu’en termes de SEO, ce n’est pas la meilleure option !

En regardant les Webmaster Tools (capture ci-dessous), on voit que les pages sont toutes bloquées d’un seul coup !

Voici les étapes données par Baidu pour résoudre ce problème :

• Changer les Disallow du robots.txt en Allow
• Aller dans les Webmaster Tools de Baidu pour tester si le nouveau robots.txt marche
• Surveiller les temps de crawls de Baidu dans 抓取频次
• Rafraichir le sitemap du site pour que Baidu découvre les nouvelles URLs, etc.

Après 2 ou 3 jours, normalement les choses devraient revenir à la normal :

Une nouvelle fois, on constate que Baidu mentionne à nouveau le sitemap dans ses recommandations. C’est vraiment un élément primordial pour le SEO chinois. Il y a beaucoup de conférences, de concours sur le sitemap en Chine, et cela m’a un peu étonnée au début, mais maintenant je pense que c’est vraiment un must-have !

Si vous avez des questions liées au SEO chinois, une seule adresse mail à retenir : autoveille@gmail.com

Bon courage à tous !

Véronique Duong – Consultante SEO certifiée CESEO