Bloquer SemrushBot, AhrefsBot et les scrapers concurrents

Ces robots crawlent votre site en continu pour alimenter les outils de vos concurrents — sans jamais vous envoyer un seul visiteur. Voici comment les couper proprement.

TL;DR

Ouvrez Livada SEO → Accès Bots IA.
Section Scrapers SEO : SemrushBot, AhrefsBot, MJ12bot, DotBot sont bloqués par défaut.
Vérifiez que les cases sont bien sur Bloquer, enregistrez.
Lancez le diagnostic live pour confirmer.

Pourquoi bloquer ces robots

SemrushBot, AhrefsBot, MJ12bot ou DotBot ne sont ni des moteurs de recherche, ni des IA de citation. Ce sont les robots d'outils SEO commerciaux : ils crawlent votre site pour construire des bases de backlinks et de mots-clés revendues à vos concurrents.

En échange, ils ne vous apportent aucun visiteur. Sur un site à fort volume de pages, ils peuvent représenter une part non négligeable de la charge serveur. Les couper, c'est de la bande passante et du CPU rendus à vos vrais visiteurs — sans aucun impact sur votre référencement Google ni sur votre visibilité IA.

✓ Bloquer un scraper SEO n'enlève rien à votre SEO. Google, Bing et les IA de citation (ChatGPT, Claude, Perplexity) sont des bots différents, gérés dans d'autres sections.

Ouvrir « Accès Bots IA »

Dans le menu WordPress : Livada SEO → Accès Bots IA. La page regroupe tous les robots en sections claires, dont une dédiée aux Scrapers SEO.

Vous y retrouvez notamment : SemrushBot, AhrefsBot, MJ12bot (Majestic) et DotBot (Moz).

Vérifier qu'ils sont bloqués

Bonne nouvelle : par défaut, Livada SEO bloque déjà les principaux scrapers SEO. Vérifiez simplement que les interrupteurs de la section sont bien sur Bloquer, puis enregistrez.

Concrètement, le plugin ajoute pour chaque scraper une règle explicite dans votre robots.txt (et, selon votre config, un blocage applicatif). Aucune manipulation de fichier à la main.

Confirmer avec le diagnostic live

En haut de la page, lancez le diagnostic live. Le plugin teste chaque bot avec son vrai user-agent et affiche le statut renvoyé par votre site.

Scrapers SEO → 403 = bien bloqués ✓

Bots Citation IA → 200 = toujours visibles ✓

Quand NE PAS les bloquer

Un seul cas : si vous-même utilisez Semrush ou Ahrefs pour auditer votre propre site (audit technique, suivi de positions). Dans ce cas, autorisez temporairement le bot concerné le temps de l'audit, puis re-bloquez. Pour la grande majorité des sites vitrines et e-commerce, le blocage permanent est le bon choix.

Bloqué sur une étape ?

L'Assistant Livada connaît la doc entière et répond en français, 24/7.

Demander à l'Assistant Doc complète « Accès Bots IA »

Continuer avec un autre tutoriel

Voir tous les tutoriels →