Tester l'IA sur vos conversations WhatsApp : le protocole d'un pilote de six semaines

Sommaire

1. Semaine 0 : relever la ligne de départ
2. Choisir un périmètre étroit plutôt qu'une révolution
3. Semaines 1 et 2 : l'IA lit, elle n'écrit à personne
4. Semaines 3 et 4 : le brouillon validé par un humain
5. Semaines 5 et 6 : l'auto-réponse, dans un couloir fermé
6. Décider : trois issues honnêtes
7. Questions fréquentes

Tous les prestataires qui démarchent aujourd'hui un cabinet de courtage à Abidjan, à Douala ou à Dakar mettent « intelligence artificielle » sur leur première diapositive. La démonstration est toujours convaincante : elle se fait sur des messages propres, en français scolaire, sans photo de constat floue ni vocal de quarante secondes. La vraie question n'est donc pas de savoir si l'IA fonctionne en général, mais si elle fonctionne sur vos conversations, avec vos clients, vos branches et vos langues. Cela ne se devine pas en réunion : cela se mesure. Voici un protocole de pilote en six semaines, praticable par un cabinet de cinq à trente personnes, qui débouche sur une décision documentée plutôt que sur une impression.

Semaine 0 : relever la ligne de départ

L'erreur la plus fréquente consiste à brancher l'outil d'abord et à chercher ensuite si « ça va mieux ». Sans photographie de l'existant, une amélioration reste invérifiable et une dégradation passe inaperçue. Avant d'activer quoi que ce soit, consacrez une semaine ordinaire — ni celle des grosses échéances, ni une semaine de fête — à relever cinq indicateurs à la main.

Indicateur	Comment le relever sans outil	Ce qu'il révèle
Délai de première réponse	Sur 30 conversations tirées au hasard, l'écart entre le message du client et la première réponse humaine	Le point de comparaison le plus honnête : c'est lui que le client ressent
Messages restés sans réponse à 24 h	Comptage manuel sur trois jours	Le volume réellement perdu, presque toujours sous-estimé par l'équipe
Messages entrants par gestionnaire et par jour	Comptage sur cinq jours ouvrés	La charge que l'IA est censée soulager
Part des messages en langue mêlée ou en vocal	Classement rapide des 30 mêmes conversations	La part du flux sur laquelle l'outil sera le plus fragile
Part des demandes répétitives	Attestation, quittance, « où en est mon dossier ? » : comptage sur trois jours	Le gisement où un assistant est le plus utile et le moins risqué

Ces cinq chiffres sont votre référence. Ils ne coûtent qu'une semaine d'attention et ils vous éviteront, dans deux mois, une discussion de conviction contre conviction.

Choisir un périmètre étroit plutôt qu'une révolution

Un pilote qui couvre tout ne prouve rien. Fixez trois limites avant de commencer : un usage (les demandes de service répétitives sont le meilleur candidat, les sinistres corporels le pire), une équipe (deux ou trois gestionnaires volontaires, pas le cabinet entier), un numéro (le numéro officiel du cabinet, jamais un téléphone personnel). Écrivez ce périmètre sur une page, avec la date de fin du test. Un pilote sans date de fin devient un déploiement que personne n'a décidé.

Sur le choix de fond entre un automate qui répond à tout et un assistant supervisé, le comparatif entre chatbot et IA supervisée pose le cadre. Le présent article traite d'autre chose : comment vérifier, chez vous, ce que vous avez choisi.

Semaines 1 et 2 : l'IA lit, elle n'écrit à personne

Première phase, la plus instructive et la moins risquée : l'outil analyse les messages entrants et prépare des brouillons, mais rien ne part au client. Aucun assuré ne s'aperçoit du test. Vous, vous relevez trois choses.

1. La justesse du classement. Reprenez 30 messages entrants et comparez l'étiquette produite par l'outil (demande de service, opportunité commerciale, mécontentement, risque de départ) à votre propre lecture. Comptez les écarts. Un classement qui se trompe une fois sur trois n'est pas exploitable pour piloter des relances.
2. La qualité des brouillons. Pour chacun, notez : utilisable tel quel, utilisable après retouche, à jeter. C'est le seul indicateur qui prédit un vrai gain de temps.
3. Les erreurs qui coûtent cher. Tenez une liste à part : montant inexact, garantie inventée, nom ou numéro de contrat mélangés, délai promis. Une seule de ces erreurs envoyée à un client vaut dix brouillons réussis.

C'est aussi pendant ces deux semaines que la question des langues se tranche pour de bon. Un cabinet dont la moitié des messages arrivent en français mêlé de wolof, de nouchi ou de lingala doit mesurer la casse sur ces messages-là, séparément — le sujet est développé dans l'article sur ce que l'IA comprend vraiment des messages en langues locales.

Semaines 3 et 4 : le brouillon validé par un humain

Deuxième phase : les gestionnaires travaillent à partir des brouillons, les corrigent et les envoient. Rien ne part sans relecture. Deux mesures suffisent : le temps moyen de traitement d'une conversation, à comparer à la semaine 0, et le taux de brouillons modifiés avant envoi. Si le temps de traitement ne bouge pas alors que le taux de modification est élevé, l'outil ajoute une étape au lieu d'en retirer une. C'est un résultat, et il doit être écrit.

C'est également le moment de figer par écrit la liste des sujets qui ne seront jamais traités automatiquement, quelle que soit la suite du pilote : un montant de prime ou de franchise, l'étendue d'une garantie, un refus de prise en charge, un sinistre corporel, une réclamation, une demande de résiliation. Sur ces sujets, la seule bonne réponse d'un outil est de préparer un brouillon et d'alerter un humain. Le principe et ses raisons sont détaillés dans l'article sur l'IA qui prépare et trie pendant que l'humain décide.

Semaines 5 et 6 : l'auto-réponse, dans un couloir fermé

Troisième phase, facultative : autoriser l'envoi automatique sur le seul périmètre défini en semaine 0, et uniquement si l'outil sait poser des garde-fous vérifiables. Trois réglages sont non négociables avant d'ouvrir cette phase : un plafond de réponses automatiques par client, un délai minimal entre deux réponses automatiques, et une bascule systématique en brouillon dès que le message du client exprime du mécontentement. C'est le paramétrage retenu dans ORIS : les règles d'auto-réponse portent un compteur et un délai de latence, et un message au ton négatif produit toujours un brouillon assorti d'une notification, jamais un envoi. Les journaux d'audit gardent la trace de ce qui est parti automatiquement — ce que vous devrez pouvoir montrer si un client conteste un échange.

Pendant ces deux semaines, mesurez une chose de plus : le nombre de conversations reprises en urgence par un humain après une réponse automatique. Ce chiffre, et non le taux de réponse, dit si le couloir est assez fermé.

Décider : trois issues honnêtes

À la fin de la sixième semaine, réunissez les gestionnaires une heure, avec les chiffres de la semaine 0 en face de ceux du pilote. Trois décisions sont légitimes.

• Généraliser — le délai de première réponse a baissé, les brouillons sont majoritairement utilisables, aucune erreur coûteuse n'est partie. Étendez à une équipe puis à une branche supplémentaire, pas à tout d'un coup.
• Restreindre — l'assistance est utile en lecture (classement, priorisation, détection des clients qui décrochent) mais pas en rédaction. Gardez la première, coupez la seconde. C'est une issue fréquente et parfaitement satisfaisante : un score de risque d'attrition qui remonte les bons dossiers vaut déjà le déplacement.
• Arrêter — les erreurs sont trop nombreuses ou le gain nul. Vous aurez tout de même gagné trois choses qui restent : un fichier clients à jour, des consentements propres, et cinq indicateurs que le cabinet ne mesurait pas.

Quelle que soit l'issue, exportez les données du pilote et archivez-les avec la page de périmètre. Le jour où un dirigeant, une compagnie ou un contrôleur demandera comment le cabinet encadre l'usage de l'IA sur les conversations clients, cette poignée de documents vaudra mieux qu'un discours.

Questions fréquentes

Six semaines, n'est-ce pas trop long pour un petit cabinet ?

C'est au contraire la durée minimale pour voir passer un cycle d'activité complet : des échéances, un ou deux sinistres, une semaine calme et une semaine chargée. Un test de trois jours ne mesure que l'enthousiasme du démarrage. Le protocole, lui, ne demande que quelques heures de relevés par semaine, réparties sur deux ou trois personnes.

Faut-il prévenir les clients qu'une IA lit leurs messages ?

Oui, et c'est aussi une question juridique : dans la plupart des pays de la zone, la loi sur les données personnelles impose d'informer la personne des traitements réalisés sur ses données et de leurs destinataires. Une mention claire dans le message d'accueil du numéro du cabinet et dans la politique de confidentialité suffit à poser le cadre, à condition qu'elle soit exacte sur ce que fait réellement l'outil.

Que mesurer si l'objectif est commercial et non le temps de réponse ?

Ajoutez deux indicateurs à la semaine 0 : le nombre de demandes de devis nées d'une conversation entrante et le nombre de contrats renouvelés après relance. Attention au raccourci : sur six semaines, un cabinet observe des signaux, pas une preuve de causalité. Les effets commerciaux se lisent sur une campagne complète de renouvellements.

Peut-on mener le pilote sur le téléphone personnel d'un gestionnaire ?

Non. Un test mené sur un numéro personnel produit des résultats invérifiables, laisse les conversations hors du cabinet et se termine mal le jour du départ du collaborateur. Le pilote suppose un numéro professionnel connecté à la plateforme WhatsApp Business, qui est de toute façon le préalable de tout usage sérieux de la messagerie en cabinet.