L'IA pour l'analyse du NPS : lire tous les commentaires sans tous les lire

Pourquoi les commentaires NPS restent-ils sans réponse ?

Parce que le score est facile et les commentaires non. Un tableau de bord transforme 2 000 réponses en un chiffre en une seconde. Les commentaires qui se trouvent dessous prennent une journée entière à une personne chaque mois, et cette personne gère en général aussi la file de tickets.

Je travaille chaque jour dans la file de support d'eesel, et le schéma que je vois chez les équipes avec lesquelles je parle est toujours le même : le chiffre du NPS va dans la présentation mensuelle à côté des autres KPI de support, les commentaires vont dans un CSV que personne n'ouvre, et le détracteur qui a écrit trois paragraphes sur un remboursement raté n'a jamais de réponse. Bain, qui a créé le NPS, affirme clairement que « averages hide the detail that is most instructive » dans son article sur la boucle interne.

Un product manager sur Reddit a décrit la version manuelle mieux que je ne saurais le faire :

"Every week, I spend a couple of hours scanning user responses to open ended questions... I manually make notes of opportunities, big pain points and anything else that stands out, but I don't really have a great quantitative view to show for these."

How do you all analyze qualitative NPS data?, Reddit

Les outils d'enquête le savent aussi. SurveyMonkey retire son nuage de mots et renvoie vers Thematic Analysis, car un nuage de mots vous dit que « support » est revenu souvent sans vous dire si les gens l'ont adoré ou détesté.

L'IA règle le problème de lecture. Elle ne règle pas le problème de décision, et elle en crée un nouveau : un résumé soigné qui sonne juste sans l'être. Le reste de ce guide explique comment obtenir le premier sans le troisième.

Que peut vraiment faire l'IA avec les commentaires NPS ?

Cinq tâches, à peu près dans l'ordre où elles deviennent rentables :

1. Étiqueter les thèmes. Chaque commentaire reçoit une ou plusieurs étiquettes comme « facturation », « prise en main » ou « rapidité du support », même quand les clients emploient des mots différents pour la même chose. C'est de la classification de texte, la même tâche que l'étiquetage de tickets.
2. Évaluer le sentiment par thème, pas par commentaire. « Super support, application terrible » représente un positif et un négatif. Les outils qui ne donnent qu'une étiquette par commentaire en font une moyenne « mitigé » et vous perdez les deux signaux.
3. Répartir par groupe de score. Ce dont se plaignent les détracteurs est une liste différente de celle des passifs, et les passifs sont les moins coûteux à faire basculer.
4. Repérer l'évolution dans le temps. « Les plaintes sur la prise en main sont passées de 8 % à 21 % ce mois-ci » est la phrase qui déclenche une réunion.
5. Signaler les cas urgents. Un commentaire qui évoque une résiliation (un signal de risque de départ), une menace juridique ou un problème de sécurité doit arriver aujourd'hui à une personne, pas dans le rapport du mois prochain.

Ce que l'IA fait mal : décider de ce qui compte pour votre activité, savoir que « le nouveau forfait » désigne la hausse de prix de mars, et admettre qu'un thème est trop mince pour être rapporté. Cela reste votre rôle.

Qualtrics illustre bien l'idée du sentiment par thème. Dans sa documentation sur le sentiment de Text iQ, l'exemple « The service and the food were excellent, but everything was very overpriced » reçoit un score positif pour Service et un négatif pour Prix. Un commentaire, deux signaux opposés.

Pourquoi le score et le commentaire ne concordent-ils pas toujours ?

Parce que le score répond à « nous recommanderiez-vous » et que le commentaire répond à ce que le client avait envie de vous dire. Les deux se recoupent moins qu'on ne l'imagine, et les commentaires les plus utiles se trouvent là où ils divergent.

Deux quadrants méritent un coup d'œil chaque mois :

• Les promoteurs avec un problème. Un 10 qui dit « la facturation a planté deux fois » vous apprécie encore, pour l'instant. Ce sont des alertes précoces sur des clients que vous détesteriez perdre, et elles n'apparaissent jamais si vous ne lisez que les détracteurs.
• Les scores bas avec des mots aimables. « Super équipe, trop cher » est un problème de prix ou d'offre, pas de service. L'envoyer au responsable du support fait perdre sa semaine à tout le monde.

Et parfois le score ne veut rien dire du tout. Un customer success manager sur Reddit a interrogé un client sur une note moyenne :

"I've had customers give a 5 and then when asked about it, responded 'Oh... I love the software, I just wasn't taking this seriously when it popped up because I don't think anyone really does anything with these things, so when I saw it, I just put 5 because it's my favorite number.'"

u/UghWhyDude, Reddit

Un piège à connaître : certains outils déduisent le « sentiment » du score, pas du texte. La propriété Sentiment intégrée de HubSpot sur les réponses d'enquête, par exemple, est dérivée de la réponse de 0 à 10 (0-6 correspond à Détracteur), elle ne peut donc détecter aucun des deux quadrants ci-dessus. Gardez une colonne séparée pour ce que dit réellement le commentaire.

Comment analyser des commentaires NPS avec l'IA, étape par étape ?

Voici le déroulé que j'appliquerais pour une équipe qui reçoit de quelques centaines à un ou deux milliers de commentaires par mois. Il faut un tableur, un modèle d'IA approuvé par votre entreprise et environ une heure la première fois.

1. Exportez le score et le commentaire. Une ligne par réponse : un identifiant, le score, le commentaire, la date et un ou deux segments (forfait, région, canal). Retirez les noms et les e-mails avant que quoi que ce soit ne quitte votre outil d'enquête.
2. Rédigez d'abord la liste de thèmes. 10 à 15 thèmes, chacun avec une définition d'une ligne et une catégorie « autres ». Lisez 50 commentaires vous-même pour la construire. Laisser l'IA inventer les thèmes chaque mois, c'est « Problèmes de facturation » en septembre et « Problèmes de paiement » en octobre, et votre courbe de tendance se brise.
3. Étiquetez chaque commentaire. Demandez au modèle une ligne par commentaire : thèmes (plusieurs possibles), sentiment par thème et une courte raison. Un prompt qui tient la route :

You are tagging NPS survey comments. Use ONLY the themes below; if none fit, use "other".
A comment can have several themes. For each theme, give sentiment: positive, negative or mixed.
Return one row per comment: response_id | themes | sentiment per theme | one-line reason | urgent (yes/no).
Mark urgent only for cancellation, legal, safety or data-loss mentions.
Do not use the NPS score to decide sentiment. Read the text only. Never invent counts.

Themes:
- billing: charges, invoices, refunds, plan prices
- onboarding: setup, first week, getting started
- reliability: crashes, outages, bugs
- support speed: wait times, slow replies
- support quality: wrong answers, rudeness, great help
...

Envoyez les commentaires par lots de 50 à 100, pas tout le fichier d'un coup. Un développeur sur Hacker News a rencontré exactement ce problème :

"If I dump the whole spreadsheet into ChatGPT, I found that because of the context window, it can get 'lazy'; while with a local LLM, I could just literally prompt it one row at a time to accomplish my goal..."

alex43578, Hacker News

4. Vérifiez 50 lignes à la main. Choisissez-les parmi les détracteurs, les passifs, les promoteurs et tout ce qui est marqué « autres ». Si plus de quelques-unes sont fausses, corrigez les définitions de thèmes et relancez. C'est l'étape qui évite un rapport faux mais plein d'assurance.
5. Répartissez et comptez. Un tableau croisé dynamique thème par groupe de score donne l'image réelle : la part des détracteurs qui mentionnent chaque thème, et son évolution depuis le mois dernier.
6. Classez et attribuez un responsable. La fréquence seule trompe ; une plainte rare sur une perte de données l'emporte sur une demande courante de changement de police. Chaque thème principal reçoit un responsable et une date, sinon ce n'est qu'un CSV plus joli.

La même méthode fonctionne sur les tickets de support, ce qui comptera plus loin. Pour approfondir la liste de thèmes, mon guide sur l'analyse des retours clients par IA détaille davantage les codebooks.

Quelle configuration convient à votre volume de NPS ?

Le bon outil dépend surtout du nombre de commentaires que vous recevez et de l'endroit où ils se trouvent déjà. Choisissez votre volume mensuel :

Que proposent les outils d'enquête et de feedback pour l'analyse du NPS ?

La plupart des outils d'enquête embarquent désormais un peu d'IA sur le texte libre. La vraie ligne de partage, c'est de savoir si le sentiment est évalué par thème ou une seule fois par commentaire, et si l'on peut voir un prix avant un appel commercial.

Quelques détails derrière le tableau :

• Delighted a disparu. Beaucoup de petites équipes menaient leur NPS sur Delighted. Sa page indique désormais qu'il n'est plus disponible et renvoie vers Qualtrics ; si vous partez d'un export de cet outil, prévoyez la migration.
• Typeform exécute Smart Insights sur une copie privée du modèle Claude d'Anthropic et regroupe les sujets sous les onglets Positif, Négatif, Neutre et Mixte, avec jusqu'à trois citations par sujet. Il faut au moins 10 réponses et un compte en anglais, selon son article d'aide.
• SurveyMonkey qualifie chaque réponse de Positive, Neutre, Négative ou Non détectée, et son analyse de sentiment donne une étiquette par réponse. Bien pour une lecture rapide, plus faible pour les commentaires du type « super support, mauvaise appli ».
• Thematic indique fonctionner mieux avec au moins 2 000 lignes, et compte un avis, une réponse d'enquête ou un ticket de support comme un commentaire, ce qui convient aux équipes qui veulent le NPS et les tickets au même endroit.
• Gainsight exige plus de 20 commentaires, n'évalue le sentiment que sur les commentaires de 6 à 25 mots et s'exécute une fois par jour, d'après sa documentation sur l'analyse de texte.

Les outils d'entreprise apportent une chose qui vaut la peine d'être payée à grande échelle : relier les thèmes au score. La vue d'impact de Chattermill montre combien de points de NPS chaque thème vous coûte, une façon plus précise de classer les correctifs que les simples nombres de mentions.

Si vous comparez, mon comparatif des outils d'IA pour les retours clients va plus loin. Pour la méthode qui se cache derrière, voir mon guide sur l'analyse d'enquêtes.

Que fait déjà votre helpdesk des retours clients ?

Moins sur le NPS que vous ne l'espérez, plus sur les tickets. Sur les six helpdesks que j'ai examinés, seuls HubSpot et Salesforce documentent une IA qui résume les commentaires d'enquête. Zendesk, Freshdesk et Gorgias appliquent plutôt une analyse de sentiment par IA aux messages des tickets.

Les détails qui changent les décisions :

• Zendesk a indiqué « Net Promoter Score (NPS) » comme supprimé le 30 avril 2023. Son tri intelligent étiquette chaque ticket de Très positif à Très négatif et est « calibrated for customer service contexts », un ticket n'est donc pas négatif simplement parce que le client a un problème. Plus de détails dans mon guide sur le tri de tickets Zendesk par IA.
• HubSpot propose des enquêtes NPS, CSAT et CES dans Service Hub Professional et Enterprise, et Breeze peut résumer les réponses dès qu'il y en a au moins trois. C'est la configuration NPS plus helpdesk la plus complète de cette liste.
• Gorgias détecte l'intention et le sentiment sur chaque message entrant dans tous les forfaits. Sa propre solution suggérée pour « pourquoi le CSAT a baissé » est de connecter Claude ou ChatGPT via Gorgias MCP et de lui demander de regrouper par thème les tickets mal notés. Même l'éditeur réalise cette analyse en dehors du helpdesk.
• Freshdesk évalue le sentiment du dernier message de 0 à 100 et peut router en conséquence, dans le cadre du module Freddy AI Copilot.

Le constat : les helpdesks analysent les tickets, les outils d'enquête analysent les commentaires, et presque personne ne relie les deux. C'est l'écart que je comblerais en premier.

Pourquoi analyser les tickets de support en parallèle du NPS ?

Parce que le commentaire NPS vous dit combien de clients sont mécontents des remboursements, et le ticket vous dit lesquels, depuis combien de temps et ce que le client a déjà essayé. L'un est un titre, l'autre est l'histoire.

De là où je suis assis dans la file, c'est la partie que la plupart des guides sur le NPS manquent. Un détracteur qui écrit « le support est lent » dans une enquête a généralement déjà ouvert deux ou trois tickets. Ces tickets ont des horodatages, des numéros de commande, l'article d'aide lu et le moment exact où tout a déraillé. Le commentaire d'enquête est le résumé qu'il a rédigé après avoir renoncé.

Les équipes à fort volume le ressentent directement. Un responsable qui lisait chaque commentaire à la main a demandé de l'aide sur Reddit :

"We receive about 10,000 to 15,000 comments to read each month... We read every comment on our surveys, code them (with our coding) and then look for trends, things that bubble up, etc."

Customer surveys and AI, Reddit

Dans le même message, il disait que ce qu'il choisirait devait fonctionner avec son système de tickets Zendesk. C'est le bon réflexe.

Le principe est donc simple : utilisez une seule liste de thèmes pour les deux. Si « remboursements » veut dire la même chose dans vos étiquettes NPS et dans vos étiquettes de tickets, vous pouvez les mettre côte à côte :

• Le NPS dit que les remboursements sont le principal thème des détracteurs, en hausse de 6 points ce trimestre.
• Les tickets disent 300 tickets de remboursement par mois, la plupart sur les versements après un retour, et l'article d'aide correspondant date de deux ans, le genre de chose qu'une analyse des lacunes de connaissances repère.
• Vous savez maintenant quoi corriger, et le support peut mesurer si cela a marché avant l'envoi de la prochaine enquête.

C'est aussi là que se trouve le volume. Un moment d'appel commercial auquel je reviens souvent : un responsable CX d'une marque DTC de compléments alimentaires sur Gorgias, avec environ 7 000 tickets par mois, a contesté l'analyse par rapport mensuel lors d'un appel avec l'équipe d'eesel. Son argument, en gros : le client ne veut pas attendre un rapport mensuel. Le NPS est le rapport mensuel. Les tickets sont le flux en direct. Mon guide sur l'IA pour le reporting de support traite plus en profondeur du côté des tickets. Pour le recevoir chaque semaine dans vos boîtes mail, voir les alertes voix du client.

Comment eesel s'intègre-t-il à l'analyse du NPS ?

Posons d'abord la limite : eesel n'envoie pas d'enquêtes NPS et ne calcule pas votre score. Gardez votre outil d'enquête. Ce que fait eesel, c'est la moitié support du tableau, là où se créent la plupart des thèmes de détracteurs et où beaucoup sont corrigés.

eesel est un coéquipier IA de helpdesk qui travaille dans Zendesk, Freshdesk, Gorgias et d'autres helpdesks. Trois de ses fonctions s'appliquent au travail sur le NPS :

• Étiquetage à partir de votre propre liste. L'agent Zendesk peut lire les champs de vos tickets et leurs valeurs autorisées avant d'étiqueter, il utilise donc votre liste de thèmes, pas une liste inventée. smava l'exécute sur un Zendesk partagé pour deux marques : 27 000 tickets par mois, dont 14 600 catégorisés dans des champs Zendesk, en allemand. Rúngne le fait sur Gorgias, avec 880 tickets étiquetés par sujet « from a fixed list, nothing invented ».
• Rapports sur ce que les clients demandent sans cesse. La compétence Analyze ticket trends extrait « recurring topics, sentiment, volume and resolution patterns » de vos conversations, et un rapport de support hebdomadaire peut arriver dans votre boîte chaque lundi.
• Répondre aux questions récurrentes. Le détracteur le moins cher à corriger est celui dont la question n'a jamais eu besoin d'une personne. eesel y répond à partir de votre centre d'aide et des tickets passés, et transmet le reste. Plus de détails dans mon guide sur la déflexion des FAQ.

Ce rapport est le jumeau côté tickets d'un résumé de thèmes NPS : sujets, volumes, preuves et ce qu'il faut corriger en premier. Placez-le à côté de vos thèmes de détracteurs et le recoupement est généralement évident.

Si vous préférez l'exécuter depuis un terminal ou laisser un agent de code le piloter, la CLI eesel dialogue avec le même agent que le tableau de bord et affiche du JSON. eesel chat "analyze our ticket trends for last month" lance la compétence de tendances, eesel automations planifie un rapport et eesel files ls liste les rapports enregistrés. Et si vous voulez les commentaires d'enquête au même endroit, une automatisation par webhook accepte des données de Zapier, Make ou de votre propre backend, vous pouvez donc y envoyer des commentaires de détracteurs et faire étiqueter ou ouvrir un ticket par l'agent. C'est une configuration que vous câblez vous-même, pas une intégration NPS native.

Une limite honnête : le « CSAT par IA » d'eesel est une évaluation par une IA des réponses de l'agent, et sa documentation des rapports précise qu'il n'est « not a substitute for asking your customers ». C'est pourquoi je conserverais l'enquête.

Comment boucler la boucle avec les détracteurs du NPS ?

Bain distingue deux boucles, et l'IA aide à chacune de façon différente.

La boucle interne est une personne qui revient vers le client, vite. Pour Bain, dans son article sur la boucle interne, le rappel « can't be delegated to a third party or some central corporate group ». Le rôle de l'IA ici est le tri : signaler les commentaires urgents (résiliation, juridique, perte de données) et les acheminer aujourd'hui vers la bonne personne. La réponse elle-même relève d'un humain, et un responsable CS sur Reddit a placé la barre plus haut que la plupart des équipes :

"First, never reach out via email to someone dropping a zero (or anything below your target # for NPS). Call and keep calling or in a normal circumstance show up in person."

u/pj1897, Reddit

Qualtrics rédige désormais des réponses IA aux retours d'enquête et ouvre des tickets dans Zendesk, ServiceNow ou Salesforce, comme le montrent ses workflows de bouclage.

La boucle externe consiste à corriger la cause. La boucle externe de Bain part de « all inner loop feedback » et cherche des « patterns, trends and changes in frequency », ce qui est exactement le travail d'étiquetage de thèmes décrit plus haut. Le résultat est une courte liste de correctifs, chacun avec un responsable.

L'exemple le plus net d'une telle boucle que je puisse citer est un client d'eesel, une entreprise d'automatisation industrielle. Une note figure sous chaque réponse de son chat de documentation, et un résumé régulier est envoyé à l'équipe documentation avec ce qui a été demandé, les réponses mal notées et les lacunes de connaissances. Les lacunes vont directement dans le backlog de documentation. Remplacez « chat de documentation » par « enquête NPS » et vous avez la boucle externe qui tourne chaque semaine plutôt que chaque trimestre.

Pour le côté tickets du bouclage, commencez par mon guide sur la prévention du churn par IA. Si le thème est celui des réclamations, voir l'IA pour les réclamations clients.

Quelles erreurs éviter ?

Celles que je vois le plus, à peu près par ordre de dégâts :

• Laisser l'IA choisir de nouveaux thèmes chaque mois. Votre courbe de tendance repart à zéro à chaque fois. Rédigez la liste une fois et complétez-la volontairement.
• Rapporter des pourcentages sans vérifier un échantillon. Un modèle qui étiquette mal 15 % des commentaires produit quand même un graphique propre. Vérifiez 50 lignes avant que quoi que ce soit n'entre dans une présentation.
• Confondre sentiment et score. Un 9 peut décrire un bug grave. Lisez les quadrants d'écart.
• Classer uniquement par fréquence. Cinq commentaires sur des données perdues l'emportent sur cinquante sur la couleur d'un bouton.
• Importer des commentaires bruts avec noms et e-mails. Retirez d'abord les données personnelles et vérifiez les conditions de données de votre fournisseur d'IA. SurveyMonkey, par exemple, indique que sa Thematic Analysis s'appuie sur des modèles d'Anthropic et d'OpenAI qui ne s'entraînent pas sur vos données ; votre propre configuration doit être tout aussi claire.
• Analyser le NPS dans une pièce qui ne parle jamais au support. Les correctifs de nombreux thèmes de détracteurs se trouvent dans la file, derrière votre tri de tickets. Voir mes notes sur la construction d'un programme voix du client qui inclut les deux.

Essayer eesel pour le côté support du NPS

Si vos thèmes de détracteurs pointent toujours vers les remboursements, les réponses lentes ou « je n'ai pas trouvé comment faire X », ce sont d'abord des problèmes de tickets. eesel rejoint votre helpdesk comme un nouveau coéquipier : il étiquette chaque ticket à partir de votre propre liste de sujets, répond aux questions récurrentes à partir de votre centre d'aide et des tickets passés, et envoie chaque semaine un rapport sur ce que les clients demandent sans cesse, pour que le correctif soit livré avant l'envoi de la prochaine enquête. smava lui fait catégoriser 14 600 tickets Zendesk par mois.

Les forfaits démarrent à 299 $/mois pour 500 crédits, avec les rapports inclus dans chaque forfait, selon la page des tarifs, et vous pouvez d'abord l'essayer gratuitement sur vos propres tickets passés. Essayer eesel.