# Qualification

Cette section vous permet d'analyser le taux conversations en échecs par [la qualification des conversations ](#qualification-des-conversations)ou bien le taux d'incomprehension par [la qualification des interactions](#qualification-des-interactions). Vous trouverez de nombreux graphiques pour vous aider à observer la qualification de vos conversations et interaction dans cette rubrique. 

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2FNLq7CWCnJdxRonstxdQq%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.33.25.png?alt=media&#x26;token=896b060b-f19e-4bb8-bb0e-8fbdccebd74a" alt=""><figcaption></figcaption></figure>

## Qualification des conversations&#x20;

### **Qualification des conversations**

Les conversations ainsi que les interactions qui les composent sont classées en 3 catégories en fonction de leur qualification. Les 3 catégories de qualification sont les suivantes :

* **Uniquement réponses directes:** la conversation se compose seulement de questions/réponses directes. Cela signifie que le bot a su comprendre toutes les questions et y apporter les réponses ;
* **Terminant par une réponse directe :** au cours de la conversation, il peut y avoir une reformulation de la question ou une incompréhension mais la conversation se termine par une réponse directe ;
* **En échec :** la conversation se termine par une question incomprise ou sur une proposition de formulations et l'internaute n'a cliqué sur aucune d'elles.

Les deux premières catégories sont considérées comme des conversations réussies.  L'évolution de la répartition des conversations au cours du temps reflète l’entraînement du bot.&#x20;

La page des statistiques de qualification présente donc la répartition des conversations et des interactions par type de qualification.  Au clic sur une des statistiques, les détails pour cette dernière sont affichés.

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2F1iLhJm5uzvKw1UWF6YSv%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.29.55.png?alt=media&#x26;token=bb211b9a-6f22-4911-8e2e-eccbb86c95d0" alt=""><figcaption></figcaption></figure>

### Qualification des conversations avec contacts fournis

Lors de la création d’une connaissance, si la réponse renseigne un contact extérieur au bot il est possible de spécifier le type de contact fourni, cela permet de connaître la solution alternative proposée aux utilisateurs selon la qualification. Ainsi, il est possible de connaître, parmi le pourcentage d'échecs, ce qui a été proposé aux internautes qui n'ont, a priori, pas eu leur réponse par le biais du bot et qui ont donc été redirigé vers un autre type de contact qui pourra les renseigner.

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2FPDPgo0IWafnJrVmeUOpd%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.30.01.png?alt=media&#x26;token=4fa0da00-b6e0-459d-987a-89d5f2d723ff" alt=""><figcaption></figcaption></figure>

### Qualification des conversations selon le nombre d'interactions

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2Fjq4TdYtL1prW4ryeWKuO%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.30.09.png?alt=media&#x26;token=14a5fdd9-5b15-49bb-b360-c1ba68cfb085" alt=""><figcaption></figcaption></figure>

### Qualifications des conversation selon le nombre d'interactions ( en %)

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2FygViTZJpLiWesNY22ftX%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.30.15.png?alt=media&#x26;token=086853f9-9aa6-4e90-b2c9-3e256c8735b5" alt=""><figcaption></figcaption></figure>

### Qualification des conversations par navigateur

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2Fy0ogHSaBXW82gN2WiF5k%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.44.02.png?alt=media&#x26;token=7572ea65-30b4-4c94-b1ea-7729d110e505" alt=""><figcaption></figcaption></figure>

## Qualification des interactions

Pour la qualification des interactions, il est possible d’obtenir dans le BMS plusieurs détails :\
le **type d’interactions** avec la probabilité de l’interaction suivante, la **qualification des interactions en fonction de la longueur des phrases**, ainsi que la **qualification selon le nombre de mots par question**.

La qualification par interactions repose sur l’analyse de l’ensemble des interactions enregistrées, à l’exception de celles issues de **conversations de test ou de qualification**, qui sont systématiquement ignorées.

Certaines interactions sont également exclues du calcul, notamment celles qui correspondent à des **connaissances ignorées dans les statistiques**. Toutes les autres interactions sont ensuite **réparties dans 14 catégories**, chacune correspondant à un type précis d’événement ou de traitement :

* CHART\_BUSINESS\_MATCH (0)
* CHART\_PROTOCOL\_MATCH (1)
* CHART\_DISABLED\_KNOWLEDGE (2)
* CHART\_REWORD (3)
* CHART\_OUT\_OF\_SCOPE (4)
* CHART\_GARBAGE (5)
* CHART\_CLICKED\_REWORD (6)
* CHART\_NO\_INTERACTION (7)
* CHART\_OPERATOR (8)
* CHART\_OTHERS (9)
* CHART\_CLICKED\_REDIRECTION\_LINK (10)
* CHART\_PUSH (11)
* CHART\_CLICKED\_REWORD\_AUTO (12)
* CHART\_CLICKED\_JAVASCRIPT\_LINK (13)

Seules les **interactions de production** (hors tests, qualifications et connaissances ignorées) sont donc prises en compte et ventilées dans ces catégories, qui sont consultables dans les statistiques du BMS.

**Pour le calcul du taux d’échec** dans les statistiques V1, **seule la catégorie `CHART_GARBAGE` (5)** est considérée comme un échec. Les autres catégories ne sont pas comptabilisées dans les échecs.

### Qualification des réponses

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2FDr0VnRVCirMmwMMQrwCU%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.34.42.png?alt=media&#x26;token=a4e16749-7267-4078-86f0-3d9826070d97" alt=""><figcaption></figcaption></figure>

### Qualification des interactions en fonction de la longueur des phrases

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2FNpvOyHvwFsyptHo3IQt8%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.34.49.png?alt=media&#x26;token=ad369690-ba2f-45da-9214-ef8f6efdeb33" alt=""><figcaption></figcaption></figure>

### Qualification des interactions selon le nombre de mots par question (%)

<figure><img src="https://1101559743-files.gitbook.io/~/files/v0/b/gitbook-x-prod.appspot.com/o/spaces%2FgMQl4578l4DzuAEhrEii%2Fuploads%2FmBcDJMCkHlJOxIJIlTeR%2FCapture%20d%E2%80%99e%CC%81cran%202023-12-15%20a%CC%80%2015.34.57.png?alt=media&#x26;token=e7d2c220-16bf-4564-a51d-f3e8a96c7d0a" alt=""><figcaption></figcaption></figure>