Ludo tic IA et bots

www.ludotic.fr

UX/UI DesignFacteurs Humains

IA et chatbots : comment tester leur UX ?

T. COLOMBI

www.ludotic.fr

https://www.meetup.com/fr-FR/Meetup-Software-Testers-Club-Test-et-Qualite-Logiciel/

UNE RENCONTRE ORGANISÉE PAR

MEETUP SOFTWARE TESTERS CLUB

AVEC LE SOUTIEN DE LA

COMMISSION TEST ET QUALITÉ LOGICIEL TELECOM VALLEY

http://www.telecom-valley.fr/communautes-thematiques/test-qualite-logiciel/

www.ludotic.fr I II

L’EXPERIENCE UTILISATEUR

IA ET CONVERSATIONAL UIs

TESTER LESCHATBOTS

III

www.ludotic.fr I

L’EXPERIENCE UTILISATEUR

Enjeux et définitions

www.ludotic.frI. L’UX

LA USER EXPERIENCE

On ne voit que la surface de l’iceberg

Sugar gummi bears. Apple pie yummy cake with candy

VISUAL CORTEX

Ce qu’on ne voit pas :

Test

EVALUER

Surface

DESIGNER

Structure + Squelette

INVENTER

Périmètre

ANALYSER

Stratégie

COMPRENDRE

Overview


ATTENTION AUX ICEBERGS…



L’HUMAIN, AU CENTRE DU PROCESSUS

www.ludotic.fr

IA ET CONVERSATIONAL UIs

Historique et état de l’art

II

www.ludotic.frII. L’IA

Le cycle de maturité des technologies selon Gartner

1

L’IA n’est pas encore tout à fait à maturité


Un peu d’histoire…

11

Le passé de l’IA

Mycin


Un peu d’histoire…

12

La compréhension du langage naturel en 1990-2000

: sait-tu me dire quand il part le prochain avion pour Londres ?

: oui

: et quand il part ?

: qui ?

: le prochain avion !

: quel avion ?


Et aujourd’hui ?

13

Quelques chiffres du marché de l’IA

https://www.raconteur.net/business/the-rise-of-artificial-intelligence-in-6-charts


Et aujourd’hui ?

Conversational UIs

ChatBots

Informatique Cognitive

L’IA dans ses différentes formes


Tendances en communication : I.A.

https://chatbot.fail/

Ca n’a pas beaucoup changé…



Ca n’a pas beaucoup changé…

https://youtu.be/xPCFdlD5wKI





Et même cela fait un peu flipper…

https://www.francetvinfo.fr/sciences/high-tech/sophia-le-robot-humanoide-qui-fait-un-peu-peur_1922341.html





Le paradoxe de l’Uncanny Valley


Le future de l’UX est sans UI ?

19

Les interfaces conversationnelles vont-elles remplacer les interfaces graphiques ?

www.ludotic.fr III

Comment mesurer l’UX ?

TESTER LES CHATBOTS

www.ludotic.frIII. TESTER LES BOTS

Les soucis d’UX des Chatbots

21

#1 La surcharge cognitive

“OK Google, quelle est la météo pour aujourd’hui ?”

Réponse vocale efficace car courte et univoque

“OK Google, qu’est qu’il implique le RGPD qui vaentrer en vigueur en Mai 2018 ?”

Des réponses multiples et complexes, difficiles à suivre à l’oral…


Les soucis d’UX des Chatbots

22

#2 L’absence d’un modèle mental adéquat

“Comment dois-je lui parler ?” Qu’est-ce qu’il comprend ? Comment dois-je réagir à ses réponses ? …


Le test de Turing

23

Est-on sûrs de vouloir que les machines réussissent à le passer avec succès ?


Mettre à l’épreuve un bot

24

Le principe de coopération de Grice et les 4 maximes

Un dialogue est un échange vers un but commun

Maxime de QUALITE

Maxime de QUANTITE

Maxime de RELATION

Maxime de MANIERE



25

Les mesures prévues dans la norme ISO 9241

Démontrer que le bot est “mieux qu’avant”



26

Tester l’efficacité mais aussi le degré d’acceptation



27

5 conseils pour améliorer l’UX

Choisir/développer un moteur sémantique



28


Vérifier que l’arbre de decision est suffisamment large pour éviter les impasses



29


Exploiter toute source de données pertinente concernant l’utilisateur

https://www.spribo.com/platform2



30


Connecter le Bot à son environnement (SAV, SI, GED…)

https://medium.com/dronzebot/deploy-a-website-support-chatbot-with-api-ai-smooch-io-in-the-cloud-for-5-m-7d39510380ca



31


Le faire apprendre de ses échecs (machine learning)


Il n’y a pas d’UX “absolue”…

32

Tout dépend de votre public cible

Le pouvoir du test utilisateurs

Merci de votre attention, place à la discussion