SpixForCheck: remplir des formulaires et des check-listes par la voix

Introduction

Dans un objectif de traçabilité totale de l’information, les industriels de la santé et de la pharmacie ce lancent dans une digitalisation accélérée des formulaires, check-list et compte-rendus d’interventions. Cet effort de traçabilité des données se heurte à la réalité des métiers manuels qui ont les mains et les yeux occupés à leurs tâches: isolateurs, boite à gants, produits dangereux, salles blanches, mobilité, …

La solution SpixForCheck consiste en un assistant vocal intelligent dédié aux professionnels pour les aider à compléter des check-listes et des formulaires par la voix, en conservant les mains et les yeux libres.

La voix : une innovation de rupture

 La Solution SpixForCheck regroupe deux types de technologies vocales complémentaires :

  • Une technologie de reconnaissance vocale robuste capable de traduire la voix en texte dans des environnements professionnel de façon la plus performante possible,
  • Une technologie d’assistance vocale également appelé agent dialoguant ou interface conversationnelle qui permet d’aller au-delà de la simple reconnaissance vocale et d’amorcer un véritable dialogue intelligent entre l’assistant et un utilisateur. Une technologie de synthèse vocale est par ailleurs exploitée pour faire des retours audio à l’utilisateur.

L’objectif est de permettre aux opérateurs manuels de la santé et de la pharmacie de bénéficier de la puissance de la voix pour les aider à compléter check-listes et formulaires, en conservant les mains libres.

L’idée de cette innovation de rupture est de changer radicalement l’expérience utilisateur, et de les réconcilier avec leur environnement numérique en intégrant la voix et une assistance métier intelligente pour vraiment réussir la transformation digitale en cours dans l’industrie.

Fonctions d’un assistant vocal

Les fonctions remplies par l’Assistant Vocal Intelligent SpixForCheck sont de plusieurs types, pour remplir des formulaires, ou compléter des check-listes par la voix.

Fonctions vocales simples

  • Sélections d’éléments dans des listes longues
  • Choix de conformité binaire
  • Choisir une sélection dans plusieurs listes
  • Saisie des valeurs de mesure
  • Saisie de valeurs alphanumériques
  • Saisie d’un titre de texte court
  • Saisie d’un commentaire en texte libre
  • Activation de l’appareil photo

Fonctions d’assistance vocale avancées

  • Suivi pas à pas d’une procédure de type check-liste
  • Aide contextuelle à l’utilisation de l’assistant vocal
  • Navigation dans des listes de choix
  • Rappels contextuels des consignes et instructions
  • Modes « expert » et « novice » en fonction de l’utilisateur
  • Utilisation multimodale vocale et tactile
  • Validation visuelle des données saisies

SpixForCheck peut être utilisé avec ou sans retour visuel. Le support numérique du professionnel peut être posé à proximité, l’interface vocale permet une interaction à distance.

Illustrations et cas d’usages

Deux exemples pour illustrer la plus value de la mise en oeuvre de SpixForCheck pour les opérateurs manuels des industries de la santé et de la pharmacie.

Check-list contrôle qualité produit

Situation: Un opérateur qualité doit inspecter des lots de produits en arrivée usine. Chaque lot doit faire l’object d’une inspection visuelle et de relevés numériques (quantité, pesée, …). Un formulaire doit être complété pour chaque lot.

Problème: L’opérateur bouge beaucoup, se déplace entre les lots en fonction de leur lieu de livraison, il a des gants. Il n’arrive pas à compléter le formulaire sur la tablette dont il dispose en temps réel. Il pose la tablette et complète à postériori l’information requise.

Solution SpixForCheck: L’opérateur interagit avec le formulaire sur la tablette posée à distance par la voix, avec un casque et un micro. Toutes les informations demandées sont complétées avec le lot sous les yeux, en temps réel.

Illustration: opérateur de contrôle qualité pour des cuirs de luxe des tanneries Bastin qui pilote un formulaire de suivi d’inspection et de mesures par la voix en gardant les mains libres.
Bénéfices observés: amélioration de la traçabilité des opérations, réduction du temps d’inspection, amélioration du confort opérateur.

Formulaire opérations sous isolateur

Situation: Un opérateur manipule des produits dangereux sous isolateur, en boite à gants, ou en salle blanche. Il doit valider pas à pas les étapes réalisées, noter les valeurs de pesée, et remonter les écarts.

Problème: L’opérateur a des gants, l’environnement impose des contraintes quants aux surfaces qui peuvent être touchées. Il ne peut donc pas utiliser d’écran tactile ou de clavier pendant sa manipulation.

Solution SpixForCheck: L’opérateur dispose d’un casque et d’un micro. Il valider les étapes par la voix, remonte les valuers de pesées et les valide par la voix. Il accède instantanément au compte rendu de sa manipulation, en gardant les mais libres et sans toucher de surface tierces.

Illustration: opératrice en boite à gants chez Orano qui pilote son formulaire de suivi d’opérations par la voix en gardant les mains libres.
Bénéfices observés: réduction des bris de gants, amélioration de la traçabilité des opérations, amélioration du confort de l’opérateur.

Permettre au professionnels de compléter des check-lists, des formulaire de suivi, ou des formulaires de contrôle qualité, permet d’améliorer la traçabilité des processus manuels, de simplifier la vie des opérateurs.

Retours sur Investissement

Les Retours sur Investissement (ROI) d’une innovation de rupture comme l’assistance vocale sont souvent associés à des « observables » ou des KPIs (Key Points of Interest) qui sont mesurables. La classification des ROI en fonction d’observables permet d’évaluer l’impact d’une solution nouvelle sur un processus industriel, ou de santé.

Les ROI et les observables associés à l’utilisation d’un assistant vocal peuvent être décrits de la manière suivante:

Amélioration de la traçabilité des opérations

  • Amélioration de la « Qualité de l’information saisie en temps réel »
  • Augmentation de la « Quantité d’information remontée proche du terrain »
  • Amélioration du « Suivi des consignes spécifiques qualité »  

Réduction de la non-qualité

  • Amélioration de la « Qualité de l’information saisie en temps réel »
  • Augmentation de la « Quantité d’information remontée proche du terrain »
  • Amélioration de la « Compréhension des consignes spécifiques »

Gain de temps sur la réalisation d’une tâche
Réduction des temps à faible valeur ajoutée

  • Simplification de l’« Accessibilité de l’information proche du terrain »
  • Réduction des « Marcher entre le poste de travail et le poste informatique »
  • Réduction des « Temps d’accès à l’information proche du terrain »
  • Réduction des « Temps de saisie d’information proche du terrain »  

Amélioration du confort de travail des opérateurs

  • Réduction des « Marcher entre le poste de travail et le poste informatique »
  • Simplification de l’« Accessibilité de l’information proche du terrain »
  • Renforcement de la « Formation continue proche du terrain »

Augmentation de la sécurité des personnes et des biens

  • Réduction des « Marcher entre le poste de travail et le poste informatique »
  • Meilleur suivi des consignes de « Sécurité des opérateurs (consignes, étapes) »  

Les technologies mises en œuvre sont robustes et déjà utilisées dans un contexte industriel (nucléaire, environnement, défense) pour le remplissage de formulaires de contrôle qualité, d’inspection de systèmes ou de sites, ou pour la complétion des obligations règlementaires. Pour remplir cet objectif, des stratégies de dialogue homme-machine en langage naturel, et d’interfaces multimodales sont mises en oeuvre par SpixForCheck afin de maximiser le recueil et la transmission d’information pour l’opérateur, au plus proche du poste de travail.

Publications projet Voice Experience

Vidéo de référence

Les vidéos présentées sont issues de l’expérience industrielle de SPIX industry. Cette expérience opérationnelle de mise en oeuvre de solutions d’assistance vocale dans des environnements complexes est mise à profit par SPIX healthcare pour les industriels de la santé et de la pharmacie.