Logo RealWear

Votre ordinateur portable mains libres est-il vraiment mains libres ?

 

Les 4 éléments clés pour concevoir une informatique véritablement mains libres et pourquoi la conception est importante pour l'avenir de la réalité augmentée

Le terme informatique mains libres a été s'agiter autour pendant des années comme le Saint Graal de informatique portable. Mais fabriquer un ordinateur mains libres vraiment fonctionnel n'est pas une promenade de santé.

Nous avons tous déjà utilisé la reconnaissance vocale. Dans un environnement vierge, avec peu de bruit, la parole fonctionne bien si un utilisateur émet les commandes attendues (et énonce chaque syllabe). Dans des environnements plus bruyants, cependant, vous obtenez une réponse familière comme celle-ci :

« Désolé, je n'ai pas compris. Pouvez-vous s'il vous plaît réessayer ?"

Mais revenons en arrière… qu'est-ce que l'informatique vraiment mains libres, de toute façon ?

Dans le monde de l'informatique mobile, l'informatique véritablement mains libres signifie que vous avez la possibilité d'utiliser un ordinateur complet sans avoir à toucher physiquement les boutons, à balayer les écrans avec vos doigts ou même à saluer frénétiquement devant la caméra de l'ordinateur (dans le cas des périphériques de saisie gestuelle).

Ainsi, l'informatique vraiment mains libres nécessite au moins un mode d'interaction ou une modalité, généralement la technologie vocale ou le suivi oculaire. Suivi de l'oeil pouvez travail, mais il est trop limité pour piloter un environnement informatique complet.

La technologie vocale est la vraie réponse, mais ce n'est qu'une partie de la solution pour une véritable informatique mains libres.

Pourquoi l'informatique mains libres est nécessaire dans les environnements industriels

Pour bon nombre de nos entreprises et de nos clients industriels, l'informatique vraiment mains libres est devenue la nouvelle exigence commerciale et la nouvelle donnée.

Les travailleurs portent des gants pour l'adhérence et la sécurité, transportent des outils lourds ou effectuent des actions avec leurs bras et leurs mains tout en ayant besoin de l'aide de données et de communication. On ne devrait plus s'attendre à ce que les travailleurs industriels connectés utilisent leurs mains ou leurs doigts pour contrôler un appareil.

Imaginez un travailleur à mi-hauteur d'une tour d'éolienne ou à mi-chemin d'un tunnel pour une inspection ou une assurance qualité.

L'utilisation des mains est nécessaire pour maintenir l'équilibre sur une échelle ou une plate-forme ; c'est plus critique que d'accéder à un écran d'ordinateur pour obtenir des informations. Ensuite, il y a la personne avec des gants de protection épais ; les écrans tactiles ne peuvent généralement pas répondre et les boutons eux-mêmes doivent être assez grands pour être touchés avec précision.

Enfin, le travailleur doit tenir des outils en main tout en ayant besoin d'accéder à l'information sur place. Qui veut poser les outils pour interagir avec un écran avant de reprendre les outils ?

Voici les 4 éléments clés pour concevoir une informatique véritablement mains libres pour l'industrie

Il y a quatre défis à surmonter avant que la reconnaissance vocale puisse être utile dans tous les environnements :

Bons micros

Si nous comptons sur la parole comme interface principale, nous ferions mieux d'avoir de très bons microphones et un nombre utile d'entre eux autour de notre casque. Notre RealWear les ordinateurs portables renforcés utilisent actuellement un ensemble de quatre microphones, placés à des endroits stratégiques autour de la tête de l'utilisateur. Cela permet d'entendre la voix de l'utilisateur et, surtout, le bruit ambiant.

 

L'un des défis que nous avons surmontés est d'atteindre un niveau inégalé de cohérence de fabrication autour de nos microphones. Cela signifie que chaque microphone de chaque appareil se comporte de la même manière que tous les autres, et chacun est assemblé et testé pour garantir un comportement identique d'un appareil à l'autre. Parce que la parole est si importante pour le fonctionnement de notre appareil, nous sommes allés au-delà pour assurer cette cohérence de fabrication et, ce faisant, nous avons développé une propriété intellectuelle importante pour les usines afin de prendre en charge cette tâche.

Réduction du bruit / Amplification de la voix

Maintenant que nous avons la garantie d'un bon niveau constant d'acquisition de données audio, nous pouvons les intégrer à la dernière génération d'algorithmes de réduction du bruit et d'amplification de la voix pour éliminer les sons ambiants indésirables. Nous utilisons un certain nombre d'algorithmes différents, basculant constamment entre eux en fonction des types de bruit et des environnements. Certains algorithmes forment des faisceaux ; certains se concentrent sur la suppression du bruit; certains utilisent l'IA d'apprentissage en profondeur; et d'autres se spécialisent dans l'extraction de signaux vocaux humains. Tous ces algorithmes sont subtilement différents, mais lorsqu'ils sont utilisés au bon moment, dans les bonnes conditions, ils peuvent produire le signal le plus propre et le plus audible.

Reconnaissance vocale sans nécessiter de connexion Internet

Grâce à des microphones de haute qualité et à une réduction du bruit bien conçue, nous sommes désormais en mesure d'alimenter des signaux audio propres dans notre reconnaissance vocale, en étant sûrs que ces signaux ne contiennent que les commandes de l'utilisateur. Nous utilisons l'un des moteurs de reconnaissance vocale les plus sophistiqués disponibles aujourd'hui, qui fonctionne sans connexion Internet. Notre système vocal fonctionne entièrement hors ligne, dans plus de 40 langues.

De par sa conception, le système de RealWear est extrêmement réactif, comprenant ce que dit l'utilisateur dans les 200 millisecondes suivant l'émission d'une commande. Cela donne essentiellement à l'utilisateur un retour instantané dès que l'utilisateur dit quelque chose.

Et grâce à la réduction du bruit, notre reconnaissance vocale à réponse rapide fonctionne même dans les environnements industriels les plus difficiles, à des niveaux de bruit approchant les 100 dB.

Logiciel - Comment utiliser la reconnaissance vocale pour piloter une application ?

Même avec les microphones, la réduction du bruit et la reconnaissance vocale en jeu, il reste un élément très important que nous devions aborder : comment utilisez-vous la reconnaissance vocale pour piloter une application ?

Vous n'allez sûrement pas nous donner un SDK et nous demander de réécrire complètement toutes nos applications pour les mains libres?"

La réponse est un grand "NON". Nous avons fait tout ce travail et intégré la technologie vocale et audio dans le système d'exploitation Android. Tout ce que vous avez à faire est d'écrire votre application Android comme vous le feriez normalement pour le toucher (allez-y, mettez des boutons, des cases à cocher et toutes sortes de widgets de contrôle sur l'écran). Une fois que votre application est en cours d'exécution sur notre casque HMT-1, elle deviendra automatiquement activée pour la parole - maintenant vous n'avez plus besoin d'appuyer sur le bouton ; il vous suffit de dire le nom du bouton pour l'activer. Le tout gratuitement - aucune programmation supplémentaire requise.

(De plus, nous n'avons aucun de ces mots de réveil que vous devez répéter ; il n'y a pas de "Hey Siri", ou "OK, Google", ou "Alexa". Dites simplement ce qui est sur l'écran du HMT-1, quand tu veux.)

Emballer

Pour résumer, méfiez-vous lorsque quelqu'un parle de son système d'exploitation vraiment mains libres. Demandez-vous : est-ce vraiment mains libres ? Puis-je piloter l'ensemble du système d'exploitation avec la voix, ou s'agit-il d'une seule application ? Peut-il fonctionner dans des environnements très bruyants ? Enfin, dois-je réécrire mon application avec un SDK pour gérer l'interface vocale ? Vous serez surpris du peu d'offres qui répondent vraiment à ces exigences.

Transformez votre équipe de première ligne dès aujourd’hui

Restez à jour avec RealWear