https://bodybydarwin.com
Slider Image

Le nouvel assistant numérique de Samsung, Bixby, tente de repousser les limites de la reconnaissance vocale pour devenir une véritable IA

2021

Utiliser des commandes vocales avec un smartphone n’est pas une nouveauté, mais le nouvel assistant numérique de Samsung, Bixby, va au-delà de la reconnaissance vocale. Il intègre l’apprentissage en profondeur et une recherche visuelle étendue pour donner l’impression de devenir un véritable assistant numérique installé sur votre appareil.

Bixby établit des comparaisons immédiates avec Siri d'Apple et l'Assistant de Google. Bien que nous les considérions souvent comme de simples voix, Samsung décrit que Bixby possède sa propre interface visuelle à base de cartes pour transmettre des informations. La voix n'est qu'une partie de l'équation. Les autres aspects sont la vision (utiliser par exemple l'appareil photo pour scanner un code QR, déterminer le coût d'un livre en fonction de sa couverture ou traduire un texte), des rappels et des recommandations. Bixby est le terme générique pour ces quatre fonctions intelligentes.

Sriram Thodla, directeur principal de Samsung spécialisé dans l'intelligence et l'internet des objets, a présenté Bixby au public lors de l'annonce de l'annonce des Galaxy S8 et S8 + mercredi. «Bixby comprend le contexte, a-t-il déclaré. "Il sait ce qui se passe sur votre écran."

Par exemple, vous pouvez lui demander de prendre une capture d'écran de ce que vous faites, puis d'envoyer cette image à un contact. Ce type de demande complexe couvrant plusieurs applications et services s'est déjà révélé problématique pour les assistants numériques.

"Nous disons que Bixby est une interface utilisateur intelligente", a déclaré Mok Oh, vice-président de Samsung pour la stratégie des services, lors d'une interview lundi lors d'une conférence de presse.

Oh a vanté l'exhaustivité de Bixby, ce qui signifie que si une application est compatible Bixby, tout ce que vous pouvez faire avec le toucher peut également être fait par la voix. Par exemple, vous pouvez demander à Bixby de changer la langue d'affichage de votre téléphone et Bixby devrait le faire. L’assistant est également "indulgent", "dit Oh, alors il devrait faire face à l’ambiguïté des demandes.

Oh a ensuite mis en avant l'application photo du téléphone, appelée Galerie, et les milliers de combinaisons de tâches différentes qu'un utilisateur pourrait effectuer. Il existe d'innombrables manières pour un utilisateur de commander le recadrage ou l'édition d'une image, et Bixby devrait pouvoir le gérer.

«À bien des égards, nous appliquons la technologie d'apprentissage en profondeur, à Bixby, a déclaré Oh. Un aspect de cela est que Bixby donnera aux utilisateurs une option de pouce levé ou baissé après avoir traité une demande, pour lui permettre de savoir comment cela s'est passé et de l'aider à apprendre. "En réalité, nous appliquons l'apprentissage dans de nombreux aspects de notre ensemble de technologies pour ce faire", a-t-il ajouté.

Cette fonction est cruciale pour les agents virtuels tels que Bixby, a déclaré Alex Rudnicky, professeur de recherche en informatique à la Carnegie Mellon University, qui se consacre à la parole. "Vous avez besoin d'une sorte de renforcement qui permette au système d'apprendre fondamentalement - de comprendre le lien qui existe entre ce que veut l'utilisateur et ce qui se passe réellement", a-t-il déclaré. "De manière réaliste, l'agent va faire beaucoup d'erreurs."

L'application Alexa d'Amazon a une fonction similaire, demandant à l'utilisateur s'il a fait ce qu'il voulait.

En plus de ses capacités d'écoute, Bixby peut également voir dans le monde réel. À l'aide de la caméra intégrée à la S8, Bixby peut détecter des objets dans une scène et rechercher des informations sur ce produit ainsi que des produits connexes. Bien entendu, cela vous permettra également de les acheter auprès des partenaires de Samsung. Actuellement, Siri n'offre pas cette fonctionnalité, contrairement à Google Assistant, avec des résultats souvent mitigés, mais ce type d'interaction de type réalité augmentée est une étape logique pour l'IA en tant qu'assistant personnel.

Pour la recherche visuelle, Samsung a fait appel à diverses sociétés partenaires comme Amazon pour faire ses courses, Foursquare pour des fonctions spécifiques à un lieu (Thodla a utilisé un exemple dans lequel il a pris une photo du bâtiment emblématique Flatiron à New York et a obtenu des informations à ce sujet, ainsi que bonnes options de restauration dans la région) et Google Translate pour interpréter les panneaux dans différentes langues.

Enfin, Bixby devrait également se familiariser avec les schémas de situation, a déclaré Oh; si vous téléphonez habituellement lorsque vous rentrez du travail à la maison, l'assistant pourrait le suivre et vous le recommander. Thodla a également évoqué ce point lors du dévoilement de l'appareil, affirmant que Bixby pourrait suggérer un Uber s'il remarquait que vous en preniez habituellement un à un moment donné.

Bixby a son propre écran d’accueil, avec des informations qu’il a apprises sur son utilisation typique. Les informations provenant de diverses applications sont affichées sur des cartes et celles qui sont les plus pertinentes sont placées au sommet. Ainsi, le matin, il donne la priorité à la météo et au courrier électronique, tandis que la nuit, il peut pousser les médias sociaux au sommet. Cependant, tout cela est variable, car Bixby reçoit les commentaires de l'utilisateur.

En général, c’est la reconnaissance des formes et la connaissance de la situation, dans lesquelles un assistant virtuel fait des suggestions, qui sépare la simple reconnaissance vocale et les compétences de connectivité de l’intelligence artificielle, selon Kris Bondi, directeur du marketing chez Neura. Neura fabrique un moteur d'intelligence artificielle qui se concentre sur la personnalisation et l'identification du contexte et des moments de la vie d'un utilisateur.

Venez regarder une simulation de supercalculateur d’une tornade dévastatrice

Venez regarder une simulation de supercalculateur d’une tornade dévastatrice

Les indispensables de la table de nuit pour vous aider à vous endormir

Les indispensables de la table de nuit pour vous aider à vous endormir

Le nouveau porte-avions de la Chine laisse entrevoir l'avenir de sa marine

Le nouveau porte-avions de la Chine laisse entrevoir l'avenir de sa marine