Avec HarmonyOS 7, Xiaoyi passe de l’assistance vocale à la coordination des tâches

Demander à un assistant vocal de préparer un voyage aboutit souvent à une liste de suggestions. Avec HarmonyOS 7, Huawei veut que Xiaoyi puisse aller plus loin : comprendre l’objectif, le découper en étapes et solliciter les services nécessaires sans obliger l’utilisateur à naviguer lui-même d’une application à l’autre. Cette approche, baptisée « l’intention comme service », s’appuie sur le cadre logiciel HarmonyOS Agent Framework 2.0 (HMAF 2.0). 23

Qu’est-ce qui change dans le système ?

Xiaoyi est présenté comme un agent intégré au système d’exploitation, plutôt que comme une simple interface de conversation ajoutée aux applications. HMAF 2.0 organise les tâches ; les fonctions du système, les agents spécialisés des applications et les Skills — des fonctions que l’assistant peut appeler — fournissent les moyens d’agir. 2314

Les chiffres annoncés désignent quatre ensembles distincts : plus de 200 types de données système pouvant apporter du contexte, notamment l’agenda, les fichiers ou les préférences ; plus de 2 100 fonctions système ; plus de 2 000 agents HarmonyOS liés à des services spécialisés ; et plus de 500 Skills partenaires. L’accès aux données personnelles est présenté comme soumis à l’autorisation de l’utilisateur. Ces volumes décrivent les ressources potentielles de Xiaoyi, pas ce qu’il utilisera à chaque demande. 357

Un voyage organisé dans une même conversation

Dans un exemple rapporté, une demande de séjour familial de deux jours à Xi’an, à un rythme tranquille, conduit Xiaoyi à tenir compte du calendrier des jours fériés et de la météo pour proposer un itinéraire. Il peut ensuite faire intervenir, dans la même conversation, les services d’un partenaire pour l’hôtel, les visites et le train. L’intérêt est de relier la préparation du voyage aux services utiles pour le réaliser ; l’exemple ne prouve pas que toutes les réservations se font sans intervention de l’utilisateur. 3

La coordination peut aussi se faire entre agents. La plateforme de Huawei décrit une connexion A2A (agent-to-agent, ou « d’agent à agent ») directement sur l’appareil, ainsi qu’une voie passant par le cloud pour raccorder des agents existants. 1 Il n’est pas toujours nécessaire de formuler une demande orale : selon des comptes rendus, la barre de navigation de Xiaoyi peut reconnaître un lien à copier-coller ou un numéro de vol copié et proposer un accès en un geste au service pertinent. Proposer un raccourci n’équivaut pas à agir discrètement à la place de l’utilisateur. 16

Des Skills réutilisables, mais pas universels

Des articles décrivent enfin Xiaoyi comme capable de revenir sur une tâche terminée et de conserver sous forme de Skill une méthode enseignée par l’utilisateur. C’est une possibilité destinée à faciliter une demande similaire par la suite, et non la promesse que chaque procédure sera apprise sans erreur. 5

Pour les développeurs, une voie d’intégration consiste à rendre une fonction précise de leur application accessible comme Skill. Huawei indique proposer des outils pour créer, tester, soumettre à examen et publier ces fonctions. Ils peuvent aussi construire des agents à partir des capacités système et des modèles mis à disposition, connecter un agent existant par A2A, ou intégrer directement à une application des fonctions de vision, de traitement de la parole et du langage naturel. 11718

La différence tient donc à une coordination sous autorisation : Xiaoyi reçoit la demande, HMAF 2.0 organise les étapes et les fonctions, agents ou Skills participants apportent chacun leur contribution. La part de la tâche réellement accomplie dépend des intégrations disponibles et des autorisations accordées. 135