Van spraakassistent naar systeemagent: zo werkt Xiaoyi in HarmonyOS 7

Vraag een gewone spraakassistent om hulp bij een reis en je krijgt misschien een voorstel, waarna je zelf de boekingsapps opent. HarmonyOS 7 is erop ingericht Xiaoyi ook de vervolgstappen te laten coördineren. Binnen Huawei’s Harmony Intelligence werkt de assistent met het HarmonyOS Agent Framework 2.0 (HMAF 2.0): een opzet die Huawei omschrijft als ‘intent as a service’, waarbij een verzoek wordt vertaald naar taken voor het systeem en aangesloten diensten. 23

Wat maakt Xiaoyi een systeemagent?

Het verschil zit in de plek van de assistent. Xiaoyi is volgens de berichtgeving geïntegreerd in het besturingssysteem, in plaats van een losse gesprekslaag boven op apps te zijn. HMAF 2.0 ondersteunt de coördinatie van taken; systeemfuncties, gespecialiseerde agents van apps en zogeheten Skills — afgebakende functies die de assistent kan aanroepen — leveren de benodigde onderdelen. 2314

De gemelde aantallen beschrijven vier verschillende soorten hulpmiddelen: ruim 200 soorten systeemgegevens voor context, zoals agenda’s, bestanden en voorkeuren; meer dan 2.100 systeemfuncties voor handelingen; meer dan 2.000 HarmonyOS-agents die gespecialiseerde diensten kunnen bieden; en meer dan 500 Skills van partners. Toegang tot persoonlijke gegevens wordt daarbij beschreven als afhankelijk van toestemming van de gebruiker. De aantallen geven aan wat potentieel beschikbaar is, niet wat Xiaoyi bij ieder verzoek inzet. 357

Van reisidee naar diensten in één gesprek

Een beschreven voorbeeld begint met een verzoek om een ontspannen tweedaagse gezinsreis naar Xi’an, een stad in China. Xiaoyi gebruikt informatie over vrije dagen en het weer om een reisplan op te zetten en betrekt daarna de hotel-, attractie- en treindiensten van een reispartner bij hetzelfde gesprek. Daarmee verschuift de rol van alleen suggesties doen naar het coördineren van diensten die nodig zijn om het plan uit te voeren. Het voorbeeld bewijst niet dat elke boeking zonder verdere invoer van de gebruiker wordt afgerond. 3

Ook agents kunnen samenwerken. Huawei beschrijft A2A-koppelingen — agent-to-agent — op het apparaat en een cloudroute om bestaande agents aan te sluiten. Zo kan een agent van een app deelnemen aan een taak die Xiaoyi coördineert. 1 Niet alles begint met een gesproken opdracht: volgens berichtgeving kan de navigatiebalk van Xiaoyi een gekopieerde commandolink of een vluchtnummer herkennen en een snelkoppeling naar een passende dienst voorstellen. Een suggestie waarop je kunt tikken, is iets anders dan ongemerkt namens jou handelen. 16

Skills voor gebruikers én ontwikkelaars

Volgens berichtgeving kan Xiaoyi na een afgeronde taak de werkwijze evalueren en een door de gebruiker aangeleerde methode bewaren als herbruikbare Skill. Dat is bedoeld om een vergelijkbare taak later makkelijker uit te voeren; het is geen garantie dat de assistent elke werkwijze betrouwbaar aanleert. 5

Voor ontwikkelaars is een Skill een manier om een specifieke appfunctie beschikbaar te maken. Huawei zegt ontwikkeling, testen, beoordeling en publicatie van Skills via zijn platform te ondersteunen. Ontwikkelaars kunnen daarnaast agents bouwen met beschikbaar gestelde systeem- en modelmogelijkheden, bestaande agents via A2A koppelen of AI-functies voor beeldherkenning, spraak en natuurlijke taal rechtstreeks in een app verwerken. 11718

De kern is dus coördinatie binnen de gegeven toestemming: Xiaoyi ontvangt het verzoek, HMAF 2.0 organiseert de stappen en aangesloten functies, agents en Skills voeren de onderdelen uit. Hoe ver Xiaoyi met een concrete taak komt, hangt af van de beschikbare koppelingen en de toestemming van de gebruiker. 135