Mercedes A klasse gebruikt Nuance Dragon Drive AI

Nuance Communications meldt dat het multimediasysteem van Daimler AG, de Mercedes-Benz User Experience (MBUX), wordt aangestuurd door Dragon Drive, het AI-gestuurde connected car platform van Nuance. Hierbij wordt gebruik gemaakt van het volledige aanbod van Dragon Drive-diensten, zoals geïntegreerde en cloud-based spraakherkenning, natural language understanding, tekst-naar-spraak, audiosignaalverbetering en handschriftherkenning. Daimler AG heeft hiermee voor de nieuwe A-klasse een eigen, op maat gemaakte auto-assistent ontwikkeld die zorgt voor een nieuwe ervaring in de cockpit.

De autoassistent van Dragon Drive zorgt voor een natuurlijker conversatie met bestuurders, waardoor de intelligente connected car voor autofabrikanten als Daimler AG een realiteit wordt. Dragon Drive wordt aangestuurd door AI en begrijpt al lerend steeds meer van de behoeften en voorkeuren van de bestuurder en passagiers. Zo biedt Dragon Drive een steeds persoonlijker ervaring die ervoor zorgt dat functies met spraak kunnen worden bestuurd, van het entertainmentsysteem, navigatie, nieuwsberichten, kantoorfuncties als mail, berichten, agenda en notities tot functies van de auto zelf, zoals de airconditioning of stoelbediening. Bestuurders en passagiers kunnen tegen het systeem praten alsof ze er een gesprek mee voeren en vragen stellen en commando’s geven als “Hoe hard mag ik hier?”, “Wie belde me zojuist?”, “Mail Lisa: Ik wil naar het strand, ga je mee?”, “Het is hier te warm” en “Geef me een massage”.

MBUX wordt aangedreven door Dragon Drive en activeert als het wordt aangeroepen met ‘Hey Mercedes’. Het systeem maakt gebruik van natural language understanding en AI-conversatietechnologie om slim antwoord te kunnen geven op vragen en commando’s. Het hybride ingebouwde cloud-systeem haalt informatie uit zowel het systeem aan boord van de auto als uit de cloud. Resultaten worden samengesteld uit informatie van aanbieders als what3words, Foreca, HERE Technologies en Yelp. Zo hebben gebruikers de beschikking over relevante, up-to-date informatie over het weer, locaties, entertainment en lokale bedrijven. Door gebruik te maken van de AI van Nuance begrijpt MBUX niet alleen wat bestuurders en passagiers zeggen, maar ook wat ze bedoelen. Hierdoor blijven gebruikers beter op de hoogte, kunnen ze sneller beslissingen nemen en worden zowel de productiviteit als het comfort en de veiligheid vergroot, zo beweert Nuance.

MBUX maakt gebruik van diverse Dragon Drive technologiën:

Natural language generation (NLG) – NLG zorgt voor natuurlijker interactie met de autoassistent, omdat dit de assistent in staat stelt antwoord te geven zoals een mens zou doen in plaats van gebruik te maken van stereotypische, gescripte antwoorden. Zo voeren mens en assistent een echt gesprek dat verder gaat dan een uitwisseling van commando’s: op de vraag “Heb ik morgen in Amsterdam een paraplu nodig?” antwoordt de assistent met een intelligente conversatiereactie als: “Ja, het gaat morgen de hele dag regenen in Amsterdam.”

Natural language understanding (NLU) van stijlfiguren (verwijswoorden en weglatingen) – door begrip van deze stijlfiguren begrijpt de assist referenties naar zaken die eerder werden genoemd, net zoals mensen dat kunnen. Een gebruiker kan bijvoorbeeld vragen of de assistent een bericht naar Kate wil sturen, en dan opvolgen met “Stuur dat bericht ook naar Maria”. De assistent beschikt over de intelligentie om het gesprek te volgen en ook aan dit soort verzoeken te voldoen.
Flexibele, draadloze updates via de cloud – het systeem wordt continu verrijkt met nieuwe woorden over veranderd taalgebruik. Nieuwe domeinen (bijvoorbeeld seizoensgebonden sportactiviteiten), virtuele assistenten en diensten kunnen worden toegevoegd om het beschikbare spectrum aan informatie naar wens te verbreden.

“De automobielindustrie zit in een paradigmaverschuiving. De digitale connected car wordt een steeds belangrijker onderdeel van het Internet of Things (IoT),” aldus Stefan Ortmanns, Executive Vice President en General Manager bij Nuance Automotive. “In een wereld die steeds digitaler wordt, verwachten gebruikers dat content en diensten eenvoudig beschikbaar zijn en worden aangepast aan hun wensen. Dat geldt ook voor de autoassistent. We zijn er trots op dat we met de samenwerking met Daimler en de ontwikkeling van MBUX bijdragen aan innovatie. MBUX loopt voorop in de trend van nieuwe AI-gedreven autoassistenten. Deze assistenten zijn intelligent, leren continu bij en zijn volledig geïntegreerd in het voertuig.”

“Met MBUX zijn we weer een stap dichter bij de auto als mobiele assistent,” benadrukt Sajjad Khan, Vice President Digital Vehicle & Mobility bij Daimler. “Wanneer we werken aan de autobeleving van Mercedes-rijder, is de ervaring van de gebruiker leidend bij de implementatie van nieuwe technologieën. We willen dat het contact met de auto naadloos en eenvoudig is. Daarom hebben we voor MBUX nauw samengewerkt met onze vertrouwde partner Nuance. Door voor de autobeleving gebruik te maken van hun intuïtieve en natuurlijke spraak- en taaloplossingen, bieden we een niet te evenaren gebruikservaring.”

MBUX maakt gebruik van Dragon Drive-diensten in meer dan 23 talen, waaronder Brits Engels, Amerikaans Engels, Duits, Nederlands, Frans, Italiaans, Spaans, Mexicaans Spaans, Mandarijn Chinees, Japans en Koreaans. Het systeem wordt als eerste geïmplementeerd in de 2018 A-klasse, die dit voorjaar gelanceerd wordt.