Gå direkt till innehåll
Johanna Björklund föreläser om syntetisering av mänsklig kommunikation.
Johanna Björklund föreläser om syntetisering av mänsklig kommunikation.

Pressmeddelande -

Generativ AI utvecklas och inspirerar

Nya tekniker inom syntetisering av tal, röst, och gester utvecklas i snabb takt. De används till exempel för interaktiva mediaupplevelser, digitala assistenter, artificiella lärare och träningsobjekt såsom virtuella patienter. Under WASP Research Arenas Expo den 21 september demonstrerades flera exempel.

WASPs forskningsarena för media och språk (WARA Media and Language) samlar forskare inom generativ AI från akademi och näringsliv.

“Det händer mycket roligt och inspirerande inom generativ AI just nu, och WASP Research Arenas Expo är ett bra tillfälle att utbyta ny kunskap” säger Johanna Björklund, projektledare för WARA Media & Language.

Under WASP Research Arenas Expo den 21 september kunde besökarna ta del av ett axplock av projekt inom AI-driven speltestning, AI-skapad konst och musik, och generativ Natural Language Processing. En av höjdpunkterna var automatiskt genererade digitala avatarer.

Avatarerna utvecklades nyligen av doktorander under WASPs sommarskola ”Synthesis of Human Communication”. Uppgiften var att på ganska kort tid konfigurera ett tekniskt flöde uppbyggt av flera moduler som var och en hanterar olika delar av mänsklig kommunikation för att skapa talande och gestikulerande avatarer.

Mänsklig kommunikation i fyra moduler

Den första modulen i flödet är en storskalig språkmodell som producerar text som fortsättning på en prompt. Som fortsättning på påståendet ”Digital assistants can” lägger systemet till exempel till “make your life easier, but only if you know how to use them.” Under sommarskolan använde doktoranderna både en generativ modell på engelska, och en helt ny språkmodell för svenska och de nordiska språken; GPT-SWE med 5 miljarder parametrar som tränats på superdatorn Berzelius.

Nästa modul i flödet grundades i det generativa neurala nätverket Tacotron 2 som automatiskt översätter text till tal. Några av doktoranderna valde att träna systemet på sina egna röster för att avatarerna skulle tala mer som dem.

I nästa steg översattes rösterna till gester som harmonierar med avatarernas tal. Det sista steget i kedjan var att genom visualisering i tv-spelsmotorn Unreal ge avatarerna ett unikt utseende.

WASP Research Arena Media and Language

WASPs forskningsarenor (WASP Research Arenas - WARA) fungerar som gränssnitt mellan forskare knutna till WASP och det omgivande samhället. Till de nyare arenorna hör WARA Media and Language som ska skapa en multidisciplinär forskningsgemenskap inom området AI för Media och Språk. Centrala mål för arenan är att främja kunskapsöverföring mellan olika tillämpningsområden, och att ge forskare tillgång till datamängder och testmiljöer från företag och industri.

Relaterade länkar

Ämnen

Kategorier


The Wallenberg AI, Autonomous Systems and Software Program (WASP) är Sveriges största enskilda forskningsprogram i modern tid. WASPs vision är excellent forskning och kompetens inom artificiell intelligens, autonoma system och mjukvara till gagn för svensk industri.

Kontakter

Natalie Pintar

Natalie Pintar

Presskontakt Kommunikationsansvarig WASP +46 (0)700 89 64 97

Relaterat innehåll

Bild: En autonom farkost söker i vattnet i Västerviks skärgård. Bildkälla: Saab och Combitech. Fotograf: Peter Karlsson

Hur ska framtidens räddningssystem se ut?

Den 21 till 22 september samlas akademi och industri i Västerviks skärgård för att titta på hur teknik och människor kan samverka i ett framtida räddningssystem. Ett tjugotal forskningsarbeten ingår i det som visas live under demonstrationen och tillhörande utställning. Projekten berör till exempel datorseende, bildigenkänning, autonom förflyttning, positionering och kommunikation.

Genrebild av robotarm.

Demo av framtidens lättlärda industrirobot

Att göra industrirobotar enkla att lära upp och lära om skulle sänka tröskeln för fler att använda robotar. Nu försöker forskare från flera svenska universitet tillsammans med forskare och ingenjörer på ABB att med hjälp av maskininlärning förenkla upplärningen av industrirobotar.

Johanna Björklund, Umeå universitet, föreläser under sommarskolan i Norrköping.

Datorer tränas i mänsklig kommunikation i Norrköping

Nu pågår Wallenberg AI, Autonomous Systems and Software Programs sommarskolor för sina doktorander i Norrköping. På temat Synthesis of Human Communication deltar 25 doktorander från olika universitet för att lära sig metoder för bearbetning och generering av mänsklig kommunikation, en av de största utmaningarna inom området AI. Media är välkomna till deras demo den 26/8 på Visualiseringscenter C.

Vem tar ansvar för språkmodellerna?

Vem tar ansvar för språkmodellerna?

Under senare tid har vi sett flera språkmodeller lanseras, som till exempel BERT och ChatGPT. Men hur säkra är dessa modeller egentligen? Det diskuteras i WARA Media & Language-poddens senaste avsnitt.

Wallenberg AI, Autonomous Systems and Software Program

Wallenberg AI, Autonomous Systems and Software Program, WASP, är Sveriges största enskilda forskningsprogram i modern tid. Programmet skapar en plattform för akademisk forskning och utbildning i nära samarbete med ledande svensk teknikintensiv industri.

Forskningen innefattar artificiell intelligens och autonoma system som verkar i samarbete med människor och som anpassar sig till sin omgivning med hjälp av sensorer, information och kunskap och skapar intelligenta system av system.

Programmet är ett samarbete mellan Umeå universitet, KTH, Linköpings universitet, Lunds universitet samt Chalmers tekniska högskola. WASP finansieras av Knut och Alice Wallenbergs stiftelse med 5,1 miljarder kronor för perioden 2015-2031. Utöver det bidrar universiteten och industripartners till programmet med 1,4 miljarder kronor.

WASPs vision är excellent forskning och kompetens inom artificiell intelligens, autonoma system och mjukvara till gagn för svensk industri.

Wallenberg AI, Autonomous Systems and Software Program