New Me

Aplikace ve Flutteru s mluvícím virtuálním avatarem.

Současná postava Amy z aplikace New Me vedle ovládání videohovoru a chatu

Hlasové rozhovory s avatarem

New Me je aplikace pro sebereflexi. Uživatel v ní mluví s virtuálním avatarem hlasem nebo přes chat.

Avatara z Unity jsem integroval do aplikace ve Flutteru a ladil synchronizaci rtů, pohled a mimiku, aby postava během rozhovoru reagovala.

Pracoval jsem také na backendu a na hlasu a chatu v reálném čase: převod řeči na text a textu na řeč, nativní zpracování zvuku na iOS, bufferování a opakované pokusy u WebSocketů. Spolupracoval jsem s výtvarnicí, AI vývojářem a psychologem.