Mobil app udvikler søges

Tegn til tale/tekst (fra døv til hørende):
Ret telefonens kamera mod personen, der tegner tegnsprog. Appens AI genkender håndbevægelser, ansigtsmimik og kropspositioner i realtid. Den oversætter tegnene til skrevet dansk tekst på skærmen og oplæst tale via højttaleren.

Tale til tegnsprog (fra hørende til døv): 

Tal normalt ind i mikrofonen. Appen transskriberer talen til tekst, behandler grammatikken til tegnsprogs-struktur og animerer en fotorealistisk eller stiliseret 3D-avatar, der flydende laver de tilsvarende tegnsprogssætninger – inklusive vigtige non-manuelle elementer som mimik, mundbevægelser og hovedbevægelser.

Hvor den bruger ai til at blive klogere på sproget, jo mere appen bliver brugt, til at kunne forstå hele sætninger, ansigt mimik og alt lignende. 

•  Hvilket tegnsprog?

• Specifikt dansk tegnsprog (DTS)?

• Kan selv lære sig selv til DTS, men også blive klogere til andre tegnsprog 

•  Real-time krav

Avancerede AI-features: 

•  Gesture / tegn-genkendelse

• Skal det genkende fulde sætninger

• Så høj præcision som muligt

• Skal kunne håndtere flere variationer som forskellige brugere, hastighed, baggrundsbelysning, hudfarve

•  Avatar / 3D-animation (speech-to-sign)

• Avatar skal gerne være photorealistic 

• Skal vise fuld kropsanimation 

• Non-manual features: Mimik, mundbevægelser, øjenbevægelser, skulderløft

Er det noget som du ville kunne lave? og hvad ville du tage for at lave sådan en app?

Mvh Mads Kristensen