Au cours des derniers mois, nous avons couvert de nombreuses applications qui vous permettent d’interagir avec les avatars AI. Taoavatar peut les rendre beaucoup plus photoréalistes. Il génère des avatars à corps complet 3D avec une pose, un geste et une expression contrôlables. Les chercheurs ont créé un agent humain numérique 3D sur Apple Vision Pro. Il interagit avec les utilisateurs par le biais de la reconnaissance vocale automatique avec LLM et TTS.
Comme vous le voyez dans le GIF ci-dessus, les expressions faciales et les gestes sont contrôlés dynamiquement par un modèle Audio2BS. Taoavatar a une fréquence d’images de 90fps. Pour son ensemble de données, il utilise huit séquences d’images multi-vues capturées avec des caméras RVB en 20 ips et une résolution de 3000 × 4000p.
[HT]
** Avis de non-responsabilité: Nos articles peuvent contenir des liens AFF. En tant qu’associé Amazon, nous gagnons des achats éligibles. Veuillez lire notre avertissement sur la façon dont nous finançons ce site.