NVIDIA Audio2Face-3D කියන්නේ අලුත්ම AI තාක්ෂණයක්. මේකේ විශේෂත්වය තමයි, කටහඬක් (audio) දුන්නම ඒකෙන්ම 3D මුහුණක් ජීවමාන වගේ animate කරන එක. එනම් කෙනෙක් කතා කරන විදිහටම digital character එකක් කතා කරනවා වගේ පෙන්වන්න මේ system එකට පුළුවන්.
මෙම AI එක කතා කරන ශබ්දය විශ්ලේෂණය කරලා, වචන වල ශබ්ද (phonemes), හඬේ තාලය, වේගය සහ උච්චාරණය වගේ දේවල් අරගෙන මුහුණේ චලන වලට පරිවර්තනය කරනවා. ඒ නිසා character එකේ තොල් චලනය, ඇස්, ඇහිබැමි සහ මුහුණේ හැඟීම් හරිම ස්වභාවිකව පෙනෙනවා.
තවත් වැදගත් දේක් තමයි, මේ system එකට හැඟීම් (emotions) ද පෙන්වන්න පුළුවන්. උදාහරණයක් ලෙස සතුට, දුක, කෝපය වගේ හැඟීම් කටහඬේ තාලයෙන් හඳුනාගෙන මුහුණේ ඒ හැඟීම් පෙන්වන්න පුළුවන්.
මේ තාක්ෂණය ගේම්, චිත්රපට, virtual assistant, AI avatar වගේ දේවල් වලට බහුලව භාවිතා වෙනවා. ඉස්සර නම් මෙවැනි animations හදන්න කාලය ගොඩක් ගන්න වුණා, නමුත් දැන් කටහඬක් දුන්නමම මුහුණක් ජීවමාන වගේ animate කරන්න පුළුවන්.
ඉතින් Audio2Face-3D කියන්නේ AI ලෝකයේ 3D animation ක්ෂේත්රය සම්පූර්ණයෙන්ම වෙනස් කරන ඉතා බලවත් තාක්ෂණයක්.
උපුටා ගැනීම : Buwa Thoughts
