【AiBase提要:】2)编码器和码本训练,固定好波形编码器后,训练Transformer编码器与离散码本,获得稳定可分离的脑电波表示。
要点:另一方面,这也要靠对情绪的把控、对社交文化的洞察。蛋仔通过各种互动设施、结合网络热点推出的动作表情等手段,给了玩家一种低负担表达情绪的窗口。这种窗口,或许是和路过的蛋仔「举高高」、叠成一串糖葫芦,或许是用道具整蛊路人,但不管怎么做,大家都不会有什么负面感受。
另外,DreamTalk还具有说话风格预测的功能,能够根据语音预测说话者的风格,并同步表情,使得动画更加贴近原始音频。此外,该框架适用于多种场景,可以用于歌曲、不同类型的肖像,甚至在嘈杂环境中也能表现良好。