站桩的正确姿势
羿阁 发自 凹非寺
量子位 | 公众号 QbitAI
你有没有看过油管很火的外国小姐姐模仿游戏NPC视频？
△来自YouTube@Loczniki official
这僵硬的姿势、空洞的眼神、面瘫的表情，让游戏玩家们直呼DNA动了！
如果你也苦于此很久了，现在，网易的一项新技术将轻松改变这一局面：
只需一段语音，AI就能自动生成3D对话动作，效果甚至超越真人！
不仅能按角色的性别、说话的习惯和姿态，合成不同风格的动作，还可自由替换或指定待定动作。
△左图为男性，右图是女性
目前，该技术已在语音合成手势动作领域的权威赛事GENEA 2022上斩获第一，并被ICMI 2022收录。
效果超越真人的新技术
在此之前，业界最常用的语音合成对话动作技术是StyleGestures。
该技术由美国艺电（Electronic Arts）推出，曾在2年前的第一届GENEA 2020中取得第一。
但与真实动捕数据相比，StyleGestures合成的动作仍有明显的机械感，且缺少可控性，不同的语音合成效果很随机，有种碰运气的感觉。
为了解决这两个问题，网易的新技术分为离线的数据库构建和在线的语音驱动动作合成两个模块进行。
数据库构建
GENEA 2022主办方发布的18小时数据集中，包括不同说话人的语音、文本和对应的全身动作。
由于没有经过人工的清洗和处理，导致动作数据中有很大一部分的动作质量较差。
因此，研究人员需要先对此进行预处理：舍弃动作质量较差的数据、完善不带手指旋转信息的动作、再通过左右对称的方式生成更多的数据集。
其次，根据说话文本单词之间的时间间隔，将连续的文本切分为短片段。
并且针对时长小于1s的连续动作进行合并，对左右半身的动作进行镜像扩充，最终得到约6000个全身动作片段，以及时长范围从1s的短句到超过10s的长句。
接下来是对动作节奏和语音节奏进行自动标注。
动作方面，说话人每做出一个变化的手势，就对应于一个节奏变化的时间点，简单来说就是特定单词重音时需要手势进行一次变化，即手势有一个明显的速度变化的过程。
因此通过计算双手速度的极小值，把每个极小值的时间点作为节奏的时间点，最后每个动作片段的节奏可以表示为长度为32位的0-1向量，1表示手势动作变化的时间点。
语音方面，根据语音对应文本中的每个单词时间点信息，同样可以得到语音对应的节奏。
如下图所示， 每个语音片段的节奏可以表示为长度为32位的0-1向量，1表示单词出现的时间点。
最后，在对每个动作片段建立动作节奏后， 还需要建立动作图。
动作图是一个有向图，图中的每个节点表示一个动作片段，两个节点之间的连边则表示这两个动作之间过渡的代价。
过渡代价越小，也就意味着两个动作之间的过渡越自然，这一步可以帮助将离散的动作片段合并为长的平滑过渡的全身动作序列。
语音驱动动作合成
在离线建立动作库之后， 就可以输入任意一段语音和对应的文本进行在线合成。
在对语音和文本进行算法自动切分后，利用训练后的StyleGestures这一概率生成式的神经网络模型，生成期望的动作。
其中，上半身的动作最为重要，研究人员利用动态规划算法，从构建的动作图中搜索动作节奏和动作风格嵌入匹配误差最小的动作序列，同时保证前后动作的过渡代价小、过渡自然，最后输出一个节奏匹配的上半身动作序列。
下半身动作的合成则不用考虑节奏，只考虑下半身动作之间过渡的自然性即可，同样经过图优化得到一个下半身动作序列。
最后，采用混合的方式融合上下半身动作，就得到了和语音文本匹配的全身动作序列。
与其他参赛系统相比，网易的新方法在在人类相似性评估中取得了最高的中位数分数，甚至超越了真实人类水平。
在适当性评价中，该方法在上半身表现中排名第一，在全身表现中排名第二。
研究团队
研究团队来自网易互娱AI Lab，作者共三人。
研究人员指出，这项新技术不仅可用于游戏中，虚拟角色线上演讲、数字人动作动画合成、元宇宙形象等等场景也都能使用。
论文链接附在文末，感兴趣的小伙伴可以自取～
论文链接：https://dl.acm.org/doi/pdf/10.1145/3536221.3558063
— 完 —
量子位 QbitAI · 头条号签约
","force_purephv":"0","gnid":"976198fae0d0b4f6d","img_data":[{"flag":2,"img":[{"desc":"","height":"499","s_url":"https://p0.ssl.img.360kuai.com/t01b5aa012e1c6a2464_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01b5aa012e1c6a2464.gif","width":"300"},{"desc":"","height":"370","s_url":"https://p0.ssl.img.360kuai.com/t01416113ceb095bd12_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01416113ceb095bd12.gif","width":"1079"},{"desc":"","height":"555","title":"","url":"https://p0.ssl.img.360kuai.com/t01890a85665c62179f.jpg","width":"1080"},{"desc":"","height":"470","title":"","url":"https://p0.ssl.img.360kuai.com/t01af8e154e9c2a4ca0.jpg","width":"948"},{"desc":"","height":"406","title":"","url":"https://p0.ssl.img.360kuai.com/t01c1e229f8cee7c576.jpg","width":"934"},{"desc":"","height":"843","title":"","url":"https://p0.ssl.img.360kuai.com/t01f912724a08cd8391.jpg","width":"1080"},{"desc":"","height":"224","title":"","url":"https://p0.ssl.img.360kuai.com/t01e7a9dd96f16e1a52.jpg","width":"1080"},{"desc":"","height":"878","title":"","url":"https://p0.ssl.img.360kuai.com/t01fdd73e9107aeb3f2.jpg","width":"972"},{"desc":"","height":"178","title":"","url":"https://p0.ssl.img.360kuai.com/t016c5a7b42636764a1.jpg","width":"1080"}]}],"original":0,"pat":"art_src_3,sexamb,fts0,sts0","powerby":"hbase","pub_time":1668752700000,"pure":"","rawurl":"http://zm.news.so.com/e3c40ebb5e32354063ebc1caa6746bbc","redirect":0,"rptid":"1acbdf3b6ea73d9b","s":"t","src":"量子位","tag":[{"clk":"ktechnology_1:小姐姐","k":"小姐姐","u":""},{"clk":"ktechnology_1:网易","k":"网易","u":""}],"title":"游戏NPC不再是站桩工具人，AI凭对话内容生成3D动作，比真人更像
谭阳荔4191怎样站桩? -
乔裘仲15057011671 ______ 气沉丹田.气归根.气内守.气不流失.是练功的基础.没有好的站桩.就没有一切.
谭阳荔4191谁会站桩?教我一下,谢了 -
乔裘仲15057011671 ______ 步骤 第一步,低桩(九十度)马步冲拳(拳心要空),一次约100下(约30秒可完成), 练后要意守小腹三分钟.每天练两次. 第二步,一天增加10下,一日不可断. 第三步,三月后,便可一次完成1000下;如能到2000下更好;一次不要超过10分钟(一般一分钟200下). 第四步,当达到1000下时,不再冲拳,只习四平式马步桩功,静站即可.如是达到10分钟则结束,意守小腹3分钟. 第五步,当达到第四步不费力时,双手握拳屈肘做双峰贯耳式(拳心向前,拳眼向耳),尽力向后扳; 同时,站四平马步桩,塌腰挺胸,如是10分钟,结束.意守小腹3分钟.
谭阳荔4191浑圆桩是怎么站的? -
乔裘仲15057011671 ______ 站桩需遵守四容五要的原则,四容即:头直、目正、神庄、气(声)静;五要即:恭、慎、意、切、和.恭者神不散,慎如深渊临,假借无穷意,精满浑元身,虚无求实切,忽失中和均. 初习浑圆桩,首先应将整体间架安排正确,在虚灵挺拔...
谭阳荔4191初次怎样站桩
乔裘仲15057011671 ______ 建议在找到名师指点之前,先站几年养生桩.这样的话,可以帮你扫清很多障碍,比如出偏,比如找不到好师傅(练好了,师傅看得顺眼呀).
谭阳荔4191正确的扎马步或者站桩的姿势是什么样的 -
乔裘仲15057011671 ______ 有个女同学一直说扎马步能瘦腿,本人也是一直持怀疑态度,不过她说扎马步主要锻炼大腿内侧肌肉,一是燃烧脂肪,二主要是不易增长赘肉了.把她转述的方法说下吧,本人未经证实,同学的腿很匀称健美,不知究竟是不是扎马步扎的…… “扎马步就是脚站马步,脚板不要内八或者向外.扎了马步之后通常很多人背部会弯下,但是我们不要弯,背要挺直,当你的腿蹲到成90度角后就会感觉到大腿内侧酸酸的,就代表你做对了.接着就停止不动,扎1分钟,虽然说只是1分钟,但是真的很累,流很多汗,每天坚持地做就有成果了哦!”
谭阳荔4191太极浑圆桩怎么站 -
乔裘仲15057011671 ______ 背要浑圆,胸要含,头要中正脊要直,臀要敛,腹不可平直,膝不过尖,指要撑,臂要圆!写的再细不如找个好老师!毕竟写的东西总是抽象的!
谭阳荔4191我想知道无极桩的站法 -
乔裘仲15057011671 ______ 常练无极桩气功,可增强人体的健康,推迟衰老,为四化多做贡献. 一、无极式气功与其他气功的区别: 1、调身:三点对成一直线(即百会穴、会阴穴、涌泉穴三点). 2、调心:意守脐中. 3、调息:自然呼吸. 二、无极气功的特点 1、动...
谭阳荔4191站养生桩有什么具体的细节要求? -
乔裘仲15057011671 ______ 1. 注意体会“松”“静”的要领.松是身松,静是心静.明白这个,大家就不要再问我们可不可以听着cd或者看着电视站桩这样的没营养问题了.2. 把握住身正的要领.身是身体这条脊椎,这个要正.还体会不到脊椎的学员,能把握住从咽喉到...
谭阳荔4191太级拳站桩时的标准动作?谢谢...
乔裘仲15057011671 ______ 一个是马步桩:双脚与肩同宽,平行,小腿垂直地面,身体下蹲,屁股要内收,上身含胸,使得后背成圆形,头顶与尾椎乘一直线. 手臂前伸,手腕与肩同高,拇指向下,手心向外,双手之间有20公分,肘部向外,不许耸肩,也要松肩坠肘. 一个是虚步桩:如同手挥批把. 其实太极拳的每一个定式都可以看成一个桩,我自己当初练拳时,到每一个定式都定一会,站累了再做下一个动作. 练太极拳的桩功,一定要与练拳一样要放松,不要急于求成.
谭阳荔4191什么是站桩? -
乔裘仲15057011671 ______ 站桩是中国武术普遍采用的筑基手段.站桩不仅仅是扎马步,我知道的还有弓步桩、虚步桩;站桩也不光是为了练腿力. 我只略知一点太极拳的站桩: 太极拳习练时要求虚领顶劲、沉肩坠肘、含胸拔背、松腰敛臀……立身中正、心静体松……...