上海科技大学推人脸模型HACK 可高质量生成3D人物模型
内容概要:
HACK 是一个新的参数化人脸模型,可以高质量生成人物头部的几何模型。
HACK 解决了现有模型的问题,包括缺乏亚洲人数据、拓扑结构和表情变形体过于简化以及缺乏颈部运动的建模。
HACK 提供了更个性化和解剖学一致的颈部和喉部控制,实现了更准确和表现力更强的头部运动。
近日,上海科技大学、影眸科技和华中科技大学联合提出了一种全新的参数化人脸模型 HACK,旨在解决现有参数化人脸模型存在的问题。该模型可以实现对头部和颈部区域的全方位控制,尤其是颈部区域的个性化和解剖学一致的控制,提供了比现有模型更准确和表现力更强的结果。
传统的参数化人脸模型主要采用 PCA 等方法来生成人脸模型,但由于数据集主要以欧美面孔为主,缺少亚洲人数据,覆盖度不全。此外,在拓扑结构和表情变形方面过于简化,无法精细还原各种结构,也无法实现个性化控制运动。而 HACK 模型则通过参数化建立头部和颈部模型,解耦了颈部和喉部运动、面部表情和外观变化,实现了对头部的全方位控制。
项目链接:https://sites.google.com/view/hack-model
论文链接:https://arxiv.org/abs/2305.04469
GitHub:https://github.com/ZoneLikeWonderland/HACK-Model/
HACK 模型已经应用于影眸科技的3D 角色生成平台 ChatAvatar 中,并能够直接生成并导出用于 Unity、UE、Maya 等主流 CG 软件中的模型文件。此外,HACK 模型还具有多种可控制的参数,可以更好地呈现头部、颈部、喉部形状的多样性,实现了高度表现力和广泛的运动范围。
为了训练 HACK 模型,研究团队使用便携式实时3D 超声成像系统捕捉了颈椎相对于演员静止姿态的解剖正确位置,并建立了一个全面的数据集,包括颈椎关节和面部网格、大规模静息 mesh、喉部几何形状、表情 mesh、动态 mesh 序列、外观纹理、说话的图像和计算的法线等。通过对这些数据进行处理,研究团队训练出了 HACK 模型。
HACK 模型的应用领域非常广泛。首先,通过拟合 HACK 参数,可以精确重建给定的目标扫描或网格,重建误差较低,并且可以操纵参数来创建不同的表情、姿势和外观。其次,HACK 模型可以与现有的面部表演捕捉技术结合使用,用于角色动画,实现高保真度和表现力强的动画效果。此外,由于 HACK 模型头部和颈部骨骼解剖学上一致,还可以用于在不同主体之间转移颈部动画。
总之,HACK 模型的提出填补了现有参数化人脸模型的空白,解决了欧美面孔为主的数据集缺陷,提供了更准确、更表现力强的结果。该模型的广泛应用将进一步提高数字角色的丰富度和真实性,并拓展数字角色应用场景的空间。
梅西球迷球鞋搜索量暴涨 网友调侃拥抱”梅西只需258元
梅西的中国之行非常热闹,其中“梅西同款”、“球类运动装备”等在天猫618期间也成为热销商品。在阿迪达斯天猫官方旗舰店,阿根廷“三星“主场球衣的搜索量同比增长了140%,梅西相关的正品足球装备的搜索热度更是爆增100倍,“梅西的冠军T恤“、”梅西新款战靴“在天猫的618销售期间非常受欢迎。站长网2023-06-17 08:34:230000DeepMind新国际象棋AI系统AZdb吊打旧系统AlphaZero
文章概要:1.谷歌DeepMind开发了一个集成系统AZdb(AlphaZeroDb),将多个AlphaZero代理组合成一个“联盟”,以增强AI国际象棋能力并提高泛化能力。2.AZdb代理使用行为多样性和响应多样性,创造独特下棋风格,更好适应不同对手和新局面。3.测试显示,AZdb解决两倍难题,ELO评分提高50分,优于旧版AlphaZero。站长网2023-08-26 16:14:330000零一万物Yi-34B-Chat微调模型及量化版开源
11月24日,零一万物基正式发布并开源微调模型Yi-34B-Chat,可申请免费商用。同时,零一万物还为开发者提供了4bit/8bit量化版模型,Yi-34B-Chat4bit量化版模型可以直接在消费级显卡(如RTX3090)上使用。在各项评测中,Yi-34B-Chat在开源模型中取得了优异的成绩。模型在英文知识水平评测集、中文综合考试评测集以及数学推理能力评测集中表现出色。站长网2023-11-27 08:49:400003全网粉丝超4000万,“猫一杯”的互联网唠嗑记 | 新榜专访
靠唠嗑收获千万粉丝关注,是一种怎样的体验?“Thurman猫一杯”或许深有体会。从2020年4月发布第一条吐槽法国快递时效的视频开始,她几乎事无巨细地分享生活日常,吸引粉丝们与之互动,还诞生出多个花名。不管是她啃菜叶子的酷似程度被唤作“豚鼠”;还是她弄丢自己竖大拇指照片做屏保的手机,获得“广州白云机场大拇哥”的称号……这些片段在她的讲述中好笑又离谱,像是在听身边好友唠嗑聊八卦。站长网2024-01-22 14:11:250000你要的Aa字库来啦,7款超值用字攻略字体超市正版商业授权
随着字体版权市场日趋成熟,每个字体品牌都在寻求好的字体商业版权销售平台,为用户提供一个性价比高的商业授权模式,而字体超市就是这的一个平台。近期,字体超市也迎来了一个新的字体品牌——Aa字库。说起Aa字库,相信很多设计师都比较知道这个字体品牌吧。Aa字库成立于2015年,致力创造原创设计风格独树一帜的版权字体,字体具有极高的性价比,广受用户喜爱。站长网2024-03-11 14:31:440002