Active Maters

Film Crib Entertainment Ecosystem have announced a strategic partnership with 3D motion capture technology group Avatary FACEGOOD to develop facial performance motion capture elements for the upcoming Film Crib Original RETROGRESSION game based on the [...]

FACEGOOD MIP 加速计划已正式启动！ (Metaverse Inception Program) FACEGOOD正面向全球3D内容制作方向（游戏、影视动画、虚拟数字人等）招募MIP成员!! 我们将为初创团队及个人提供工具、资源和机会，包括产品支持、技术支持、市场宣传、融资及业务对接等多项扶持。为加速初创团队的成长，鼓励其将技术拓宽更多的应用场景！ FACEGOOD将针对MIP正式成员提供价值千万元产品扶持其创业。 （扫码申请，即刻申请加入）愿与初创伙伴们一起携手共进！加速福利包产品支持：1. 软硬件免费租借、赠送、折扣采购等多种形式。2. 优先享有FACEGOOD最新技术成果测试名额。3. 新产品推向市场前提供给初创团队使用。技术支持：1. 优先提供技术咨询快速通道。2. 免费的在线培训名额。3. 不定期邀约国内外顶尖行业专家、技术专家进行指导。市场宣传：1. 探访幕后创业故事免费宣传，论坛、展会、赛事活动、政府及产业活动中展示机会。2. 可受邀参与FACEGOOD组织的全球各类线上+线下交流活动（技术沙龙、技术研讨会、开发者大会等），分享和演讲展示。 融资或业务对接：FACEGOOD将为优秀团队或项目进行业务对接、融资对接。（可获百万级业务对接）申请条件地区：全球。类型：3D内容制作方向（游戏、影视动画、虚拟数字人等）的个人创作者或初创团队。费用：无需申请费、会员费，可免费申请。非Avatary用户也可参与。

2022年2月由中国传媒大学动画与数字艺术学院发起的中传-腾讯“数字艺术领军人才实验班”面向中国传媒大学全日制本科大学三年级学生以及在读研究生招收45名优秀学生，在行业专家、高校名师与腾讯IEG互动娱乐事业群的带领下进行为其一年半的专业学习与实践。 近期“数字艺术领军人才实验班”正式启动课程，FACEGOOD受邀从面部表情制作全流程技术为切入点，为学生们普及了当下关于面部表情制作的最新技术研发成果和技术原理，围绕当今前数字艺术行业沿领域全真互联网（元宇宙）、虚拟制片、数字虚拟人、3A游戏等场景，如何让面部捕捉技术应用到实际创作场景中，以及针对在不同创作场景中面部表情制作的难点进行讲解和教学。 FACEGOOD官方讲师黄佳豪老师对45位优秀学生进行了为期两天的教学互动。 FACEGOOD此次课程回顾 Avatary软件基础功能介绍 Avatary离线流程原理讲解 Avatary离线流程——不同模型的案例讲解 Avatary中【Track】跟踪点与人脸结构布线讲解 Avatary中【Autoface】自动生成表情体 Avatary中【Rigger】快速绑定流程+手动修改模型 互动环节 继去年FACEGOOD走进清华大学、中央美术学院、中国传媒大学进行宣讲后，受到各校师生的关注，FACEGOOD今年将陆续在高校开展更深入的课程教学活动，走进更多的院校，将结合以往在行业内的经验积累，为高校培养未来数字艺术复合型人才贡献自己一份力量，也将为高校的课题研究、课程改革、专业实训等方面助力。

序文 目前元宇宙热潮下，AI数字人也开始涉及众多领域,包含文娱、服务、教育、营销等，市面上出现的AI数字人包括功能型AI数字人如虚拟助手、虚拟导游、虚拟客服等；陪伴型AI数字人，如虚拟伴侣、虚拟家属等；社会型AI数字人，如虚拟主播、虚拟偶像、虚拟教师、虚拟医生、虚拟导购等。 （浦发银行的首位银行业数字员工“小浦”） （虎牙AI数字人晚玉） （搜狐新闻客户端联合搜狗推出的首个明星“AI数字人”主播） 为了实现虚拟数字人的多域化渗透，让更多AI数字人的场景落地，FACEGOOD决定将语音驱动口型的算法技术正式开源，这是AI虚拟数字人的核心算法，技术开源后将大程度降低AI数字人的开发门槛。FACEGOOD表示元宇宙底层技术需要更多的开发者共同携手支撑，技术的发展离不开广大开发者的推动，与开发者们共同探索、建设全新的数字人领域的技术生态，未来愿与广大开发者共同分享、一起拓新。开源项目地址：https://github.com/FACEGOOD/FACEGOOD-Audio2Face 项目背景 2019年第十届中国国际新媒体短片节组委会和FACEGOOD联合发布陆川导演AI数字人。 （图为陆川导演AI数字人形象） （图为中国国际短片节现场AI数字人陆川与观众实时交流） 观众可以和AI数字陆川面对面互动交流，为观众带来打破虚拟空间和现实空间次元壁的实时实感交流互动体验。为了能达到实时交互的效果，FACEGOOD 开发了一套数字人实时语音交互系统，实现了语音到表情动画的实时转换，今日FACEGOOD宣布将全套语音驱动表情的技术代码开源，无偿提供给广大数字人开发者使用。该技术可以将语音实时转换成表情blendshape动画。这样做的原因是在现行的产业中，用BS去驱动数字形象的动画表情仍然是主流。方便动画艺术家对最终动画产出最艺术调整，传输的数据量小，方便动画在不同的数字形象之间进行传递等等。基于这一些实际生产中的需求，对输入和输出数据做了相应的调整，声音数据对应的标签不再是模型动画的点云数据而是模型动画的blendshape权重。最终的使用流程如下图一所示： 图一 在上面的流程中，FACEGOOD主要完成Voice2Face部分，ASR，TTS由思必驰智能机器人完成。如果你想用自己的声音，或者第三方的ASR，TTS可以自行进行替换。当然FACEGOOD Audio2Face部分也可根据自己的喜好进行重新训练，比如你想用自己的声音或其它类型的声音，或者不同于FACEGOOD使用的模型绑定作为驱动数据，都可以根据下面提到的流程完成自己专属的动画驱动算法模型训练。 那么Audio2Face这一步的Framework是什么样呢？我们怎么去制作自己的训练数据呢？ 图二 如图二所示。 常规的神经网络模型训练大致可以分为三个阶段：数据采集制作，数据预处理，数据模型训练。 第一阶段，数据采集制作。这里主要包含两种数据，分别是声音数据和声音对应的动画数据。 声音数据主要是录制中文字母表的发音，以及一些特殊的爆破音，包含尽可能多中发音的文本。而动画数据就是，在maya中导入录制的声音数据后，根据自己的绑定做出符合模型面部特征的对应发音的动画。 第二阶段，主要是通过LPC对声音数据做处理，将声音数据分割成与动画对应的帧数据，及maya动画帧数据的导出。 第三阶段就是将处理之后的数据作为神经网络的输入，然后进行训练直到loss函数收敛既可以。 开源是FACEGOOD团队初心，未来FACEGOOD会坚持践行开源运动，推动行业技术发展，为开发者带来更多好用的技术，推动建设FACEGOOD开发者社区。 欢迎广大同行咨询及探讨，共同分享、学习、交流。开源技术交流可加FACEGOOD官方微信 FACEGOOD_CHINA  

赋能全球3D内容创作者 FACEGOOD加入NVIDIA(英伟达)发起的“英伟达初创加速计划NVIDIA Inception” 2021年6月，FACEGOOD获邀加入由全球GPU（图形处理器）巨头、人工智能计算的行业领袖——NVIDIA(英伟达)发起的“英伟达初创加速计划NVIDIA Inception”。 NVIDIA（英伟达）在1999年发明的GPU激发了PC游戏市场的增长，重新定义了现代计算机显卡，并且对并行计算进行了革新。最近，通过将GPU作为可以感知和理解世界的计算机、机器人乃至自动驾驶汽车的大脑，GPU深度学习再度点燃了全新的计算时代——现代人工智能”。 英伟达初创加速计划 NVIDIA Inception 是英伟达提供的一个加速人工智能创业公司发展的全球生态项目，该项目培养尖端的人工智能初创企业，为各个行业带来革命性的变化。作为一个免费的会员制创业加速项目，自从2016年项目启动以来，全球已经有8000多家初创公司加入该项目，中国区的会员公司已经超过800家，分布在全国30多个城市以及30多个不同的行业。该项目联合了国内外知名的风投机构，创业孵化器，创业加速器，行业合作伙伴以及科技创业媒体等，打造人工智能创业加速生态系统，能够提供产品折扣，市场宣传，技术支持，融资平台，客户推荐等一系列服务，加速初创公司的发展。至此，FACEGOOD也有幸加入该加速计划。 FACEGOOD专注于软体技术研究与应用，以面部为核心锚点，重塑文化、娱乐内容创作方式，并逐步拓宽到更多应用领域。 FACEGOOD创建于2015年，团队在工业软件、计算力学与图形学领域具有十几年的技术积累，包括最底层的编译器开发。从2016年开始致力于研发工业级的3D表情动画软件，前期以项目合作的方式为原力、追光、网易、虎牙等动画、游戏领域的头部公司提供表情动画方面的技术支持。在开发过程中积累了10万+的人脸3D表情数据，应用AI技术深度学习、计算力学有限元法对软体进行高拟真度仿真，逐步形成了FACEGOOD以软体仿真为核心的仿真技术。   AVATARY是FACEGOOD研发的一款集成表情建模、肌肉绑定，面部捕捉及驱动的3D工业软件，可以针对动画、电影、游戏中的面部表情动画，将制作周期由原来的90天缩短到5分钟，也可以应用于虚拟偶像和虚拟直播等新兴领域，AVATARY的高精度面部捕捉技术跟踪参数达十万3D点云，属于业内先进水平。上线短短一个月内ＡＶＡＴＡＲＹ收获了网易、腾讯、追光、原力、虎牙、玄机、虚拟影业、达瓦未来、吾立方、西山居１０大用户，产品得到了头部企业认可。 FACEGOOD获邀成为英伟达初创加速计划（NVIDIA Inception）会员企业。英伟达初创加速计划为免费会员制、旨在培养颠覆行业格局的优秀 AI 初创公司。该计划联合了国内外知名的风投机构，创业孵化器，创业加速器，行业合作伙伴以及科技创业媒体等，打造人工智能创业加速生态系统，能够提供『产品折扣』、『市场宣传』、『技术支持』、赋能全球3D内容创作者FACEGOOD加入NVIDIA(英伟达)发起的“英伟达初创加速计划NVIDIA In『融资平台』、『客户推荐』等一系列服务，加速初创公司的发展。