第十二届中国科大《计算机图形学前沿》暑期课程(第五天)
2024年7月12日星期五,第十二届中国科学技术大学《计算机图形学前沿》暑期课程第五天,全天由中国科大安徽省图形计算与感知交互重点实验室的张举勇老师主持进行。
课程介绍
张举勇老师简要介绍了今天课程的主题—《虚拟数字人》的含义及其用途。数字人是人类在数字化空间中的具象化身,是元宇宙和虚拟现实产业的核心研究领域之一,广泛应用于影视、传媒、文旅等众多领域。随后,张举勇老师简要介绍了今天的课程内容以及讲者的背景。
课程1
来自中国科学技术大学的郭玉东老师带来了题为《三维数字人表示》的课程。首先,郭老师通过展示一些常见的电影特效,介绍了三维数字人技术的广泛应用。接着,他主要讨论了数字表示在表达高质量几何和渲染方面的优势。最后,郭老师结合之前课程中生成模型的内容,指出生成模型在数字人几何中的应用,重点探讨了神经隐式场和3DGS技术在数字人表示中的应用。
课程2
来自北京师范大学的张鸿文副教授主要从事三维视觉研究,他带来了题为《三维数字人体建模》的课程。首先,张老师介绍了三维数字人的研究背景,指出该研究方向主要是利用有限的观测数据,通过设计智能算法,实现便捷、高效的数字人体建模。接着,张老师从运动捕捉、表面重建和化身驱动三个方面对数字人体建模进行了系统性的介绍。最后,张老师对之前的内容进行了总结,并结合当前一些新出现的技术展望了未来的研究方向。
课程3
郭玉东老师带来了题为《多模态驱动与编辑》的课程。首先,郭老师通过游戏和电影等领域中的应用,阐述了多模态驱动的研究价值。接着,他详细讲解了多模态驱动的关键技术,包括动作捕捉信号驱动、语音/文本驱动和多模态编辑。最后,郭老师介绍了一些最新的研究成果。
课程4
来自微软亚洲研究院的杨蛟龙老师带来了题为《Generation and Animation of 3D Head Avatars》的课程。首先,杨老师简要介绍了3D数字人生成的背景与内容。随后,他介绍了一些关于数字人像生成的经典研究工作。接着,杨老师详细讲解了数字人像的语音驱动技术,分别介绍了基于视频和基于图像的相关研究。最后,杨老师展望了未来数字人研究的发展方向。
课程5
来自华为的徐迪老师带来了题为《数字人产业应用》的课程。首先,徐老师从商业角度对数字人产业进行了全面概述。接着,他详细介绍了2D播报型数字人、3D IP型数字人以及AIGC在数字人中的应用三个方面的内容。
课程总结与讨论
最后,张举勇、郭玉东、徐迪和杨蛟龙对今天的课程进行了总结,探讨了数字人技术的研究方向和商业应用价值。
报告人简介
张举勇,中国科学技术大学
中国科学技术大学数学科学学院教授,获国家基金委优秀青年基金、中科院青促会优秀会员资助。2006年本科毕业于中科大计算机系,2011年博士毕业于新加坡南洋理工大学,2011年至2012年于瑞士联邦理工学院洛桑分校从事博士后研究。研究领域为计算机图形学与三维视觉,近期主要研究兴趣为基于神经隐式表示、逆向渲染与数值优化方法对真实物理世界进行高效高保真三维数字化,以及高真实感虚拟数字内容的创建。
杨蛟龙,微软亚洲研究院
微软亚洲研究院主管研究员,研究方向为三维计算机视觉、人脸人体建模与图像生成。2016于澳大利亚国立大学与北京理工大学获得双授博士学位后加入微软亚研,以第一作者或所指导学生为第一作者在CVPR/ICCV/ECCV/SIGGRAPH/NeurIPS/TPAMI/TVCG等顶级计算机视觉与图形学会议和期刊发表论文30余篇。多次任CVPR/ICCV/WACV等会议领域主席。获IEEE VR/TVCG 2022最佳期刊论文奖,2017年中国图形图像协会优秀博士论文奖(全国4篇)。
徐迪,华为
华为云技术专家,负责AIGC及数字人的相关技术研发与产品化。长期从事计算机视觉及人工智能的技术研发与产品落地,作为项目负责人主持多项国家及省部级项目,相关工作发表于TPAMI、CVPR等顶级期刊会议上,获国家发明专利十余项。
张鸿文,北京师范大学
北京师范大学人工智能学院副教授。主要从事以人为中心的三维视觉研究,尤其是三维人体的运动捕捉与生成、化身重建与驱动等课题。发表CCF-A类/领域顶刊顶会论文40余篇,其中TPAMI/TOG和CVPR/ICCV/ECCV/SIGGRAPH论文30余篇,顶会口头报告/亮点论文7篇,Google Scholar引用量近2800次,提出的动捕系列算法累计获GitHub星标量超过1200,获中国科学院优博论文/院长奖等荣誉。
郭玉东,中国科学技术大学
中国科学技术大学特任副研究员。2021年博士毕业于中国科学技术大学,后曾于杭州像衍科技公司担任研发总监,期间研发的数字人相关产品已在杭州文广电视台和中央广播电视总台多个栏目得到应用。研究方向为三维视觉与数字人,近年来在相关领域的顶级期刊与会议上发表论文10余篇,曾获得华人数学家联盟最佳论文奖(若琳奖),并多次担任CVPR、ICCV、TVCG、SIGGRAPH ASIA、TMM等期刊会议审稿人。