时间:2024-06-21 来源: 中国图象图形学学会
前言:中国图象图形学学会自2015年起开始组织实施中国科协青年人才托举工程项目(以下简称青托工程),青托工程是中国科协赋能全国学会、面向32岁以下的青年人才,创新遴选机制和培养模式,打造国家创新人才后备队伍的一项人才服务项目。目前,中国图象图形学学会成功推荐27位青年人才入选中国科协青年人才托举工程,学会官网等将陆续展示被托举人风采,敬请关注。
朱昊,南京大学智能科学与技术学院研究员、助理教授,南京大学姑苏青年教授,研究方向为三维视觉。聚焦三维数字人建模技术,发表发表学术论文30余篇,包括TPAMI、CVPR、ECCV、AAAI、SIGGRAPH等计算机视觉、人工智能和图形学领域的顶级期刊和会议。建立了大规模高精度三维人脸数据平台FaceScape,在此基础之上提出了多个数字人三维重建、生成和驱动模型。相关研究成果被应用于多部真人CG影视作品的制作,以及联合国世界文化遗产-大足石刻的数字化建模。获得IEEE杰出青年作者奖、江苏省双创博士、南京大学博士生校长特别奖等荣誉,入选第八届中国科协青年人才托举工程。
初识光场:科研旅途的起点
朱昊对三维视觉的浓厚兴趣,源自他学生时期对光场重建系统的深入探索。光场重建,这一通过采集多视点二维图像并结合算法恢复物体三维模型的技术,当时在国内尚属前沿。在研究生阶段,朱昊勇敢地选择了实现高精度光场重建系统作为自己的首个研究项目,旨在为人脸三维建模提供更精准和高效的解决方案。经过长时间的努力,这一系统在南京大学成功落地,并被应用于多部真人CG影视作品的拍摄制作。这一经历不仅为朱昊积累了丰富的科研经验,更点燃了他对三维视觉技术的热情。他坚信,随着科技的不断进步,这一技术将为每个人轻松构建三维虚拟形象,成为大众消费者进入“元宇宙”的钥匙。
AI赋能:开启三维建模新篇章
在光场重建技术取得成功后,朱昊并未止步。他开始深入思考如何打破面向数字人的三维建模技术的限制,使其更加亲民和便捷。他意识到,结合手机等移动端设备,开发出让消费者能够快速、轻便地为自己创建三维模型的技术,将是三维视觉的未来趋势。而人工智能算法,则为这一愿景提供了无限可能。在随后的研究中,朱昊聚焦于结合深度学习算法和人物结构化先验,致力于开发高效易用的三维数字人建模方法。他尝试以任意拍摄的单幅图像、文字描述、语音等多模态信息为输入构建三维数字人模型,这一创新大幅提升了数字人建模的精度和实用性。
展望未来:深化研究,推动应用
展望未来,朱昊旨在深化数字人建模技术的研究,尝试结合大模型先验和小样本学习方法,解决高质量数字人数据稀缺这一瓶颈问题,力争在三维数字人大模型、情感表达、多模态驱动上取得新的突破。同时,他渴望探索三维视觉技术在更多领域的应用,并致力于推动相关技术的产业化进程。
青托收获:科研之路上的重要助力
对于中国科协青年人才托举工程项目的入选,朱昊深感荣幸。青托项目为他提供了宝贵的资源和平台,使他能够更专注于计算机视觉领域的研究。在这一过程中,他获得了与顶尖专家交流合作的机会,极大地拓宽了自己的学术视野。青托项目不仅提供了资金和资源上的支持,更给予他精神上的激励和鞭策,让他在科研的道路上不断挑战自我,勇攀高峰。