浙江大学博士后学术沙龙第八期活动,网易伏羲探讨智能体新领域

发布:2023-06-07 10:47:14
阅读:9088
作者:网易伏羲
分享:复制链接

6月5日,浙江大学博士后学术沙龙第八期活动在浙江大学玉泉校区圆满完成。本次活动是由浙江大学博士后联谊会携手网易伏羲实验室共同举办的联合学术沙龙,主讲人范长杰、丁彧、李林橙、赵增四位博士均来自网易伏羲实验室。本次沙龙围绕网易伏羲自成立之初就开始在人工智能领域所做的工作为核心议题,分别对面向智能体编程、数字虚拟人、视觉计算、AIGC系统建设等成果方面展开了分享。

网易伏羲负责人范长杰在分享中表示:随着国民老龄化程度的加深,人口红利的消失,各行各业将持续面临劳动力短缺、用工成本高等压力。让AI和机器人处理更多重复性、高危性等工作,提高人力价值,是当今社会智能化发展的必然趋势。网易伏羲作为国内顶尖的人工智能实验室,正在探索一条以人机协作为核心,帮助企业解决AI门槛高、研发周期长、应用落地难等现实问题的可行之路。

有灵机器人平台

有灵机器人平台正是基于该背景,并围绕AOP等思想设计的一套全新的编程范式,其核心价值在于为对接机器(或AI)和人工提供了统一的规范接口和服务。目前,网易伏羲多条业务已经接入该理论方法。以西南重点基建项目建设为例:平台一方面通过人机协作让传统挖掘机实现智能化生产,另一方面,通过线上分发众包任务,使传统挖机师傅不再从事重复枯燥、具有危险性的工作。除挖掘机器人应用场景外,平台还在游戏人物捏脸、图文识别检测、智慧园区、美术众包等场景中皆有落地,验证了人机协作平台的强落地性、可持续性、可复制性。

网易伏羲虚拟人表情

在本次交流中,网易伏羲数字虚拟人方向的丁彧博士向大家介绍了伏羲在虚拟人表情方向前沿研究和落地应用的最新进展。针对AI表情合成、捕捉和绑定等三个方面,他分享了伏羲团队的深入探索和实践,展示了网易多款游戏中应用这些技术的实际效果。其中,伏羲AOP编程范式的运用,为AI表情捕捉和绑定的算法流程建模提供了有效方案。这些工作都已成功应用于网易多款游戏,例如《逆水寒》、《天谕》、《遇见逆水寒》和《逆水寒(手游)》。以上工作致力于实现3D表情参数自动生成和跨角色的复用。此外,伏羲在表情领域发表了超过20篇顶级会议和期刊论文,并率先提出了表情的135种划分标准,进一步推动了行业进步。不仅如此,伏羲连续三次在图像视觉领域的顶级会议(ICCV2021,CVPR2022-2023)中获得表情感知挑战赛(ABAW)冠亚军,共获得六项冠军和两项亚军。

网易伏羲视觉计算

网易伏羲视觉计算方向的李林橙博士则主要分享了游戏和元宇宙应用的3D人物和场景创建的智能化探索。以往的人工建模过程工作量大,难以满足用户多样化、个性化、定制化的需求。对此,李博士详细介绍了网易伏羲在3D人物和场景智能创建(3D AIGC)方面的研究工作。通过基于3D骨骼和网格的智能创建方案,用户只需输入图像或文字即可创建出真实立体的人物形象,复制真实3D场景的数字孪生,甚至生成理想中的3D场景,充分满足个性化和定制化需求,优化用户体验。这些成果的应用,为数字世界的构建和数据表现提供了无限可能,为行业注入了新的活力。

交流最后,网易伏羲人工智能专家赵增博士围绕《网易伏羲AIGC系统建设及实践》展开了分享:生成式人工智能技术日趋成熟,以自然语言作为驱动,其在文本、图像、音视频、3D内容上的生成效果不断刷新大众认知。然而在生成式人工智能从研究领域进入工业场景的时候,依然面临可控、适配和成本等多个维度的挑战。

网易伏羲自研图文模型-丹青

网易伏羲自研图文模型-丹青

网易伏羲从2018年起开始建设生成式人工智能技术,并得到浙江省科技厅重点研发项目支持。自研模型规模从最早的一亿参数增长至千亿参数,模型领域从文本拓展到图文、音乐、行为序列等多种模态,积累了丰富的预训练模型训练和工程优化的经验。相关技术也已经应用在网易集团内的文字游戏、智能NPC、文本辅助创作、音乐辅助创作、美术设计、互联网搜索推荐等业务场景,并取得了显著的业务效果。

网易伏羲作为国内专业从事游戏与泛娱乐AI研究和应用的顶尖机构,会持续在强化学习、图像动作、虚拟人、自然语言、用户画像、大规模预训练模型等领域持续探索,并结合有灵机器人众包能力,引入“人”的决策及数据闭环,进一步提升智能体的能力。

扫码进群
微信群
免费体验AI服务