AI大模型快速落地成网易第一个任务多款产品首次亮相人工智能大会

  无人装载机器人、AI绘画体验活动、虚拟口语教练、元宇宙活动平台……在2023世界人工智能大会(WAIC)上,网易多款人工智能大模型落地产品首次亮相,集中展示了在人工智能基础设施层、引擎层、平台层、模型层、应用层的领先创新成果。今年以来,网易坚持实用主义,快速推进AI大模型在游戏、教育、工业、音乐等关键产业场景的落地。

  在工业领域,网易伏羲基于AOP理论思想及自研工业大模型,推出国内首台无人装载机器人和挖掘机器人,参与到矿山、铁路等一线场景的建设。

  在教育领域,由网易有道自研的国内首个教育大模型“子曰”最新应用成果——虚拟人口语教练首次亮相,参会者能体验到类似线口语私教体验。

  在游戏领域,AI技术对关键环节的工作效率提升高达90%,并且基于自研语言、图文模型,已成功探索出智能NPC、AI捏脸、时装设计等游戏玩法。

  在音乐领域,网易天音基于自研的AIGC算法,为音乐人提供AI作词、AI编曲、一键Demo等一站式的辅助创作工具,帮助音乐人提升生产效率和生产质量。

  在元宇宙领域,此次网易瑶台带来了“支付宝会员生日会”,用户都能够通过支付宝APP自由预约、邀请好友在元宇宙一起庆生。活动上线万名用户参与。

  网易CEO丁磊在浙江省平台经济高质量发展大会上表示,用最快的速度探索 AI大模型的创新、应用,是网易的首要任务。据了解,网易AI大模型正在加速覆盖百余个产业应用场景,在加速创新应用的同时,网易伏羲有灵众包平台今年还将为10万人提供AI新职业,包含挖掘机远程驾驶员、AI绘画师、AI表情绑定师等人机协作的就业岗位。平台还会根据求职者的用户画像,提供针对性的培训,帮助他们实现能力和收入的提升。

  在人工智能大会的具身智能展区,网易伏羲无人装载机器人展位上围满了人,排队等待着戴上VR眼镜,身临其境地体验“无人工地”。无人装载机器人由网易伏羲和中建八局联合研发,基于拌和站场景研发的高智能化、全自动化的一款主力工程机械,一方面,采用无人驾驶技术,实现环境感知、路径规划、主动避障、自主作业、自动监控与提醒等自动化功能;另一方面,利用数字挛生技术,搭建搅拌站智能系统,系统能利用大数据平台的综合数据分析,自主择优为站内装载机分发任务、实现装载机作业路径的智能规划执行。

  网易伏羲工程机械技术负责人介绍,无人装载机器人有4个方面的技术突破:一是,高精度定位导航系统,自主定位精度优于5cm,自动驾驶综合控制精度优于15cm,为自动化操作提供稳定安全支撑;二是,基于学习的运动控制方案,可快速适配不同车型,可自动执行移动、加减速、铲卸料等动作,铲料作业满斗率达到95%以上,卸料料斗残余率在5%以下,铲运效率接近老师傅;三是,采用高精度视觉感知算法,实现对料仓和料斗中物料的实时检测,并动态分析搅拌站内的生产情况,实时监测误差低于5%;四是,采用高精度场景重建和实施渲染技术逼线D场景,通过数字孪生场景的模拟和预测功能,实现对作业过程的全息管控,提高生产效率与工作安全。

  混凝土搅拌站是工地的基础供给,需要24小时不间断运行,而且在运行过程中会产生大量的粉尘和颗粒物。因此,搅拌站往往面临招工难的问题。以双机180机组拌和站为例,标准配置为2台装载机+4个司机,而采用无人装载机替换后,现场仅需1名司机处理1%的特殊状况,其他99%的情况下都可以实现无人全自动上料操作。

  相关负责人表示,以往的人工智能往往是人类给算法灌输什么数据它就学什么,为了让每个工程机械都能从环境中获取信息进行自我学习,加速大模型在不同工业场景的落地,网易伏羲基于AOP理论思想及自研工业大模型,将具身智能技术应用于工程机械领域,推出了首个“自我进化”的工程机械大脑。

  目前网易伏羲无人装载机器人已应用于沪通铁路智能混凝土搅拌站,今年内将实现批量交付,让建筑工人告别危险的作业环境,实现高安全、高质量工作。与此同时,网易伏羲挖掘机机器人自去年年底登上高原参与西南重点基建铁路项目后,今年持续探索其他建筑场景落地可能性,目前已在露天矿山场景实现一个师傅可以同时操作多台挖掘机的自动化任务。

  在世界人工智能大会上,网易有道的虚拟人口语教练首次现身——AI可以像真人教练一样,有着丰富的表情,地道的口音,能够像老师一样循循善诱地陪用户对话,还能针对练习者的发音给出定制化的建议和润色,线口语练习私教。

  相比过往的口语练习产品,有道的虚拟人口语教练突破了死板的剧本式交流,更贴近真实的口语练习环境。在对话过程中,虚拟人口语教练可以配合用户进行开放式的自由对话,畅聊各种话题。当用户不知道聊什么时,教练提供“互相介绍”、“讨论天气”、“求职面试”、“心理健康和幸福”等几十种话题以供选择。

  除了虚拟人口语教练,网易有道在大会上还展示了有道词典笔系列、有道听力宝、有道AI学习机、有道翻译等多款产品,持续深化AI技术的前沿技术应用。例如,有道翻译在大会现场展现了全新功能AIBox,实现“句子润色”“语法纠错”“写作建议”等功能,让用户知其然,也知其所以然。

  据悉,包括虚拟人口语教练在内的“子曰”大模型系列应用成果发布会将于7月26日召开。届时,中文作文指导与批改、英语习题精讲等多种教育领域细分应用成果将呈现给公众。这也意味着,网易有道成为了国内率先将AIGC技术落地到教育场景内的企业。

  本届世界人工智能大会期间,网易伏羲还与上海市团市委、东浩兰生共同推出首届AI绘画体验活动,活动覆盖世界人工智能大会全展区,参会者只需输入作品关键词、选择不同绘画风格,即可生成精美的绘画作品。本届AI绘画体验活动是由网易伏羲-丹青约提供技术支持,背后依托于网易伏羲自研的图片生成模型——“丹青”。

  丹青是网易伏羲自研的中文模型,它基于原生中文语料数据及网易自有高质量图片数据训练,为100%的国产大模型。该模型训练数据经过严格的文本及图片审核,在确保数据来源合规、生成内容合规的同时,使得模型拥有较好的中文理解能力,创作出的作品能更好满足中式审美。

  除此之外,丹青约还充分结合了网易游戏美术设计的工作流,无论是生成图片的美观度,还是满足高质量要求的图片生产(如原画、美术资产等),都做了深入的探索和研发,并且支持用户跨文字、图片等多模态给予多轮修改建议,直到生成满意的图片效果。

  目前,网易伏羲也在积极推动将AI技术应用于企业美术资产的生产创作流程中,将上线有灵美术平台。该平台一方面集成了丹青约等多种AI美术创作工具,另一方面,打通美术资产制作、工具管理、审核验收等生产全链路,双管齐下提升美术创作的生产效率。同时平台还将根据人机协作数据反馈,让AI创作的作品越来越好。

  无论是伏羲有灵美术平台还是无人装载机器人,背后都依赖于AOP的理论思想。

  如何将AI的认知智能和决策智能应用在更广泛的实体领域,从事更多智力型、创造型的劳动,是人工智能领域与机器人产业研究的重要方向。在此背景下,网易伏羲提出了一套面向智能体编程(AOP)的理论思想,以人机协作的理念帮助企业解决AI门槛高、研发周期长、应用落地难等现实问题。

  AOP(Agent-Oriented-Programming,面向智能体编程)是网易伏羲基于强化学习领域MDP(Markov Decision Processes,马尔可夫决策过程)及其衍生模型设计的一套全新的编程范式,相比以往深度学习模型训练使用的数据都来自于人类投喂,AOP将人和机器统一抽象为智能体,为两者提供了统一规范的接口和服务,让机器通过人机协作的过程,在仿真环境里加速关键算法的预研和训练,进而实现拥有能够自主感知世界、理解、推理决策并与物理世界互动的智能系统。

  因此,通过AOP技术人们可以在线上可选择性地完成更多自由有趣的工作,机器可以更快速地学会人类具备的感知、认知、决策、执行、学习等能力,从而更高效实现AI和机器人落地的最后一公里问题。对于开发者而言,可以使用伏羲有灵机器人平台预置的公共智能体能力(包括数据标注、美术制作、工程机械操控等能力),也可针对行业细分场景定制化的构建智能体应用;对于求职者而言,能够最终靠有灵众包平台获得人机协作的就业机会。

  据了解,今年平台将帮10万人提供人机协作的就业机会,平台还会根据求职者的用户画像,提供针对性的培训,不断帮他们实现能力和收入的提升。