钉钉CEO无招:钉钉彻底变了,转型为AI操作系统
12月23日,AI钉钉1.1新品发布会暨生态大会召开,Agent OS、ONE、DingTalk Real等20多个AI产品亮相,这标志着钉钉彻底告别移动互联网时代的应用形态,AI原生钉钉的整体架构已然完备。
钉钉CEO陈航(花名:无招)表示:“8月份的1.0版本是AI钉钉的第一步,今天我们可以宣布钉钉彻底变了,转型为AI操作系统,这是一个AI时代的产品应该有的样子。”
以下是他的演讲全图文——
开场:从“蕨”到“木兰”
陈航:
各位嘉宾、各位媒体朋友们,以及老朋友们:大家早上好!
8月25号的时候我们发布了钉钉1.0“蕨”,今天我们为大家带来全新的AI钉钉1.1“木兰”。
我们当年取名“蕨”的时候,是希望向下扎根,向上生长,成为AI时代新生态的开始。今天取名“木兰”,是因为我们知道在地球生态演进过程中,从蕨类植物一直到裸子植物,再到现在的被子植物,木兰是被子植物中生态最庞大的一个体系。它继承了远古生态中传统、保守的DNA,但同时它有DNA中最大的可塑性。它被称为“花的始祖”,也让动物可以帮助传播种子,成为了动物和植物协同演进的一个典范。
钉钉也希望在AI时代,成为万千Agent和人类相互协同的一个基础,打造一个全新的生态系统。今天我们就以“木兰”为名,为大家揭开AI钉钉1.1。
硬件发布:DingTalk Real
我们在上一次发布会结尾的时候藏了一个彩蛋——DingTalk Real,今天我们把这个DingTalk Real带给大家。
它长成这个样子,有人说像NAS。它是干什么用的呢?它正在打造一个全新的终端,这个终端将会为Agent而生,而不再是为人而生。我们平常用的手机、电脑、Pad等设备都是为人准备的,而今天我们打造Agent的设备,DingTalk Real。
Real是干什么用的?用一个简单的视频展示一下它所具备的能力。
DingTalk Real有三大能力,我们叫“三个Real”。
第一个是 Real Entity,它将得到企业以及每一个用户的正式授权,能够在内网访问所有的系统、访问所有的数据,也可以在外网访问所有公开的互联网的各种各样的服务。
同时它具有 Real Data,内网的数据涉及到权限控制,所以在有权限控制授权范围之内可以做所有的访问。
同时它有 Real Time,会实时获取所有的网络以及内网的所有数据,这样基于实时数据进行判断与执行。
因为是为Agent而生的,所以当Agent运行的时候,我们必须要知道它所有的执行过程是否可控。所以今天的Real同时支持——当Agent在运行时可实现过程的可监控。在权限的管控以及在安全存储的范围内,每一个人、每一个企业所有的记忆都能够进行存储。同时我们也想,当Agent万一变得疯狂,它要是不可控怎么办?所以我们同时准备了一个紧急的功能,就是“拔电”。这样可以让隐形的、看不见的Agent也能变得实实在在,以应对一些特殊的情况。
系统发布:Agent OS 与“悟空”
除了运行的Agent Real以外,我们同时又要打造各种各样Agent的生态,所以今天我们带来一个重磅的发布——Enterprise Agent OS,也就是打造帮助所有Agent能够运行的一个全新的操作系统。
这个操作系统将在底层层面上,除了基于各种各样多模态的各种模型之外,上面有企业内部自己的模型,同时可能还有各种各样的CPU计算资源。我们在这之上打造了Agent开发平台 DEAP,帮助所有企业能够开发自己的Agent。同时基于应用的 MCP(模型上下文协议)相关的能力、通讯相关的能力的开放,包括AI表格的能力、语音智能、视觉智能等基础原子能力都进行MCP的开放。
推出了一个全新的产品Agent总管——“悟空”,上面就是Agent OS。同时会发布全新的官方Agent,比如AI差旅、AI招聘、AI客服、订单Agent等等,在这之上用户跟Agent交互。当然,这是一个渐进的过程,所以很多用户依然会在钉钉协同平台上保持和我们的硬件、企业应用相关的协同。
我们看一下如果基于全新的Agent OS,钉钉交互体系会发生什么改变,我们来看长成什么样子。
在上一次发布AI钉钉1.0的时候,我们发布了钉钉ONE,今天我们基于钉钉ONE对首页进行改版。在底部我们放置的是Agent工作栏,这上面会承载所有的Agent,也就是未来钉钉不再只是一个沟通的钉钉,它承载着我们和所有的Agent进行交互的一个平台,相关所有的Agent在底部进行承载,进行相互各自的切换。
所以钉钉首页的ONE,在你每天早上一打开钉钉,你的语音助理就会把所有Agent重要的事情进行全面梳理,向你进行汇报。同时相关的各种各样的消息、日程、待办、AI听记、AI表格,所有的公司相关业务处理,都会由Agent把信息全部汇总到钉钉ONE,让你一手掌握在钉钉ONE中,把所有信息进行处理。
我们除了在钉钉ONE首页进行重要消息的对话以外,同时在工作中也带来一个系统性的学习能力,叫“发现”。在AI钉钉1.0发展过程中,我们也发布了“发现Agent”,这次我们把所有的全球资讯整合的能力打造成“7新”的Agent。我们把八卦里面的地、雷、火、地、风、泽、山、水进行寓意,对新机会、新动态、新发明、新技术、新产品、新观点、新趋势,按照不同的行业会全自动在全球收集一手信息。所以以后所有企业的员工,都可以在钉钉发现上面发现一手信息,了解最新动态,做出决策。
每一个企业在不同的行业都有自己不同的需求,所以每个企业会构建自己的智慧大脑,比如在制造业、高教、医疗各个行业,都会构建自己的“7新”。这里展现出来的是我们为每个行业的BD、客户经理,为他们打造的“7新”,在得到所有账号授权之后,“7新”会自动搜集、整理各个行业全球所有的资讯,整理出来现在所有的Agent的发现,把全球最新的资讯带给相关的同学,可以带来系统性的一手学习。
接下来带大家看看刚才讲到了Agent的大总管——“悟空”。
悟空是干什么的?我们平常每天有大量的工作任务,涉及到我们有各种指示,需要打开各种的应用,然后点击各种各样的屏幕,去处理工作。我们也希望有一个无所不能的助理,他能够帮我调用各种各样的程序和Agent帮我处理工作,我把它称作“悟空”。
我们可以把它想象成孙悟空拔了一根猴毛,这个猴毛就会变成一堆“三多”(指代智能助手),这个“三多”就会调用各种各样的Agent去处理。比如在钉钉MCP能力上,它可以处理消息、可以处理日程、可以处理AI表格、可以处理AI听记。同时它在模型上可以进行全网搜索、知识问答、视频生成、图片理解。它也可以把协同办公所有能力整合在一起,可以做各种各样的研报编写,可以做PPT,甚至可以帮我们写代码。它也可以在业务集跟所有的业务系统打通,它可以自动报修,可以做自动的库存查询等等相关所有的工作,是由悟空Agent听到指示之后,自动指挥各种各样的Agent和任务执行。
举一个例子,比如日程、招聘、数据分析层面上,假设现在你跟悟空说“我要创建一个日程,‘三多’帮我约一个人,几点几分”。“三多”会自动跟相关所有人进行沟通、协同,找到一个最合适的时间点,大家都方便的时间,自动完成日程约定。
垂直场景Agent:AI印、AI招聘、AI差旅
发布了悟空之后,我们也会发布一系列全新的Agent,给大家展示第一个全新的Agent服务,叫 AI印。
在企业里面经常有各种各样丰富的设计、印刷的需求,比如我们要参加一些展会要印刷,我们要做产品手册等等。平时这些企业,尤其中小企业要做这些工作的时候,他要找设计,交给外包,或者找设计公司,还要找印刷厂,得到一个可控的质量、稳定的交付期,都是比较痛苦的事情。今天钉钉的AI印,希望打造一个从数字设计到物理交付的一站式全新的服务体系,用Agent来实现。
我们来展示一下,左边是用最先进的一个文生图的大模型进行文生图,右边是用钉钉的AI印Agent生成,我们来试一下,看看效果。
大家一眼看上去,能看出区别吗?实际上挺难看出来的。但它是一个商业级的交付结果,所以这个产品最终生成这个图片之后要去印刷。所以当你要正式交付印刷的时候,这个设计效果必须完成商业级的结果,质量管控。绝大多数在商业交付中我们经常碰到的问题,如果用模型生成一个商业级的印刷,会出现图片和文字之间产生黏连,所以你经常发现文字不对,跟图片产生了融合,很难在各种细节上保持排版正确,同时文字有幻象出现。但是我们用AI印,在底层模型上加上了相关人工处理的支持,所以,我们展示出来最终的印刷结果能够达到商业级交付质量。
我们把印刷实现商业级印刷设计交付之后,可以支持全球相关的各种印刷能力支撑。在印刷层面上,会通过六大工厂实现中心化印刷,用最高质量的机器,给到交付结果。我们保证,你所有设计交付工厂印刷完之后,你所有的信息资料都会得到专属的保密。同时价格会实现全网最优。同时,我们在36个城市会实现闪运送达,当你有急速需求的时候,我们会保证拿到需求之后半日完成印刷,直接送达。
我们带来下一个产品,是 AI招聘Agent。
我们先讲平常很多企业招聘过程中,包括我自己原来创业过程中,招聘都是一件很痛苦的事情,每天要花大量时间筛选简历,简历筛选完了之后还要各种各样的面试。我们推出的这个Agent,在Real机器上面奔跑,它得到你的授权之后,会全自动在全网所有的招聘平台收集所有相关的、合适的、按照你提的要求的简历。收集完所有简历之后,它会自动和候选人进行沟通。在和候选人沟通确认时间完成之后,它觉得OK,它会和候选人自动确认面试时间。面试时间全部确认完成之后,拿到这个信息,给到我们的HR,后续只要在约定时间,候选人自己就会来面试,会大幅提升我们现在的招聘效率。
我们展示一下它的执行效果。(视频展示)这是应用加速了几十倍速的速度,加速以后给大家看到的,“我要招聘两个同学”,指定好之后,它就开始说“OK,你是有这样的招聘需求”,我说“是”,它就开始奔跑。大概20分钟时间,所有符合要求的并且能够来面试的两个候选人就全部找到了。
刚才说的招聘是我们的社招人员,同时我们也经常想现在大学生毕业找工作比较难,我们推出一个全新的产品是针对校招的,叫 AI招聘-诚聘。
诚聘有三个关键能力:“看真人·投真岗·拿真金”。每一个大学生的候选人将会用钉钉实拍自己,变成立体简历。通过这份立体简历,我们会看到他的所有真人介绍,然后通过我们的系统会自动进行性格测试,完成他所有作品集的上传,也会看到一份完全真实的3D简历。同时从大学生的角度出发,大学生也会看到一个真实的企业,我们会在它的企业真实的招聘时所有实时的视频,他会看到真人出镜的讲解、真实的公司环境、完整的薪资待遇。
所以大学生候选人跟企业相互之间,在真实看得见的基础上,我们投出的叫“拿真金”。我自己开公司的时候也是花大量的钱给到招聘平台,然后拿到大量的leads之后,实际上很多候选人是不合适。我们这一次希望改变这个方式,说所有招聘的费用应该给到候选人本人,所以我们称为“诚意金”。如果我要招聘3个大学生,我付出每个大学生3000元/人的成本的话,我就把3000块钱直接给大学生,所以这个大学生只要通过面试,应聘成功,在岗3个月之后,公司指定的诚意金就会自动打给大学生。实际上在中间平台上,我们将保持我们作为中间平台“零成本、零费用”,让大学生和企业连接起来。
同时,我们也发布钉钉的AI布道师·城市合伙人计划,在全球招聘2000名大学生,这2000名大学生将会帮助我们新时代AI钉钉在全国进行普及。
下一个,我们发布的产品叫 “AI差旅”。
“AI差旅”Agent主要是帮企业解决在差旅过程中各种行程规划、找酒店、订机票、订酒店各种相关的问题。我们当年一开始做的时候,最开始想的事情是企业差旅应该重在服务,但是我们发现钉钉上面的企业差旅,很多中小企业都不用。我们经常去调研他们说为什么不用?等我自己开公司了,我就知道了,我就是阿里巴巴大公司病,都觉得应该是服务最重要。实际上我一问,包括我自己,服务不重要,价格最重要,价格便宜是王道。
怎么办呢?我们这一次用全新的Agent方式,帮助企业省钱。这个AI差旅Agent,它会自动在Real上运行,得到你所有的授权之后,会全网进行自动搜索比价,实时获取酒店价格、机票价格。全部进行实时比价之后,在得到你授权情况下自动预订。所以公司里面,所有中小企业一旦用了“AI差旅”,价格一定最便宜,所以再也不会存在说用AI差旅选不选的问题,一定会用我们。同时,员工也会非常方便,因为全自动帮你去预订、进行差旅规划、该怎么样走路线,全都是安排设计好的,AI帮你分析完了,所以你也会非常省时省力。员工回来,以前经常要报销,现在全自动报销,再也不需要去填发票什么,全自动完成。
制造业案例:跟单与质检
进入AI时代,我们也想一个个的Agent,我们是不可能做完所有Agent的,我们也需要在各个行业中跟所有伙伴一起合作。我们看一下如果在一个制造业中,在AI时代如果用AI钉钉,它应该是一个什么样的样子。
至今以来的钉钉主要是一个沟通和协同的平台,所以我们一般来说会实现这个公司的组织在线、沟通和协同在线,人与人的沟通、人与文档协同相关的工作。同时,企业内部有大量的业务系统,包括ERP、MES系统等等相关的系统。如果进入AI时代,我们想我们人应该是跟各种Agent在协同的,而不是我们一天到晚去打开一个MES系统、打开一个ERP系统去各种各样的操作。理论上,进入AI时代的制造业应该有一个全新的范式体系。
一个全新的制造业企业使用AI钉钉之后,它会完成设备在线,会完成订单从收集到执行的订单在线,它会实现人与设备的协同,也会实现订单全流程的管理与协同。在这个基础之上,所有的数据会进入到模型端进行训练,在上层的话,我们完成AI Ready的数据训练整理,进入到模型,然后Agent就会在模型之上进行操作,同时和我们传统的各种各样的业务系统进行交互。
我跟大家举一个例子,这也是跟我们共创伙伴一起做的一个案例。
大家都知道中国的制造业,有些订单来自于全球五湖四海,纽约公司订单发过来的时候,它不是按照你的格式给你的,它是按照他们自己客户的格式给到你的,所以会看到五花八门的各种格式。有些外贸订单可能发过来的是一个邮件,有可能直接手写发一个订单过来,所以每一个外贸制造业的公司,你去他们公司都会看到一个跟单员,跟单员干的最重要的事情是把各种各样的订单识别以后,输入到公司的订单系统去生产。
我们怎么去解决这个问题?这是一家真实的企业,它有7个跟单员,每一天要依赖跟单员把所有的订单转化出来。每一天一个订单耗时1.4个小时,但是也经常会不断地出错。
在这个情况下,我们想我们如果用Agent,全面用AI做,能不能做得到?我们来展示一下。平常我们第一件事情是把这个订单丢给现在的大模型,用大模型来处理。处理完成之后,你会看到这些模型可以完成大概60-70%的工作,但是依然有百分之二三十的工作,它没有办法全部正确地完成,它依然会出现一些幻觉,依然可能实现的是商业不可交付的一个结果。
那我们怎么做?我们用Agent的方式,把当订单投入到我们这个模型之后,订单的Agent第一步会进行整个文件的解析。解析完成之后,它会开始写代码。它自己编程,它会写一个程序出来,让程序去处理整个订单。再有一些它不可识别,它认为不太了解的部分,让程序来执行。程序完成所有的识别之后,一次次跟人进行交互(Human-in-the-Loop),去完成自我迭代。这个自我迭代完成之后,就会生成这个订单。我现在确认了,然后它就会变成?Skill(技能)?保存下来。它很像我们平常学自行车,你第一次骑自行车会不断地摔倒,在摔倒过程中,你会不断地学习,到最后你说你学会了骑自行车。
我们看到这家公司现有的订单投入进来之后,它有五花八门的订单,每一个订单丢进来以后,AI就开始学习。消费30万Tokens之后,它学会了这个订单,100%准确,这个时候我们总共学习成本是2.5块钱。2.5元的成本加上我们这个Agent,它学会了这个订单的识别与转化,然后转化成了我们现在全新的Skill。学会之后,你再一次把这个订单丢进来的时候,就不要再学习了,这个时候只要耗费7000 Tokens,我们就转化了这个订单,5分钱就把这个订单转化完成,自动录入MES系统。
我们来看另一个制造业的case,涉及到在流水线生产过程中有非常多的机器设备。它是一家专门做电动汽车上面的传感器的一家公司,位于深圳。它以前做这个事情的时候,生产过来以后,它会随机进行抽检,随机抽检比例在1%。因为是传感器,它会涉及到当汽车震动各种情况下,会受到一些应力,它要进行损耗破坏性测试。但是破坏性测试的结果,设备零件一定会被损坏掉。这个时候成本很高,怎么办?他只能损耗抽取1%进行测试,这个损耗成本占比5%。一旦交付工厂,最后汽车整车生产过程中会再次进行检验。检验完成之后,现在有12%会漏检,最终客户反馈到他的工厂,12%的漏检。
他想如果用AI做,怎么做?我们导入了一个全新的时序模型,时序模型会把生产过程中设备的所有数据进行记录,以毫秒级记录产线上的所有数据。记录完成之后,用模型对所有的数据进行全量采样之后,进行100%的检测。因为每一次的生产过程中出现了问题,都是因为有一些细微的东西产生变化。比如刚刚说的传感器的例子,它最大的变化是当他把它的铝片放上去的时候,实际上现场工作是由人来分发铝片,铝片非常的薄,所以分发过程中经常出的一个很大的问题是在同一个地方实际上放了两张铝片。你放上去,放两张铝片之后,一个焊接上去就变成虚焊了。所有的检测过程中,激光打下去之后,就会从激光测出来这个铝片跟上面的高度差,通过这个高度差你会知道有差异,这个数据就会被全量采样。
采样之后,由模型进行学习。现在这家工厂采用我们最新的时序模型,用Agent完成之后,全量采集检测率现在从1%的抽检变成100%的全覆盖,模型检测能够把现在的成本从5%的消耗降低到3.25%,在事前发现的12%的漏检率,现在把漏检率降低到1.2%,大幅度提升他们现在客户的满意度。
今天我们还邀请一个制造业的伙伴,来分享一下到底钉钉在制造业,帮助他怎么实现全新的智能驱动的生产优化,我们来欢迎?友成股份的许总。
嘉宾分享:友成股份 许笑迎
陈航: 欢迎许总。我们先简单介绍一下许总所在的公司友成。
许笑迎:谢谢无招。大家好,我是来自友成控股的许笑迎。我们公司成立于1992年,主要专门做汽车的高精密的模具,以及高端的注塑零部件。在汽车车灯模具细分领域,基本上我们在全球的体量是位居前列。在全国的话,基本上TOP100的车型里面,友成产品的搭载率基本上超过70%以上。所以大家平时看到的蔚小理,其实车里面都会有这个产品的身影。
陈航:许总,你在8月20日发布了AI钉钉1.0之后,觉得AI钉钉1.0给企业带来什么新的改变吗?
许笑迎:AI钉钉1.0还是有非常大的一些亮点和新意在里面的。其中给我印象感触最深的是DingTalk A1,因为我觉得这个产品对于出海企业可以算得上是协同利器。因为我们在塞尔维亚和墨西哥都有量产工厂,所以我们每年都要派很多工厂厂长、技术人员去海外做工作支持。语言对技术人员来说,障碍会比较大。现在我们所有的这些外派人员都配了A1,我非常欣喜的一点:首先一点,它可以支持在会议中的一些实时翻译;其次,会议结束之后,这个信息都可以同步到我们集团国内这边的知识库里面。
这里面其实有个非常有趣的点,前段时间董事长,也是我父亲去墨西哥出差。临出差前,我就给他配了一个A1,让他带去。当时一开始,他不以为然,觉得这个东西有什么用。第二天他们会议结束之后跟我打电话,他说这个东西太好用了。他说他们那天开一个会是在墨西哥,拜访一家我们的日本客户,我父亲日语非常流利,但是他不说西班牙语。所以以前碰到对方客户讲西班牙语的时候,就要依赖我们的当地同事给他做转译。这次非常好,他拿着A1,客户讲话的时候他可以实时看翻译。甚至当同事转译他的意思给对方客户的时候,他都能提出说“我的某个点,你遗漏了,没有翻译到位”。所以这个体验,也是给他很大的触动。
陈航:感谢。我们这次实际上刚刚展示的订单助手,就是跟你们合作的。你感觉在实际生产过程中,现在全新的订单Agent产生什么作用吗?
许笑迎:其实这个效果还是非常大的。对友成来说的话,订单处理场景一直是我们长期存在的一个痛点。因为它本身非常繁琐,我们有乌泱泱一个办公室的人员,每个属地都配了营业团队在处理这些订单,工作量非常大。但是,这个工作本身又不产生价值,所以一直也是让我们非常苦恼。
所以当钉钉的伙伴过来跟我们沟通、共创需求的时候,我们第一时间就想到了这个场景。这个产品开始投入之后,我们有成员非常兴奋,因为我们既是共创者,也是第一个使用方。像刚刚大家也有看到,原来1个小时一个订单的处理时间,到现在可以控制在1分钟之内;原来这个工作量需要7个人来做,目前可能每个属地只要控制2个人左右就可以。这些剩余的人员,我可以把他放到更多更有价值的岗位中。
零售与DEAP平台发布
陈航:
感谢许总。我们来看下一个产品,在零售业。假设在AI时代,零售业会发生什么样的变革呢?
零售业一般有大量的门店、各种连锁门店。订单有没有完全在线?它订单可能是在线成交的,但是订单没有汇集到总部进行完整的分析。会员、陈列在门店展示的所有的各种各样的商品,是不是如SOP标准那样?或者客户进店后的动线可以如何优化与调整?
这些在线的,不管是音频、视频、文本,所有这些数据也会通过我们的清洗服务成为AI Ready数据,这些数据也会进入到行业模型,即各个零售业的模型,就会产生全新的Agent。如果采用全新的零售业的新的研发模式,理论上也会有我们的用户不再和我们的CRM、ERP进行交互,他会直接和我们销售助理Agent、店长助理Agent 进行交互,去完成各种各样的优化与调整、经营的决策。
比如说销售人员的Agent,他使用了全新的研发模型之后,他的AI助理会分析他所有的服务过程,帮他进行判断、给予指导。客户的画像,会实时地得到持续跟踪。在AI的盘客层面上,所有的客户在最近一个月中,提到什么样的需求,我们这个信息就会直接给到研发团队。说客户对白色沙发感兴趣,比如说现在的流行尺寸应该两人位而不是三人位,这种信息会在一线直接被获取以后,给到研发团队,更加高效地指挥研发。
我们的店长,在Agent跟进的过程中,因为Agent获取了所有数据的分析,所以今天所有的服务质检将由Agent帮巡店人员/店长完成,销售谁做得好、谁做得不好、应该给予什么样的赋能,由AI来给予指导。
接下来展示 DingTalk Enterprise AI Platform(DEAP)。DEAP是用来帮助所有企业以及各行业开发者去开发Agent。
在模型训练体系,我们会支持AI数据标注、模型精调、智慧引擎建设以及模型部署服务。在底层部分,因为全部使用Agent执行之后,我们所有计费体系会变成以Token进行消费。所以数据的加密、提示词的防止输入,也是做安全保护。
各个企业都在调用大模型,但是经常出现一些不可控,比如数据经常有泄露,大家在调用模型过程中把文件和数据丢到外部,造成公司内部数据信息的泄露。算力消费不可控,有人用的多,有人用的少,会造成大量算力的消耗。员工操作不可见,你也不知道他到底在做什么样的内容。我们现在建立了全新的Agent机制,就会变成AI数据要有专门的防止泄露的机制来进行相关的审计,算力资源就会进行精细化的管控,以及整个执行过程全面会支持透明的审计。
Agent研发也不会一蹴而就,它需要不断的迭代。所以我们通过DEAP希望伴随着企业从L1大模型进行各种问答提效。进入L2,企业建立自我的知识引擎,进行知识沉淀。进入L3,帮助企业打造他的业务Agent、业务代理。到最后我们会支持更多企业进入更高级别,打造自己企业的专属模型。
DEAP帮助大家做Agent的开发,但是在做Agent开发过程中还有一个重要的能力,就是打造自己的专属模型。一旦涉及到专属模型的打造,对绝大多数企业来说都是一个不懂、成本又巨大的事情。我们在这个事情上跟千问大模型团队一直在探讨,怎么把千问大模型的训练能力、模型训练的平台,全部赋能给中国的所有中小企业,所以我们打造了这个全新的模型训练平台。
我们和企业知识库进行联动,在前期的数据预处理阶段,把大量无效数据进行清洗,合成的数据处理模型会进行训练。怎么叫冷启动训练?在企业内部的数据一开始是很有限度的,这个时候我们会把通义积累的各行业中的数据全面赋能给各个企业,把我们的数据和企业的数据赋能之后进行泛化。所以企业在很小量数据的情况下就会形成泛化,形成比较大的数据集,立刻启动模型的冷启动训练。
在AI驱动的数据标注体系里面,当数据进入到标注平台,我们提供业界最高的金标数据标准,以前需要人工100%打标的过程,现在只需要20%人工参与,就可以完成所有的数据分析、打标。今天我们跟很多企业打造比如他们的AI客服,包括零售所有的数据分析过程中,我们通过现在这个全新的标注体系,也能够帮他们在标注成效上得到300%的提升。
训练以后,就会出现我们要评估这个训练的效果怎么样。在模型训练与对齐阶段,我们对高效训练给予在行业、在设计中最匹配的学习和评估评测方案。在领域能力和通用能力要达成平衡,我们知道,模型训练如果把所有行业知识全面赋能到模型之后,这个模型就会失衡,它很像一个人,比如它学习的是打羽毛球,它的羽毛球打得特别好,成为一个专家能力的时候,往往它的通用能力就会丧失。就是有人说的,这个人能力很强,情商很低,指的就是这个意思。
我们怎么保持这个Agent模型又有通用常识、通用能力,又具备专业知识?这时候我们在数据调配的时候就必须要进行数据像鸡尾酒一样,把行业知识比例进行调配。
我讲了半天可能大家很少有真实的体感。我们就邀请一下行业训练中的伙伴,给大家展示一下今天行业模型训练跟钉钉使用DEAP模型训练平台之后能够产生什么样的效果。欢迎壹生检康的强总。
嘉宾分享:壹生检康 & 水木分子
陈航:给大家介绍一下壹生检康。
王强宇(壹生检康):壹生检康是一家做医疗行业的公司,我们以女性精准检测和女性健康医疗相关模型为核心业务。我们大概半年多前,和钉钉一起共创做医疗妇科大模型。其实在上一次发布会的时候,我们已经发布了豆蔻的妇科大模型,最近我们发布了一个豆蔻医生超级助理,确实效果也让我们很惊讶,十天左右时间,上来了300多家医院。
陈航:你觉得现在在医疗行业的大模型,逐渐垂直到行业中,你认为会发生什么样的改变呢?
王强宇:以我的认知,医疗行业的模型最怕的就是幻觉。我们知道,DeepSeek在今年年初发布了之后有很多医生也在用,但是我们测下来,DeepSeek还是有20%—30%的幻觉。所以我们用RAG技术做,做到一定的程度,已经很难把准确率再做上去了,做到70%以上就很难做了。所以医疗模型有两个地方是非常关键的,第一个是希望医疗模型是做一个零幻觉的模型,第二个是要高度循证,每一次的诊断,我们叫临床决策,它需要有一个非常准确的证据链,并且保证这个诊断都有文献的支持。
陈航:很多企业想做这个模型,你一路走下来有什么经验想跟大家分享?
王强宇:早期第一个模型——豆蔻模型的时候,我们的确和钉钉团队做了非常多讨论,而且有很多时候争论得也很激烈。因为模型从预训练到后训练,到SFT、RFT,特别是强化学习、奖励函数的时候,还是有些难度的。所以我在这里也特别想跟行业的同事说,包括DEAP平台,它是一个很好的东西。所以上次我们训练了豆蔻大模型,我们发布了豆蔻超级助理,最后会完成商业化的部分。整个链路都是有机会在钉钉上完整的跑通。
陈航:谢谢强总。下面有请水木分子的邢杰给大家介绍一下,也是一个医疗行业的一个超大型模型。
邢杰(水木分子):大家好,我是来自水木分子的邢杰。水木分子是清华大学智能研究院在2023年6月份孵化的,我们垂直于在医药行业做垂类大模型,我们有自己的基座模型,ChatDD Model 还有 OpenBioMed。
陈航:新药研发一直以来是全球所有药企巨头的游戏,中国很多药企做创新药研发往往都是很难企及。我想,我们全面的合作,把现在创新药的模型导入钉钉,钉钉上有大量的医药企业,这个AI模型应该可以改变中国医药界创新药的模式。
邢杰:大家都知道,医药行业有一个“双十定律”,就是10年时间、10亿美金的投入。所以这个成本,从生物学本身的角度来说,再卷,天花板已经在那边了,一定要有新的技术。
陈航:我们猜想一下,这么多钉钉的医药企业,五年之后假设我们用ChatDD的方式帮他们打造一个全新的创新药的Agent,五年之后你觉得能不能做出来一个,比如用1/10的成本实现全新的原创新药的研发呢?
邢杰:我带来一组数据,实际上到2025年,差不多已经有30%的药用AI了,每年5%的增长,差不多到五年之后有1.5个药是通过AI发现的药物。而且它的效率会提高40%—60%,成本也会大大降低30%—70%。所以这个世界变化就是那么快。
开放平台与AI硬件
陈航:
谢谢邢总。所以我们今天发布的各种各样的AI Agent、企业搭建的AI助理,都可以发布在钉钉开放平台上。我们带来开放平台的全新升级。开放平台全新体系将会支持AI助理市场、AI硬件市场、严选市场以及AI表格的模板市场。也就是所有AI Agent的能力,不再是一个70%、80%的结果,而是确保能达到90%以上的商业可交付性。同时,因为采用全新的按结果付费模式,这也是我们希望通过全新的Agent市场,去推动中国的企业级市场发生的一个根本性的变革。
同时,在推进AI赋能的情况下,和全国甚至全球所有的硬件厂商、合作伙伴一起推动各种各样的AI硬件。这时候我们和小冰科技推动了全新的智能数字前台,这个数字前台会通过我们模型的赋能,自动实现在前台全天值守、主动迎宾。
第二个,也是和我们的合作伙伴推出防录音魔盒。这个防录音魔盒怎么来的?现在DingTalk A1用的人很多,有时候AI听记也是可以做各种各样录音的分析。后来有很多老板经常跟我说,能不能防录音?现在走到哪里我都不敢说话,就怕说错话,确实会有一些隐私项目。所以这次我们也推出“矛与盾”,我们的听记也非常强,AI非常强,我们也推出一个全新的东西,让你听不到。所以这个全新的AI防录音的魔盒只要放在你的办公室,桌子上一放,录音设备都会失效。
这是今天钉钉AI 1.1给大家展示的各种各样的Agent在AI时代的繁荣。同时我们在AI1.0的Agent OS框架之上,我们把1.0所有的能力进行全面升级。新的AI1.1,就会长成这个样子,它以木兰的形象,展示出来我们在DEAP、Real模型训练平台之上,钉钉ONE、悟空会支撑整个Agent OS的运行。上面的全球化开放平台技术体验服务,支撑我们现在的A1、AI听记、AI搜问、AI表格、AI应用相关的基础能力,上面的AI印、AI差旅、AI诚聘等等能力,也是在上面结出的一个个Agent果实。
A1、AI听记
DingTalk A1,从8月25日预发布,到9月中旬正式进行销售,我们在淘宝88VIP的好评销量、抖音销量全部持续TOP1。
实际上从发布开始到现在就4个月的时间,这4个月,我们持续地高速迭代,有160项以上的功能持续优化。可能像我前两天碰到一个品胜赵总跟我说,他说我9月份拿到你们那个东西,感觉不好用。我给他介绍最新的办法给他测试,会明显感受到彻底的不一样。我们跟实际的客户有超过2000次以上的持续的深度的共创,我们的模型保持两周一次的高速迭代,所以到今天DingTalk A1和AI听记已经取得了非常好的听到、整理、分析的能力。
同时,DingTalk A1现在是一个个人的工作助理,但是在AI1.1版本过程中,它正在逐渐成为为一个团队整体的工作助理,它会把团队中相关所有人各种各样的沟通、协同、会议所有的数据进行全面整合。这个时候,就会帮助一个企业实现整体的组织洞察。比如说我们在AI销售场景中,所有的一线销售人员的信息聚合、个人机会的洞察、组织机会的洞察,都会通过全面数据整合之后形成组织的智能。
今天,我们DingTalk A1也会带来两个全新的版本:一个是木兰限定版,这是霞曜红,500套。同时,因为到新春了,有很多企业都问“钉钉能不能出礼盒版”,他们想要去送客户,确实觉得很好用,所以我们也推出今天整个新春版,999带着礼盒,希望DingTalk A1能成为企业在新年的全新的送客礼物。
新版的钉钉的A1会和我们的AI听记进行全面的融合。所以在AI听记里,今天所有的A1手机、电脑、会议设备,所有这些的音频数据都会在我们的AI听记中得到融合,在一个地方进行管理和使用。
同时,我们正在把AI听记的模型从语音模型升级到我们现在的多模态模型。升级到多模态的模型之后,除了语音以外,文本、视频、图片都会进行全自动的分析与识别,实现全场景的智能感知。
同时,我们在各种各样的学习场景中,可能老师在讲课或者在分享,这个过程中所有的板书,你自己可以进行拍照。你拍完照之后,你随时记录,这个时候我们AI听记、A1和你产生的图片会自动融合,立刻形成一个完整的图文纪要。
有可能你要进行参观游览,这个时候你所有的地理感知、随拍随记,以后全自动进行整合,自动生成一篇游记。
同时我们看到现在大家都在出智能耳机,所以这一次AI听记会全面支持我们的同声传译功能。所以以前你要用昂贵的设备去打造同声传译的能力,现在你只要用一个20块钱的耳机,加上钉钉的AI听记,立刻秒变同声传译,这个对非常多的企业在跟国外的人进行交流的时候有巨大的价值。你旅游的话,用不着买什么特别贵的耳机,你现在耳机一插上,立刻就同声传译。
我们在各种场景中支持真正的更加友好的交流,比如说两个人面对面的交流跟两个人在同一侧的交流,立刻同声传译,语言翻译之后,自动就翻成各自看各自的语言,在这个手机上,大家可以很好地交流。我们再看一下,竖屏的时候,如果我们俩面对面,你看你的、我看我的,非常好地方便我们在各种场景下进行多语言的交流。
这是在线下,我们经常会开一个会议,同时多人、不同的语言。这个时候你只要戴上耳机,这个时候在线下的会议过程中,不同的国家、不同的语言,只要你打开AI听记,戴上耳机,全自动多频道进行自动翻译。所以不管什么语言,今天在AI听记加上耳机的情况下,我们全自动打通,语言不再有障碍。
如果你在线上沟通,这个时候你会有各种各样的视频会议,你只要打开钉钉的视频会议系统,各个国家的语言全自动进行翻译。你是中国人,所有的语言会为你翻译成中文;如果你是西班牙人,所有的语言都会翻译成西班牙语进行展示,所以所有的线上沟通也不再有语言障碍。
AI听记到今天为止,我们已经完成了260个场景的分析与整理。所以今天在各种场景下只要打开AI听记,都可以实现非常精准的整理和分析,帮助我们提升整个知识整理和分享的效率。
AI听记加上A1我们各种设备,今天在语音智能层面上,它会成为AI时代全新的沟通记录工作学习的新方式。
AI表格与优克拉嘉宾分享
我们回到一个重磅产品——AI表格。
我给大家分享一个真实的案例,这是来自于永和电子。这家公司两年前用过一个轻型的MES系统,但是它很难支撑越来越多的需求。怎么办?他现在的团队同学用了AI表格,两个人7天时间搭建了Mini的MES系统。
比如一个线上生产计划,现在拍张照自动就完成全流程透明的生产计划管理系统。以前模具压制生产过程中的效率是不一样的,这个时候变成做得好的人,设置好了能20秒生产一个模具,做的差的人可能要30秒生产,这时候效率差50%。全新的参数系统,就会变成每一次这个模具参数拍一张照片就结束,自动进入AI表格,自动存档分析。
同时,我们也给大家带来今天AI表格1.0在各种能力上的全面升级。
怎么把数据输入源头一把自动导入?我们推动的全新产品叫“万能贴”。我们有一个客户在全国每天要收集各种各样的蔬菜肉鲜产品、生鲜产品的价格,我们会输入一些系统的数据是很麻烦的事情。我们推出了全新的“随口一说立刻填入”。本来这张照片,视频他们拍好的时候是拍养牛的牛场里面,后来发给我说不行,不能暴露怎么养牛的,这涉及到企业机密,就变成我们在奶牛罐前面拍了。
接下来,我们来给大家看看输入方式以人为本,excel,大家都知道是统治我们数字化时代40年的超级产品。我们有没有办法一把把它AI化?
我们来展示一个“随手拍”。今年你打开一个excel表,你有一个excel应用,我想立刻把它变成AI应用。大家看到没有,这张excel表“每日作业检视反馈”,贴到我们的AI应用,10倍速,耗时两分钟,应用自动创建完成。只要贴进去,立刻执行,变成一个真正可用的商业系统。
还有一种是什么?我有一个想法,我画一下,说“你去给我做一个请假单(请假系统),就这样,用手绘”。你只要手一绘,你一拍,“做”,就做好了。整个请假系统,2分钟时间全部完成。
用AI来搭建整个应用,是在AI时代我们用AI表格的一种重要能力,但都是我一个人讲,我们要展示一个真实的案例,我们请浙江优克拉的魏总来给大家展示一下。
魏俊:大家好。我们优克拉是2017年用钉钉了,是一家义乌的工贸一体的公司。前段时间,我们上了央视,也是因为刚好双11,报道了流量爆单的情况下该怎么办。我们是因为AI,第一比较熟练;第二,钉钉本身有一对一的服务,所以帮助我们在那段时间能够把AI用到生产的排单,及时能够把单子交出去。
陈航:比如怎么用AI表格做这些环节的优化与改造?
魏俊:大概是两个点:第一,我们会抓关键词的热点。关键词的话,我们原来差不多运营一个小时去抓整个行业的数据,但现在用了钉钉的AI表格之后,它自动会抓。第二,评论。我们运营要抓评论,差不多一个人可能要花三天时间,也不一定精准。但现在用了钉钉AI表格,基本上它可能在15分钟之内,就会把所有的东西全部分析完,然后就能得到痛点、痒点、核心卖点。所以我最后的总结,我觉得作为老电商人来说,原来我们可能80%的时间是用来去抓数据,只有20%的时间是用来分析数据,而现在变成我们真的是人做更有价值的事情。
陈航:还有一些出海企业、新兴企业,包括国外企业,他们本来没有用钉钉,你要帮我们做宣传,你讲一句话,怎么样让他们都把钉钉用起来?
魏俊:所以这是两个问题。我觉得我们一定要用好钉钉的AI,我们才能够穿越周期,未来才能可期。最后一个话题,一定要把握钉钉以后时代,才有未来。谢谢。
AI搜问、AI客服、AI教育
接下来,我们发布钉钉AI搜索的升级。AI搜索在运营发布的过程中,我们主要做了文本搜索、企业级知识库搜索以及大模型的问答。这一次我们在1.1AI搜问会进行全面升级。在原来的文本搜索、知识库搜索、大模型联网问答基础上,我们将会推出全新的链接全球所有先进模型的能力。也就是在你只要符合要求上,你只要碰到一个技术困难,或者多模态、图片、视频,理解链接全球先进模型。
我们举个例子,比如说我做机器人市场分析,你只要提问,全球所有先进模型都会自动进行分析,分析完成之后,会自动完成一个多模态输出,且全部完整地整合成一个答案给到你。这个时候,多模型给出的答案会自动进行交叉验证,并自行加权,以降低整体幻觉。所以当你使用全新的钉钉AI搜文,所有的模型问答,你都能获取它们所有各自的优点,整合出最佳的。
企业在用模型的过程中,经常会出现的问题是企业担心因为用各种大模型而产生信息泄露。如果你不让他用,这些日新月异的模型能力也没有办法赋能给企业。这一次,我们会在 AI 搜问提供一个全新的AI模式,这个AI安全模式将帮助企业自动脱敏企业内部所有的文档和数据的信息。所以所有公司内部重要的一些文档和数据,当你使用大模型信息处理的时候,我们会全力保护你的安全。在中间过程中,全部进行加密,去除一些隐私信息。
AI搜问,希望帮助所有企业打造在AI时代知识获取以及问答的全新模式。
接下来是我们在1.0发布的AI客服。我们在AI客服发布的过程中,也跟上百家企业进行共创和验证,也提到了大量的问题,所以这些会带来AI客服更多的在行业中能够适应的一些能力。
第一个是多模态业务理解,因为我们很多时候在问答过程中,你的客户会丢出一些图片、视频给到你,跟你说有什么问题,请你帮我解决。现在大部分的AI客服没有办法对文件、视频、图片进行快速理解,而这一次我们会把多模态的模型融入到AI客服中,让所有的截图、所有的问答都能够包含上下文的理解。同时我们会支持MCP系统集成,当你问问题的时候,它不是一个简单的回答,会自动调用公司内部所有的系统,调用各种内部API系统之后直接给你回答、直接帮你修复。
其次是冷启动的数据化,我们也碰到非常多企业想用AI客服,但是他说我们公司没有知识库,也没有任何文件,我不知道怎么启动。这个时候,全新的AI客服将会支持冷启动。你只要说“启动AI客服”,每一天你客服的问答将会自动学习,逐渐地,你的人工客服会逐渐减少,它会自我进化,完成所有的问答。
所以AI客服1.1的版本,将会支持理解力、规划力、目标感、学习力,会跟进每一个客户的问题,它会根据工单系统,一直到工单系统完结,给到客户反馈。所以AI时代,全新的客户服务方式将回有AI客服来提供。
接下来是AI教育的升级。我们在上一个版本中,我们提到帮助学校做各种各样的批改,减少老师在重复性劳动。而今天我们带来一个全新的产品,叫AI作业速改机。
我们当时发布AI作业批改的时候,因为家长都要把作业拍照上传,也挺麻烦,很多家长也不愿意配合。我们新的版本怎么样?现在所有的学校都采用电子教学,大家都不要求手写。而这个新的产品采用复印机的模式,只要学生回答问题,这一道作业一定是全自动完成。大家看到会自动批改,高速批改,每4分钟100份试卷、作业自动批完。选择题、填空题,各种小初高所有题目的准确度能达到99%以上,覆盖全部学科。同时我们在作业中有一些比较复杂的东西,比如连线题,我们都能判断出来这个地方短路了吗?现在的AI也能全新进行判断。像这个写字体,一般的AI是很难判断的,我们全新的模型经过特别训练之后,大家看一下,“战士”的“战”多了一划,写错了,大家能看到答案错了吗,它少了一横,也会全部进行判断。
老师把40份的作业只要一丢进去,批改完成之后,这是第41份卷子,第41张卷子就自动打印出来了。它打印出什么东西?它会告诉你这一张单元练习题,每一道题全班同学的准确率,然后自动分析全班在这个上面的平均分、中位数各种分数的统计,全自动完成。学习分析的结果,就会通过钉钉自动发送给你,这是给家长和老师的,这是学生的错题本。老师层面上,像校长、教导主任就会沉淀全校全年级所有的学情分析,全自动化。
比如在转塘小学的象山校区,测试这个学校38个老师覆盖三年级到六年级,这个时候测试的1016个学生,每一篇批改题目2.5万份,原来要花106个小时老师来批改试卷,现在一把就能完成。这一次我们提供全新的AI速改机,限量1000所学校,面向所有中国中小学正在进行提供,有兴趣的直播间的校长、教育局领导也可以扫码。所以我们的教育也正在发生越来越大的变革,在AI时代,我们希望通过AI速改机能够实现AI时代的精准教学。
钉钉有海量的用户,所以我们在不断升级过程中,我们也希望对我们的技术体验和服务进行全面升级,以确保所有钉钉的产品能够满足大家的期望。在体验层面,好多企业都我们回来之前都在提钉钉有各种各样的迭代速度慢等等各种各样的问题,我们也希望不辜负期望,保持团队持续高速迭代。我们这一次在四个月的时间,8月25日1.0发布到现在1.1的发布,我们四个月时间在VOC用户所反馈的问题,现在大概是8万个左右的问题,已经完成7.6万个问题的修复。我们在得到很多新的需求,在VOC中得到3500个客户的需求,现在已经完成2400个左右的需求。在产品链路的周度优化上,大概有200多条产品线,这200多条产品线会保持周度的持续的优化与改善。
我们会对所有的付费客户提供全新的服务保障。所有的付费客户只要提出问题,会保证在24小时之内可以确定性回复。所有的需求、问题,将会保证在21天之内完结。所以我们希望为大家打造一个能够安心、安全使用的钉钉,大家用的开心、用的舒心。
全球化与总结
我们看一下我们的全球化。
我们现在在全球范围内,钉钉在各个国家都在应用。所以在产品链路的周度优化上,大概有200多条产品线,这200多条产品线会保持周度的持续的优化与改善。
所以这一次钉钉将会发布全新的产品,两个钉钉,一个蓝,一个白。一个中国的钉钉,一个海外的钉钉,DingTalk是海外版钉钉。同时发布一个 One Office 产品,这个产品只要在全球任何一个办公室,只要接上你的网线、电话线,全球所有的网络、所有的办公室变成一个办公室。我们会提供我们的专线支持,实现两个钉钉、一个网络。
同时,两个钉钉会满足我们原来非常难以解决的问题,第一,我们会对所有工作方式进行支持,在海外有各种工作方式,比如Google、Facebook联合登录,我们全面支持。我们对12个核心功能进行全面重构。同时在各种合规体系上也进行全面支持。
最后一个彩蛋,这是刚才我到现在为止讲的所有的话,AI听记自动生成,立刻变成一个AI纪要,没有任何修改。所以今天AI在语音智能、在文本智能方面确实会超出我们所有人想象的能力。
所以作为发布会最后的结尾,分享一下我们从1.0到1.1的过程中的一些思考。我从95年入大学到99年毕业,我们用的所有的产品,从当年的Windows,到MAC电脑,一直到安卓手机,一路走来都是美国定义的。但是我们看到这些AI高速发展正在改变我们的工作和生活,我们取名“木兰”,本来是想在AI时代能够打造一个全新的时代,希望和我们的开发商、我们的企业、我们的共创伙伴们,一起打造一个全新的以AI驱动的一个新的工作方式。
我们希望在未来钉钉1.1发布之后持续高速进展,为大家打造一个全球化的全新的AI工作方式。
谢谢大家!
0人