推进教育科技人才一体化发展已上升为国家战略。拓维信息(002261)旗下开鸿智谷作为鸿蒙生态核心共建者与产教融合领军企业,面向各大高校人工智能(885728)、机器人工程、智能制造等相关专业实践教学的核心建设需求,以“AI×鸿蒙”为技术底座,推出在鸿多模态巡检套装!对标智能巡检与智慧物流(SLGB)产业主流技术架构,深度集成开源鸿蒙系统、ROS/ROS 2、多模态AI模型与具身智能,原生支持多设备协同调度与端侧AI部署,为院校智能巡检教学打造从单机自主到多设备协同、课程体系完整的标准化实训方案。配合在鸿OS全场景系列开发实验箱作为边缘计算中枢与协同控制节点,提供一站式产教融合教学体验。
教学场景之痛: 三堵墙拦住智能巡检课堂
系统生态之痛——传统嵌入式与鸿蒙生态割裂。 现有教学平台通常基于单片机开发,课程被锁定在单一技术栈上。但真实的智能巡检系统既需要ROS层面的建图导航,也需要鸿蒙层面的多设备协同。学习者学完单车控制后,往往缺乏多设备调度的实操经验,进入企业后面对完整的系统,还需投入较多时间完成整套系统的实操适配学习。
控制方式之痛——遥控器与二维码,离“自主”相距甚远。 多数教学平台仍依赖遥控器操作或二维码定位导航,小车沿固定轨迹运行,与真实巡检场景中“自主建图、动态避障、路径重规划”的能力要求相去甚远,学习者对于SLAM建图与自主决策等核心技术的工程实现的认知依旧存在壁垒。
AI教学之痛——能搬货不等于“会巡检”。 传统智能小车实验停留在“A点到B点搬运”,功能类似固定输送设备。而真实的智能巡检涉及环境感知、视觉识别、语音交互、场景理解与自主决策,传统实训平台难以支撑AI高阶巡检能力的实操训练,存在实训场景的局限性。
场景破局: 三重建构重构智能巡检教学
重构一:双生态融合,打通ROS与鸿蒙。 在鸿多模态巡检套装在系统层实现了ROS/ROS 2与OpenHarmony系统的双生态融合。同一台小车,上午跑RTAB-Map三维建图与TEB路径规划,下午编写鸿蒙应用直接控制小车——前进、后退、自动跑图,一个APP全搞定。学习者可设计跨栈实验,体验的正是智能工厂中多设备协同的真实运行模式。
重构二:实验箱+小车联动,从单机到多设备。 巡检套装与在鸿OS全场景系列开发实验箱深度联动。实验箱作为边缘计算中枢,学习者将开发的鸿蒙应用于实验箱上运行,通过分布式能力直接控制小车。学习者能在同一套鸿蒙生态下操控传感器(885946)、小车、终端等多设备,体验“一次开发、多端部署”的分布式能力。
重构三:三模大模型端侧部署,从搬运到巡检。 三模大模型全接入:大语言模型精准理解指令并回复,语音大模型实时采集与语义解析,视觉大模型理解图像内容、识别物体特征。学习者通过语音交互发起指令:“你看到了什么”,小车实现实时描述当前场景;接收并下达“追踪红色物体”指令后,小车自主完成视觉锁定与跟随。学习者面对的不再是沿固定路线运行的演示设备,而是“能理解、会思考、可交互的智能体”。
全链路实训: 从建图导航到多设备协同
配套标准无人驾驶(885736)实训场地(含车道线、路标、红绿灯、路障),实训体系覆盖三个层次:
建图与导航层——部署RTAB-Map三维建图、 A-star与TEB路径规划、自主避障与导航,覆盖巡检场景“自主建图-路径规划-动态避障”核心链路,学习者跑通的是真实SLAM算法而非预设轨迹。
场景理解与交互层——三模大模型协同推理,完成视觉目标追踪、语音指令控制、环境语义理解等实验,与产业巡检AI工程师的工作方法一致。
多设备协同调度层——在同一套鸿蒙生态下操控传感器(885946)、小车、终端等多设备,体验“一次开发、多端部署”的分布式能力。
三阶递进,从单车自主导航到多设备协同再到AI辅助决策,一条完整的智能巡检技术栈全部跑通。
专业支撑与生态闭环
在鸿多模态巡检套装覆盖人工智能(885728)、机器人工程、自动化、智能制造工程、物联网(885312)工程、物流工程、计算机科学与技术、电子信息工程等专业方向,支撑多门核心课程教学。
依托开鸿智谷在鸿蒙生态的核心布局与产业资源优势,已完成学习者从理论学习到技能认证、竞赛实战到生态就业全链路的贯通。学习者在实验室中培养的“鸿蒙+AI”复合能力,精准契合当下智能制造、智慧物流(SLGB)行业的核心人才缺口与岗位需求。
在鸿多模态巡检套装,让智能巡检教学对接产业技术前沿,从单机自主到多设备协同,构建完整的产教融合实训体系。
