「装备大模型化」落地破圈！AI技术的一次自证与他证

tayun

智东西（公众号：zhidxcom）

编辑 | 三北

编辑 | 漠影

狂飙500多天后，国内的“百模大战”正进入落地验证期。当下，行业和产业对大模型的期待，正从“你家大模型有多强？”变为“你的大模型能帮我干什么？”。

10月22日-10月25日，2024中国国际社会公共安全产品博览会（简称：2024安博会）在北京举办。作为多年来AI产业发展的一大风向标，这场盛会被产业人士寄托的使命之一正是回答上述问题。而这，也是AIoT头部企业宇视科技在做的事。

今年安博会上，宇视科技的展台成为人气最高展台之一。通过五大展区近百个展出单元，宇视亮出了AI大模型落地的实战成果和作战图谱。

g

▲宇视展台现场人头攒动

像百度搜索一样检索视频内容的“万物搜”、夜视能力倍增的AI-ISP猎光系列夜视摄像机、能跟用户互动的AI体育锻炼屏、助智慧城市治理降本增效的大模型方案……今年宇视已不限于大模型相关部件产品展示，而是实现从App、装备到行业方案全覆盖。

2023年5月，宇视推出AIoT行业大模型“梧桐”，今年4月升级为“梧桐2.0”版本，多模态及推理能力进一步升级，目前已经衍生和优化了上千种相关AI算法，落地城市、交通、文娱、教育等超十个行业。



▲宇视展台现场展出的梧桐2.0架构图

当下，AI亟需完成一次新的价值自证和他证。To C消费类AI大模型产品的流量高峰已被瓜分一波，第二波机会来到了与实体经济息息相关的To B数字化转型市场。

透过宇视科技本次安博会的展出，回溯其在数字化转型中的“探模”之路，大家可以看到，大模型的底座价值正如何一步步潜入千行百业，转化为新质生产力。

一、智能升级：基于梧桐2.0的“万物搜”来了

今年安博会，要说最引人关注的AI大模型新应用是什么？

可能不是各家都在做的智能聊天机器人，也不是爆火的AI视频生成工具，而是这款名为“万物搜”的视频搜索“神器”。

在宇视中心区域展区，一块大屏幕前，围满了视频数据服务系统“万物搜”的体验者。他们只需要输入文字描述，就能从现场实时视频内容中，快速检索出贴近意图的结果。比如搜索“拉行李箱的人”，“万物搜”就会立即识别并输出对应的结果。



▲“万物搜”被许多观众围观体验

即便是一些十分小众的情况，“万物搜”也可以通过深度解析和语义理解，搜索到用户所需内容。比如搜索“带狗头头套的人”这样语义更具体的描述，“万物搜”也能准确地识别并找到。



▲“万物搜”现场体验

当输入“一个举着手机拍照的年轻男士”这种多个任意元素组合的提示词，“万物搜”也能立即识别出来贴合表述的视频内容。



▲“万物搜”现场体验

这一应用具有很强的应用价值，比如可用于失物招领。在一个智慧园区场景，某业主购买了一份麦当劳外卖丢失了，他只需要借助“万物搜”去搜索“拿麦当劳外卖的人”，就可以查询到相关的视频记录，从而寻回失物。

宇视相关负责人郑勇告诉智东西，“万物搜”基于多模态大模型算法开发。相比于传统小模型时代的CV识别车牌、衣着等部分有限特征，“万物搜”的搜索对象的边界得到了极大扩展，从而使行业价值也得到大幅提升。

究其背后主要的技术难点，还是多模态融合。

据悉，“万物搜”基于宇视自研行业大模型“梧桐2.0”，融合自然语言处理、视频特征提取和语音识别多种能力，深度理解分析输入文本、语音或图片，及其上下文语境关系，从而让用户可以准确搜索到所需的大部分视频内容。

“梧桐2.0”是一个覆盖了图像编解码、计算机视觉、自然语言处理、多模态等多个领域的AIoT行业大模型。根据宇视官方数据，其已经基于“梧桐2.0”大模型面向十个行业推出了近千种长尾算法。与此同时，其在这十大行业“梧桐2.0”均已有产品出货和项目实际落地。

“从业者会有一个很直观的感受，越来越多的长尾算法的需求都能得到响应，行业对于视频能力的期待也因大模型提高了。”郑勇说。

可以看到，AI大模型已经催生了一大批智能功能和行业算法，呈现出落地可用的效果。

而这，只是AI价值自证的一个开始。这些智能功能还需要在城市管理、交通治理、园区运营等各行各业的场景中广泛应用，才能真正发挥出行业价值。

二、装备进化：把大模型“塞进”摄像机

在大模型进入行业之前，有一个重要中间环节不容忽略，那就是“装备大模型化”。

当下，大家看到MicroSoft正在将大模型“塞进”电脑，HUAWEI、苹果等手机厂商正将大模型“塞进”手机。而以宇视为代表的AIoT头部企业，也正将大模型“塞进”摄像机。

大模型正催生新的装备进化——本次，在宇视展台上备受关注的AI-ISP猎光系列智能摄像机就是一大代表。基于大模型打造的“猎光2.0-AI-ISP”图像引擎，可以使得前端摄像机应对多种极黑、无光、微光场景挑战。

在现场设置的暗室中，一台仅仅数百元的经济型摄像机，即使是在低至令人难以置信的≤0.0001 Lux的照度环境下，依然能够让图像呈现出如同在白天中一般的鲜艳色彩。



▲AI-ISP猎光系列智能摄像机效果展示

大模型+智能摄像机设备，让过去AIoT行业难以解决的痛点迎刃而解。

众所周知，夜间是安全隐患的高发时段。由于光线不足，人类视觉难以清晰地观察到周围的环境，往往使得安全隐患难以察觉，星光等夜视摄像机的出现缓解了这一问题。但具有高品质成像效果的传统夜视摄像机成本较高，在方案部署的时候容易被战略性舍弃。

缺少高性价比的夜视摄像机，这是行业的一大痛点。

宇视AI-ISP猎光系列智能摄像机直击这一痛点。郑勇告诉智东西，基于“梧桐2.0”，摄像机算法在训练的过程中，可以采用由AI生成的大量不同场景的视频素材，例如微光的鱼塘、无光的乡村小路等，从而压缩了训练成本。

同时，基于数千种场景的实验训练及测试，AI-ISP猎光系列智能摄像机算法快速迭代，强化拖影收敛、动态降噪、场景提亮、色彩还原、对比度增强效果，使图像质量突破传统ISP极限。

可以看到，大模型已经展现出对装备“点石成金”的效果。

而这只是“装备大模型化”众多例子中的一个。

今年4月，宇视提出“把所有装备用大模型重做一遍”的理念，随即推出了一大批“装备大模型化”产品，覆盖了AI端侧装备、AI边缘端装备、AI边缘域装备全业务场景。

在这三大场景中，除了AI-ISP猎光系列智能摄像机，大模型改造的设备还涉及AI体测一体机、室内AI体锻屏、视频智能推训一体机、视频数据服务一体机等多种硬件，都实现了不同程度的数倍效果提升。



▲猎光2.0家族

做“装备大模型化”的难点是什么？

郑勇告诉智东西，不同于手机、PC等设备大模型化，AIoT设备在属于相对弱交互但高专业度的领域，这就需要在大模型、AIoT及行业中都有深耕的业务团队来进行支撑开发，这也成为宇视做这件事的一大优势。

宇视正通过App硬件化、硬件装备化、装备序列化等一系列创新研发，为全行业带来“装备大模型化”产品底座开放能力的质变。

当下，无论是面向消费者市场还是企业级市场，装备大模型化已经成为行业发展的必然趋势。

而从企业级数字化转型市场来看，我国ICT装备门类众多、产品强大而丰富。这些装备更是大模型落地的重要载体，是大模型落地实体物理世界、释放千行百业新质生产力的重要抓手。

三、行业破圈：AI技术的一次自证与他证

大模型带来了智能功能和装备的进化，最终的效果还要在行业中验证。

作为一家AIoT产品方案及能力提供商，宇视在视图领域有着多年的沉淀积累，致力于在智慧城市、交通、电力、企业园区等多个场景领域进行视图价值赋能。如今这些行业经验，也正帮助其大模型加速在行业落地。

在本次安博会上，大家可以看到基于“梧桐2.0”的智能功能、装备已经落地到了文体娱乐、智慧城市、智慧交通、生态保护等各个领域。

以宇视在现场展示的AI体育方案为例，基于梧桐大模型的AI体育锻炼屏可以让很多人站在同一个屏幕前一起做运动，记录他们的动作细节和成绩，为其自动打分并提供锻炼建议。这不仅可以帮助校园开展运动、教学，也为社区锻炼等更多场景提供了可能性。



▲AI体育解决方案展示

郑勇透露，自梧桐大模型推出以来，宇视科技发力文教体领域，推出了AI体锻屏、AI跑步屏、AI足球、旅拍兔VLOG、VR导游产品等多个创新解决方案，已快速落地全国百余个城市。

在刚刚结束的“2024吴钩足球全国总决赛”中，直播正是由宇视的AI全景相机进行智能导播。在支撑多视频拼接画面自动矫正消除画面畸变的同时，其基于AI画面矫正及运镜算法，让摄像机进行自动检测控球权、自动运镜跟踪，从而让AI像人一样去进行精彩赛事直播。

基于宇视“梧桐2.0”打造的解决方案，也同时落地到了智慧城市治理、智慧人行、智慧车行、动物保护等各个领域。

在某地的智慧城市治理中，相关部门应用了基于“梧桐2.0”的城市解决方案，聚焦群众关注的民生问题比如广场舞噪音管理、社区及城市的卫生管理等问题，使其得到高效解决，12345投诉量下降60%。

在这类场景中，各种细碎的问题都可以找到个性化长尾算法，比如：噪音传感器加视频联动，解决工地超时施工扰民难题；物联网油箱盖加车载摄像机，解决危险驾驶隐患和油耗异常等。这些行业解决方案，都不同程度地助力提升管理效率，减少安全隐患。

大模型为各个行业的数字化转型带来了真实价值，也为各个行业的从业者带来更多机会和商机。

这不仅是宇视AI技术的一次自证，也是其与集成商、渠道商伙伴开启的一次他证。

在去年6月的北京安博会现场，宇视启动了梧桐大模型种子合作伙伴计划，与来自交通、教育、零售、体育公共服务等领域的多位伙伴合作开启共创。

宇视提供App技术赋能平台，推出了集数据管理、模型管理、服务管理、快捷工具于一体的行业大模型生态服务平台；行业伙伴基于宇视平台和协助，进行解决方案的开发和推广。

时隔一年多，郑勇告诉智东西，一些合作比较深入的伙伴已经能够收益。他们通过宇视推训一体机去训练行业自有模型，将产品和方案销售给同行或终端用户，还能进行二次收益。

可以看到，当集成商、渠道商从“搬箱子”的人变为智能化方案咨询服务商，与上游设备商的关系由买卖变为培育和共创关系，AI技术的自证与他证也正在接近完成时。

生态赋能是一个长期过程。当下，仍然有一些生态伙伴抱有惯性思维，希翼买回一台机器就拥有了大模型能力，因此在初始阶段存在开发上手难的问题。对此，宇视会直接跟进和协助伙伴项目，保障项目看到效果；同时打磨设备，以开发出让伙伴更易上手的平台工具。

可以预测，AI大模型带来的将是整个行业数字化生态的变革。AIoT硬件市场或许会进一步向头部集中，但算法、App、解决方案的能力将更多向集成商、渠道商靠近，从而形成新的行业秩序。

结语：宇视之路，AIoT行业之变

当全球大模型技术产业竞赛加剧，中国企业与大模型技术，正以更快的速度和千行百业搭起桥梁，落地见效。宇视科技围绕“装备大模型化”的探索之路，也正印证了中国AIoT行业之变。

独行快，众行远。装备大模型化及产业落地前景远大，但道阻且长，这是一条必须有伙伴同行的路。大家看到，产业链上的不少玩家已经在转换角色和思路，融入全新的生态共融秩序。AI技术的自证与他证仍在进行中，宇视和他的伙伴们将一起合力推动新业态的形成。

来源：智东西