如何用智能有效感知城市?城市大脑三大AI产品来了

简介:

华先胜:城市大脑经过两年多的发展,连续克服了很多技术的困难和非技术的困难,积累了大量的技术、产品和解决方案。城市大脑解决的是什么问题?除了城市的数字化、数据的汇聚,更重要的是怎么挖掘城市大量数据的价值。今天的AI技术,计算能力,城市里不断增长的数据,给我们提供了这样的基础条件,使得我们可以充分挖掘这些数据的价值,改变这个城市的治理方式,从而改变我们的生活方式。

db1ba49988b7852f5284462c2963f07b25dcc929

过去,城市有效感知存在三个问题

城市数字化转型的第一步就是对城市的有效感知。我们想用智能改变它,首先要对这个城市做一个合理的、有效的感知。过去的感知手段存在三个问题:

ad43ea85d3a55e77d73d7a910fe08042297f93b8

第一个,盲人摸象。现在有很多局部的感知手段,例如线圈,卡口相机、GPS轨迹等,但是这些感知手段都是局部的、残缺的。而视频数据,作为对整个城市的非常全面的感知数据,没有被充分利用起来。

第二个,我们虽然有了摄像头,但对城市的了解还是很有限的。城市里部署的摄像头里面,有非常大的一部分没有智能功能,即使是有智能的,受其计算能力和算法能力的局限,对城市的感知理解也非常有限。

第三个,对城市的感知无法发现事件背后形成的原因,所以我们称为雾里看花。实时的、全局的视频信息没有被运用起来,这是主要的原因。

63d15e16cf7c5a3b83b316ef6c00b861ce125269

城市中的视频数据跟其他数据不一样在于它是象素。

首先要分析、感知、了解我们的摄像头看到了什么,包括人、车、事、物。这些都知道后,我们就可以做下一步的决策和优化。例如事件、事故的快速报警。如果发生了交通事故,我们马上就可以感知到并进行处理。对于严重的交通事故,我们可以第一时间知道,并指派医疗资源到达现场,几分钟时间的节省可能就可以挽救生命。

接下来是决策和优化,有了对城市交通流量、交通事件等全面、实时的感知,让我们可以对整个的交通组织进行优化,提升通行效率。另外,全面实时的感知,可以使得城市里面的数字信息达到一个可搜索的级别,我们可以对特定的对象进行实时查找和搜索,如对肇事逃逸车辆的追踪,对失踪人员的查找。

最后是预测和干预。根据当前交通流态势以及其他大量多模态的数据,我们可以预测交通的变化趋势,比如说十分钟以后车流是什么样子?甚至可以做更长时间的预测,比如根据明天的天气状况和城市里的大型活动情况,可以对明天交通事件、事故的概率做一个预测,以及哪些路段拥堵的时间会超过1个小时,有了这些信息交通管理部门就可以做进一步的干预。比如针对某些情况可以做一些预先的资源分配,加大警力投入,也可预先对周边的交通流进行控制,不让这些坏的情况发生。

所有的这些就是利用AI的能力让城市具备智能,给城市装上会思考的大脑,这也是为什么我们叫城市大脑而不是叫智慧城市的原因。

城市大脑三大AI产品:天曜、天鹰、天机

城市大脑“天曜”:对城市里面的交通事件、事故进行全方位的实时感知,全时全域自动巡逻报警。天曜,曜是什么意思?日月金木水火土七星,代表一周的七天,一天24小时,全方位代替交警巡逻。它使用的是城市里面大量没有智能分析功能的摄像机,利用云计算、深度视觉等技术使得这些没有智能分析功能的相机具备了对城市交通事件、事故全方位的实时感知、报警的能力。

86810d274853ef0eb4f6955b647d4f2883e64610

举个例子,有车和行人相撞的交通事故、或者路口交通拥堵,对于这些异常情况,“天曜”都可以及时发现并告警,交警指挥中心接到告警后可以快速的对异常交通情况进行有效处理。“天曜”不仅能发现空间维度的异常,也能发现时间维度的异常,比如有一个地方每天的报警次数非常多,实际上可能是某些交通组织或设施存在问题,比如车道设置不合理。“天曜”发现了很多这样的案例,线下交警做了处理,报警的次数明显下降。很有意思的是,每一项措施实施后,对交通的改善是否有效,我们马上就能知道。

这是在杭州城市数据大脑做的一个实践,用机器视觉技术代替交警巡逻,而且是全天24小时不间断地工作,这样就可以节省大量的警力,释放的警力可以放到更有价值的工作上去,进一步提升警务效率,比如对大量警情的处置,对交通异常状况的快速排除等。

c06fe3c31c903e5d1f8f370f54102d131db30606

“天曜”里面使用的物体检测技术具备非常高的精度,即使是标清模拟设备或夜间低照度下,也能正常工作。这里面使用的技术,在KITTI比赛上拿到了第一名,包括车辆的检测、行人的检测一直保持在第一名的位置。另外,异常事件发现的技术,也是公开发表的,大家有兴趣可以看我们在ACM MM上发表的论文,这个也是我们实践产品中的一个秘密武器。

城市大脑“天鹰”:96%+,世界第一的行人识别准确率 。对于城市的视觉信息,我们有非常丰富的经验,差不多20年的图像搜索 经验,包括通用图像搜索,电商图像搜索和城市大规模视觉搜索等。“天鹰”这个产品里面有两大核心问题:一是怎么处理这个城市的海量数据?二是怎么描述我们索引的对象,比如怎么描述一个人?这个产品的学术名字叫做“渐进式视频搜索引擎”,通过人和机器的交互,快速实现对特定对象的定位。比如查找失踪人口,追踪肇事逃逸车辆等。

8cf429ad77c1f79946fd592ad9d71380642aa91f

其中的基础技术是行人识别,今年年初我们也拿到了世界上这个方面一个知名数据集上第一名的成绩(行人重识别数据集 Market 1501),达到了比人还要强的识别能力。人的能力是94%,我们可以做到96%以上。例如,如果有人走丢了,我们可以用这套系统,快速定位出他的行动轨迹。

城市大脑“天机”:预测城市车辆、行人流量。这是一个产品预告,还没有正式发布,和江苏有关系,因为这个产品是在苏州做出来的,是实时车流以及人流的预测。有了这套系统,我们就可以知道十分钟、二十分钟、一个小时以后车流是什么样子,我们可以做更好的导航、管控和预警。我们命名叫做“天机”,可以通过这套技术知道未来发生的趋势。

c8992c892139520a5f4002cceb0a6d70b157086c

城市大脑未来的三大思考

刚才讲的是三个基于视觉和视觉大数据的产品,我稍微拉回来一点,再讲讲城市大脑的整体想法。

第一个是,城市大脑的核心是使用不断发展的AI技术和计算能力,去挖掘城市里面不断增加的大量的数据的价值,这是它的核心。

第二个是,它做的事情是人类无法完成的,因为计算的复杂度、问题的复杂度、数据的复杂度和数据量,是无法通过人脑直接来完成的。所以,我们有时候也可以把它叫做“机器智能”,来实现人力不可完成的任务。

第三个是,我们相信这样的系统将来会成为城市的基础设施,就像水、电一样,成为城市不可缺少、不可替代的一部分。

945972300ebb3be57a94dbfb5af46de41cd2671e

正因为这样的特点,城市大脑也被科技部选中为国家首批四个人工智能开放创新平台之一。这个平台包括了底层计算平台,数据智能,智能应用,以及各行业应用,包括交通、安全、甚至将来有环境、医疗、通讯、工业等等。我们既搭建这个舞台,也有部分优秀的演员在这个台子上表演,同时这里有更广阔的空间,图上这个大三角中浅色的部分就是指整个平台的开放部分,我们希望有更多的第三方、各行各业的合作伙伴一起来共同建造城市大脑,为城市的变革提供更多的智能、更多的惊喜。谢谢大家。


原文发布时间为:2018-05-3

本文作者:华先胜

本文来自云栖社区合作伙伴“阿里技术”,了解相关信息可以关注“阿里技术”。

相关文章
|
人工智能 自然语言处理 Devops
云效 AI 智能代码评审体验指南
云效AI智能代码评审正式上线!在合并请求时自动分析代码,精准识别问题,提升交付效率与质量。支持自定义规则、多语言评审,助力研发效能升级。立即体验AI驱动的代码评审革新,让AI成为你的代码质量伙伴!
1146 7
|
人工智能 自然语言处理 算法
【2025云栖大会】AI 搜索智能探索:揭秘如何让搜索“有大脑”
2025云栖大会上,阿里云高级技术专家徐光伟在云栖大会揭秘 Agentic Search 技术,涵盖低维向量模型、多模态检索、NL2SQL及DeepSearch/Research智能体系统。未来,“AI搜索已从‘信息匹配’迈向‘智能决策’,阿里云将持续通过技术创新与产品化能力,为企业构建下一代智能信息获取系统。”
1418 9
|
机器学习/深度学习 人工智能 算法
用于实验室智能识别的目标检测数据集(2500张图片已划分、已标注) | AI训练适用于目标检测任务
本数据集包含2500张已标注实验室设备图片,涵盖空调、灭火器、显示器等10类常见设备,适用于YOLO等目标检测模型训练。数据多样、标注规范,支持智能巡检、设备管理与科研教学,助力AI赋能智慧实验室建设。
用于实验室智能识别的目标检测数据集(2500张图片已划分、已标注) | AI训练适用于目标检测任务
|
机器学习/深度学习 人工智能 算法
阿里云视频云以 360° 实时回放技术支撑 NBA 2025 中国赛 —— AI 开启“智能观赛”新体验
NBA中国与阿里云达成合作,首发360°实时回放技术,融合AI视觉引擎,实现多视角、低延时、沉浸式观赛新体验,重新定义体育赛事观看方式。
1738 0
阿里云视频云以 360° 实时回放技术支撑 NBA 2025 中国赛 —— AI 开启“智能观赛”新体验
|
人工智能 编解码 搜索推荐
AI智能换背景,助力电商图片营销升级
电商产品图换背景是提升销量与品牌形象的关键。传统抠图耗时费力,AI技术则实现一键智能换背景,高效精准。本文详解燕雀光年AI全能设计、Canva、Remove.bg等十大AI工具,涵盖功能特点与选型建议,助力商家快速打造高质量、高吸引力的商品图,提升转化率与品牌价值。(238字)
1064 0
|
消息中间件 人工智能 安全
云原生进化论:加速构建 AI 应用
本文将和大家分享过去一年在支持企业构建 AI 应用过程的一些实践和思考。
2733 97
|
人工智能 安全 中间件
阿里云 AI 中间件重磅发布,打通 AI 应用落地“最后一公里”
9 月 26 日,2025 云栖大会 AI 中间件:AI 时代的中间件技术演进与创新实践论坛上,阿里云智能集团资深技术专家林清山发表主题演讲《未来已来:下一代 AI 中间件重磅发布,解锁 AI 应用架构新范式》,重磅发布阿里云 AI 中间件,提供面向分布式多 Agent 架构的基座,包括:AgentScope-Java(兼容 Spring AI Alibaba 生态),AI MQ(基于Apache RocketMQ 的 AI 能力升级),AI 网关 Higress,AI 注册与配置中心 Nacos,以及覆盖模型与算力的 AI 可观测体系。
2080 95
|
人工智能 运维 Kubernetes
Serverless 应用引擎 SAE:为传统应用托底,为 AI 创新加速
在容器技术持续演进与 AI 全面爆发的当下,企业既要稳健托管传统业务,又要高效落地 AI 创新,如何在复杂的基础设施与频繁的版本变化中保持敏捷、稳定与低成本,成了所有技术团队的共同挑战。阿里云 Serverless 应用引擎(SAE)正是为应对这一时代挑战而生的破局者,SAE 以“免运维、强稳定、极致降本”为核心,通过一站式的应用级托管能力,同时支撑传统应用与 AI 应用,让企业把更多精力投入到业务创新。
1152 30