云天励飞陈宁:解决了视觉智能的问题,就解决了80%以上的问题

2023-11-07 02:10

本文主要是介绍云天励飞陈宁:解决了视觉智能的问题,就解决了80%以上的问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

2017年12月14日,亿欧2017创新者年会AI产业应用峰会在北京举办。云天励飞联合创始人兼CEO陈宁也发表了主题为“视界智能,用芯实现”的演讲。


人工智能在实际场景中的应用,要比想象的要更加复杂,除了现实环境的干扰外,还要考虑到工程化、兼容性、成本控制等一系列的问题。深圳云天励飞就是一家将芯片、算法、应用场景有机结合起来的计算机视觉公司。活动上,云天励飞联合创始人兼CEO陈宁也发表了主题为“视界智能,用芯实现”的演讲。

以下为演讲内容整理。(为方便阅读,我们在不改变原意的前提下进行了一定修改。)

今天很荣幸有机会跟大家介绍一下云天励飞在深圳创业三年多走过的一些历程和做的一些事情。

天眼,通过一套系统,调用全球的视频监控资源对任何一个个体进行实时定位,这个技术在科幻大片当中层出不穷,大家也都非常熟悉。

就像天眼一样,云天励飞团队在深圳用两年的时间,打造区域级的深目系统,基于动态人像识别,处理器芯片技术、大数据挖掘和深度结合公安的应用场景,这套系统使得今天深圳的两万民警手中有一款动态人像的APP,在两秒钟的时间内,在深圳的任意个体从机场到地铁、南山、龙岗跨区域的城市面的活动轨迹,可以实时在终端级进行定位,并且落地身份、查询逃犯的记录、前科的记录等等一系列的功能。这套系统2015年底在深圳龙岗公安分局小规模上线,从前端108个人脸抓拍相机到后台11台搜索引擎,到搭载云天深目1.0系统,到去年下半年升级到3000个前端的人脸抓拍相机,遍布在龙岗区地铁口、商超、网吧等出入口。

这套系统从去年7、8月份开始推广到深圳的机场、地铁南山等各个区域,目前为止深圳已经拥有了接近五千路公安的一类视频监控高清前端,云天励飞的人脸抓拍相机。在上线一年多的时间,它协助公安破获3000起的案例,涉及到经侦、技侦、拐卖等等各个警种的应用。

今年除夕仅仅用了15个小时,从武昌火车站解救了深圳一名三岁被拐带的男童,从接到报警到通过深目系统落地查询轨迹发现犯罪嫌疑人仅用了不到一个小时的时间就已经将男童带上火车。从除夕前一天男童被拐带,到第二天除夕从武昌火车站解救回来,送回父母的怀抱里,整个过程耗时15个小时,深圳一些公安局的局长已经可以对部里面的领导来讲,在我们的区域两盗两抢和重大的刑事案件的破案率是100%,这个信心来源于底层的技术手段的支撑。并且这套系统从去年年底开始向全国公安进行推广,在北京、上海、杭州、武汉等等全国15所左右的城市,并且是一线城市,都有商业化的落地应用。

从算法到计算力硬件平台的有机结合

所有的这些智能化的应用背后,是一个面向深度学习的处理器。我们知道2016年3月份Alpha Go引爆了大家对人工智能的狂热关注,其实大家忽略了一组数据是,阿尔法狗1.0的系统最大变体曾经使用了1920个CPU和280个GPU,训练一盘围棋的电费需要上千美元,原因就是在深度学习算法快速发展的今天,我们底层的计算力硬件平台,CPU、GPU并不适合深度学习在线快速、精准的业务应用需求。

三年前谷歌公布了自研的Google Tensor Processing Unit的Google TPU 2的架构。随之而来的Alpha Go以及AlphaGo zero,从庞大计算机群变为单机版。同样云天励飞背后也是一个跨界创新的产物,面向深度学习的算法和处理器芯片设计的全新一套指令级的结合,这样在端上结构化的处理器的芯片,能够将海量的视频本地化、快速、集合、准确的转为结构化的信息传输到云端进行海量数据检索以及业务应用。

我们的联合创始团队2014年从美国回到深圳,也是这样一个组成,从处理器芯片设计到计算机视觉、到机器学习、深度学习的算法的融合,这样的团队组合是解决深度学习、解决人工智能底层技术在算法以及计算力上的有机结合的必然产物。

为什么选择视觉方向?

人工智能,大家都在谈算法、芯片、数据,而数据是驱动所有这些业务场景的源头,人类有史以来积累所有了大数据中,85%以上是视频和图象数据,我们认为人工智能的核心之一是视觉智能,如果要量化一点的话,我们就打个比喻,解决了视觉智能的问题就解决了80%以上的问题。

过去十年随着通讯的发展,随着万兆光纤遍布全国各地,随着4G、5G的移动通讯标准的不断进步,我们认为过去十年的视频通讯时代已经逐步走向了成熟,未来十年将是视觉智能的十年。

回到安防应用场景,过去十年是视频监控的十年,它的出发点是视频采集是由人看的所以要有监控。每一个监控的网络,每一个小区都有一个视频监控室,需要保安坐在大屏后面不断的盯着所有的这些摄像头,几年前全国数千万个监控摄像头已经带来了巨大的挑战,人眼再也看不过来海量视频监控资源。随着在深圳实现的这样一些产业化落地和试点的规模,我们相信传统的视频监控时代的1.0将步入视觉智能的2.0,这些视频将由机器来看。

这样的时代变化必然对计算力提出了新的挑战和需求,是传统的CPU还是现在GPU,还是未来的XPU?这个问题非常值得我们思考。这个问题的回答取决于不同的应用场景对于端到云的任务分工和切割。在前端需要用什么样的应用平台,需要用什么样的硬件平台,在云上又需要用什么样的业务应用平台?这些跟应用场景有密切的关系。

视觉计算,很显然已经成为了云计算的核心需求方,城市级视频监控每一天产生的数据量轻易可以达到TB级甚至PP级。这些业务场景各自有具体需求,比如说机场、地铁,发现一个逃犯需要几分钟之内马上出警,发现一个恐怖分子需要及时响应,需要人像、人脸系统实时的报警。

这种高速、本地化的智能分析和报警加上海量的象素处理,对于传统云计算提出了巨大的挑战。将全国的数千万的监控视频资源全部拉到云端,哪怕有万兆级的光纤网络在云端进行统一的处理和分析,已经完全无法满足计算力算法搜索等等各项业务层面的需求。端到云的计算架构应运而出。在云端可以基于特征值的海量检索和业务应用,就要求我们不管在边缘、端计算、物计算或者层计算,总之在终端有一系列定制化在线信息的学习平台,我们叫做IPU,即视觉处理的前端,并且这款前端能够让机器理解视频和图象的内容。

基于这样一个端的本地化视觉智能分析和云端大数据的海量数据分析,以及和应用场景的绑定,我们相信可以逐步去解决视觉计算在城市大脑计算平台上的问题。这样一个大数据的分析平台上,包括平安城市的每一路摄像头,到每一辆无人驾驶汽车上的激光、视觉传感器,再到每一台机器人或者机械制造的每一个机器视觉的传感器前端,

通过这些本地化的感知层和认知层的视觉芯片,能够及时将这些信息面向应用场景进行结构化的处理,并且将结构化的信息传输到城市大脑云端进行分析和处理,提供未来智能化的解决方案,推动真正意义上的智慧城市的落地。

我相信,未来十年,将是基于视觉智能的新十年,谢谢大家。



这篇关于云天励飞陈宁:解决了视觉智能的问题,就解决了80%以上的问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/360541

相关文章

好题——hdu2522(小数问题:求1/n的第一个循环节)

好喜欢这题,第一次做小数问题,一开始真心没思路,然后参考了网上的一些资料。 知识点***********************************无限不循环小数即无理数,不能写作两整数之比*****************************(一开始没想到,小学没学好) 此题1/n肯定是一个有限循环小数,了解这些后就能做此题了。 按照除法的机制,用一个函数表示出来就可以了,代码如下

hdu1043(八数码问题,广搜 + hash(实现状态压缩) )

利用康拓展开将一个排列映射成一个自然数,然后就变成了普通的广搜题。 #include<iostream>#include<algorithm>#include<string>#include<stack>#include<queue>#include<map>#include<stdio.h>#include<stdlib.h>#include<ctype.h>#inclu

嵌入式QT开发:构建高效智能的嵌入式系统

摘要: 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发,详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程,包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发,涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用,以及嵌入式 QT 与硬件设备的交互,包括输入输出设

让树莓派智能语音助手实现定时提醒功能

最初的时候是想直接在rasa 的chatbot上实现,因为rasa本身是带有remindschedule模块的。不过经过一番折腾后,忽然发现,chatbot上实现的定时,语音助手不一定会有响应。因为,我目前语音助手的代码设置了长时间无应答会结束对话,这样一来,chatbot定时提醒的触发就不会被语音助手获悉。那怎么让语音助手也具有定时提醒功能呢? 我最后选择的方法是用threading.Time

如何解决线上平台抽佣高 线下门店客流少的痛点!

目前,许多传统零售店铺正遭遇客源下降的难题。尽管广告推广能带来一定的客流,但其费用昂贵。鉴于此,众多零售商纷纷选择加入像美团、饿了么和抖音这样的大型在线平台,但这些平台的高佣金率导致了利润的大幅缩水。在这样的市场环境下,商家之间的合作网络逐渐成为一种有效的解决方案,通过资源和客户基础的共享,实现共同的利益增长。 以最近在上海兴起的一个跨行业合作平台为例,该平台融合了环保消费积分系统,在短

购买磨轮平衡机时应该注意什么问题和技巧

在购买磨轮平衡机时,您应该注意以下几个关键点: 平衡精度 平衡精度是衡量平衡机性能的核心指标,直接影响到不平衡量的检测与校准的准确性,从而决定磨轮的振动和噪声水平。高精度的平衡机能显著减少振动和噪声,提高磨削加工的精度。 转速范围 宽广的转速范围意味着平衡机能够处理更多种类的磨轮,适应不同的工作条件和规格要求。 振动监测能力 振动监测能力是评估平衡机性能的重要因素。通过传感器实时监

缓存雪崩问题

缓存雪崩是缓存中大量key失效后当高并发到来时导致大量请求到数据库,瞬间耗尽数据库资源,导致数据库无法使用。 解决方案: 1、使用锁进行控制 2、对同一类型信息的key设置不同的过期时间 3、缓存预热 1. 什么是缓存雪崩 缓存雪崩是指在短时间内,大量缓存数据同时失效,导致所有请求直接涌向数据库,瞬间增加数据库的负载压力,可能导致数据库性能下降甚至崩溃。这种情况往往发生在缓存中大量 k

6.1.数据结构-c/c++堆详解下篇(堆排序,TopK问题)

上篇:6.1.数据结构-c/c++模拟实现堆上篇(向下,上调整算法,建堆,增删数据)-CSDN博客 本章重点 1.使用堆来完成堆排序 2.使用堆解决TopK问题 目录 一.堆排序 1.1 思路 1.2 代码 1.3 简单测试 二.TopK问题 2.1 思路(求最小): 2.2 C语言代码(手写堆) 2.3 C++代码(使用优先级队列 priority_queue)

智能交通(二)——Spinger特刊推荐

特刊征稿 01  期刊名称: Autonomous Intelligent Systems  特刊名称: Understanding the Policy Shift  with the Digital Twins in Smart  Transportation and Mobility 截止时间: 开放提交:2024年1月20日 提交截止日

基于 YOLOv5 的积水检测系统:打造高效智能的智慧城市应用

在城市发展中,积水问题日益严重,特别是在大雨过后,积水往往会影响交通甚至威胁人们的安全。通过现代计算机视觉技术,我们能够智能化地检测和识别积水区域,减少潜在危险。本文将介绍如何使用 YOLOv5 和 PyQt5 搭建一个积水检测系统,结合深度学习和直观的图形界面,为用户提供高效的解决方案。 源码地址: PyQt5+YoloV5 实现积水检测系统 预览: 项目背景