3D视觉给智能安防带来哪些机遇

未来安防智能化落地的三大方向:视频结构化、生物识别技术、物体识别技术。

视频结构化对数据进行追踪和关联的分析,从而做到事前预警;生物识别技术中的人脸、指纹、虹膜、声纹识别将得到大规模应用;物体识别技术减轻各种成本,提升效率。

奥比中光今年计划打造国内首个3D视觉开发社区,社区将作为安防与其它行业开发者对接3D视觉技术的窗口。公司还将组织3D视觉的开发者大赛,让所有的开发者都能获取3D视觉高效和专业的服务。“让所有终端都能看懂世界”是奥比中光的企业使命,我们希望能在安防领域继续生根,与合作伙伴一起团结协作,让3D视觉技术在更多场景中落地。雷锋网雷锋网(公众号:雷锋网)

我们现在看到的所有图像、视频都是通过2D摄像头平面成像,2D无法识别物理世界中的三维信息,比如尺寸、体积、距离等几何数据。3D摄像头是立体成像,能够识别视野内空间上每个点位的三维坐标信息,把这些坐标信息给到计算机和芯片,通过三维成像算法,能完整复原出整个三维图像。

安防系统中的生物识别技术

3D能够带来什么样的改变?

面对高温天气,不少网友在微博上表示“今天北京热得要把人温暖蒸发”“完全不敢化妆,怕汗水会花妆”……

物体识别技术。物体识别的典型案例就是车牌识别,如今车牌识别已成为许多智能停车场的标配。使用车牌识别技术,采集车辆图像,能够减轻停车场管理运营的人力成本,提高通行效率。

传统的普通双目门禁就是双目立体视觉代表,它主要通过三角测距计算出深度信息。但它受环境光影响大,同时需要大量特征识别、立体匹配的算法,匹配和计算过程复杂,难以生成实时的、稳定的深度信息。

奥比中光自成立伊始就一直坚持自主研发,尤其在芯片的自主研发上不断攻关。2015年,公司成功研发出国内首颗3D深度计算芯片,一定程度上打破了欧美国家的垄断,同年这款3D摄像头实现量产,到现在为止还在销售。2017年,公司第2代ASIC芯片流片成功,同年研发出手机3D摄像头,2018年第3代芯片研发成功。所以2015年到2018年三年时间,公司生产了三代芯片的流片。2018年OPPO Find X发布,其中就搭载了奥比中光的3D摄像头模组。

基于3D图像的人脸识别

柳叶刀TheLancet 《柳叶刀》(The Lancet)于5月22日在线发表的一项在108名成人中进行的研究表明,首个SARS-CoV-2疫苗的1期临床试验发现:该疫苗是安全的,具有良好的耐受性,并能在人体内诱导产生针对SARS-CoV-2的免疫应答,但尚需进一步研究证实该疫苗是否能够有效预防SARS-CoV-2感染。

去年我们取得了银行卡检测中心的“活体检测”认证报告。奥比中光涉猎新零售业务,需要保证刷脸支付的安全,支付宝刷脸支付终端就使用了奥比中光的3D摄像头。

世界卫生组织卫生紧急项目负责人瑞安周五表示,很多南美国家新冠病例数不断增加,从某种意义上说,“南美已成为新冠疫情新震中”。目前,巴西累计确诊病例已超过30万,死亡病例超过2万,是南美疫情最严重的国家。

第三个,目标重叠的时候,2D摄像头很难把分析目标从背景中分离出来。

我们在智能门禁领域做了一些尝试,有个合作伙伴戴头套测试我们做的一款闸机,系统植入了3D信息,跟2D算法融合,在速度和效率上有成倍提升,所以系统很快识别出来,这款闸机目前主要供应给银行、政府部门等重点安防场所。

刑侦领域需要进行犯罪现场的实景还原,原来只能拍照、录像或者现场人工测量,现在3D视觉系统可以把整个犯罪现场完整地进行扫描和复刻。因为犯罪现场不能一直保留,查案时可以在这种三维系统里进行重新排查。另外,庭审时也可以复原整个案件、插入语音讲解、播放图像视频等,能够非常直观地呈现案件发展过程。

我们也有客流分析系统方面的案例,主要在公交车领域,统计单位时间内上下客流的情况,实时数据会传送到车辆指挥调度系统,帮助调度中心进行车辆的指挥和调度,在高峰期可以调整运营、减轻压力。

其实基于2D的人脸识别有很多漏洞,虽然现在很多厂商宣称其使用的双目、AI+RGB能做到活体检测,但是这种技术被攻破几率很大。

深度信息到底是什么?举几个例子,第1张图看鸽子的大小,从这个视角上看,鸽子比远方的行人要大;第2张图里一个人从窗口探出一只手抓住汽车,感觉汽车变成人手中的玩具;第3张图中杯子上面的蚂蚁好像和远处飞过的直升飞机一般大。

奥比在做3D活体检测实验中,工作人员用很多的假体,包括头套、面具、照片攻击3D人脸识别系统,系统能够非常准确地判断。在整个活体检测实验中,我们采用2000多种不同材质的假体做大量实验,做相应的算法去规避这些假体对人脸识别系统的攻击。

首先,3D是主动光技术,可以在完全无光照环境下正常的工作。在强光、逆光环境下也能达到较好成像效果。

现在很多手机已经开始应用3D摄像头,主要的关键点有两个:前置还是以结构化为主;后置会以ToF的相机为主。

智能安防的市场规模如何?虽然这些数据的统计时间较早,但是也有一定的参考价值。2017年,中国安防市场的资产规模达到6220亿,2018年,智能安防的资产规模接近300亿。预计2020年以后,智能安防将创造千亿级的市场,所以智能安防市场不容小觑。

第二,可以获取空间中的三维数据,包括尺寸测量,空间中人、车的位置,身高、体重、距离、速度等,都可以精准的计算出来。

5丨美国新冠感染人数破160万

3D 视觉赋能安防新机遇

另外还可以进行背景分离,实现实时的、动态的人体人像抠图,在进行智能分析时去除背景干扰,提高算法分析准确率。还可以进行活体检测与识别,在家庭安防、车内安防等私密场景中,我们只需要一些深度信息,即可以实现这种安全监控与行为分析。

北京市气象部门提示,晴晒高温天气下,白天紫外线照射强,需注意防暑防晒勤补水,中午前后尽量避免户外活动;另外空气干燥,注意用火用电安全,谨防火灾。(完)

我认为未来高铁站的刷脸进站、海关的刷脸通关以及更多的场景都会逐步替换成有3D视觉的设备。

在二维图像里,因为不同的拍摄角度,近大、远小并不是现中的真相。

人脸识别的安全性怎么会低呢?试举以下几个案例:去年嘉兴一群小学生利用父母的高清照片成功在快递柜上刷脸取件;智能门锁很多也应用了人脸识别,但媒体做了一个小测试,拿出打印好的业主照片,对准门口的摄像头,轻易地就把门打开了;有一次我住酒店时看到前台有自助酒店服务终端,我就把我的身份证和照片发给我的同事,他用我的身份证和照片,轻而易举地完成了核验,拿到了房卡。

第一是成本。前端部分、存储和视频分析是智能安防高成本的主要因素。集成施工、机房改造等系统建设的时间和人力成本,也提高了智能安防的落地成本。

针对未来安防智能化落地方向,奥比中光高级战略BD总监彭勋禄做客业务具备云端的能力,海思芯片在安防行业的市场占有率非常高。像华为一样的巨头进入,对整个安防行业的格局来会产生深远影响。

第三是人工智能应用的深度不足,现在的人工智能技术应用于小范围或者单目标场景。像安防这种大范围的监控,还有人、车、物的关联分析需要专业能力和专业技术的积累。

智能安防是热门话题,但具体落地的情况如何?中国一年就有超过5000万个摄像头的市场需求,但实际只有50万个智能摄像头在应用,比例不到1%。为什么?

3丨世卫组织称南美已成为疫情新震中

AI分为三个阶段,感知、认知和决策。感知就是AI通过不同的传感器接收物理世界的信息;认知就是AI通过算法判断、理解信息;决策就是AI的大脑,做综合的分析,并执行相应的动作。

第二区别是人体特征检测,2D只有XY这样的平面信息,缺乏深度数据,无法对目标进行精准定位与持续跟踪。

智能安防三大落地方向

除了人脸识别以外,安防有一个很重要的场景叫行为分析。传统的2D行为分析更多的是靠数据训练深度学习和识别能力。3D视觉对视频里的异常行为能够实时地跟踪与判别,例如突然倒地、突然剧烈运动、人数异常、区域入侵等事件。

雷锋网原创文章,。详情见转载须知。

感知也分很多种,比如视觉、听觉、嗅觉、触觉等,这些都是通过不同传感器去实现的。感知技术里占比最大的是视觉,视觉在整个感知里占比70%以上。传统意义上的视觉是以2D为主,现在2D的清晰度也越来越高,4K、8K都已出现,但依然停留在二维、单维的层面,只能解决看得清的问题,缺少了物理世界中的3D图像,即深度信息。

我认为指纹识别的应用性比较好,成本较低,技术较成熟,但是用户体验差,比如手指有破损或者有水有汗的时候,经常识别不出来。另外它的防攻击能力弱,会带来很多安全隐患。

生物识别技术正成为世界范围内使用最为广泛的技术之一,市场上主流的生物识别技术主要有人脸识别、指纹识别、虹膜识别、声纹识别。它们有哪些优缺点?

4丨《柳叶刀》发表首个新冠病毒疫苗人体试验,安全并能诱导快速免疫应答

生物识别技术。生物识别技术是指利用人体生理特性和行为特征来进行个人身份验证的技术。现在的人脸、指纹、虹膜、声纹识别都属于生物识别技术,未来将会在安防行业得到大规模推广和广泛应用。

未来智能安防落地方向在哪里?我认为在三个层面。

第一个区别是光线,2D摄像头在光线较暗的场景下成像质量非常差,尤其是需要附加类似智能分析的功能时,分析效率存在较大问题,会有很多错检、漏检,虽然会有红外光进行补充,但实际上在红外上做智能分析会缺失很多信息。

而且2D无法做活体检测,人脸识别中,如果没有3D的活体检测,很容易受到照片与视频的伪装攻击。

现在主流的3D成像技术是结构光和ToF,这两种技术都是主动光技术。结构光的特点是近距离(1-2米)精度非常高,可以达到毫米级,而且它的分辨率高,成本相对比较低,适合集成。ToF的特点是距离长,能达到5-10米,苹果刚刚出来的一款iPad就搭载了ToF的激光雷达传感器。这种传感器可以实现未来VR和AR的一些功能,但是它点云密度低、扫描延时大、深度图分辨率低,精度比结构光要差,深度矫正困难。所以结构光和ToF各有优缺点。

虹膜识别的安全性是最高的,但是它的易用性很差,而且成本较高。指静脉也是一样,安全性高,成本高,适用性很强。

人脸识别技术比较成熟,成本也适中,可以实现无感识别,在人机交互方面比较自然,唯一的缺点还是安全性低。

3D与2D图像的区别

2丨全国人大代表张伯礼:中医强行“走出去”行不通

第二是数据,安防领域的数据比较分散,存在许多数据孤岛。尽管我们一直追求建设智慧城市,倡导数据共享,但这些数据分布在不同的体系里,包括公安、交通、城管等,很难实现共通共享。如果没有数据,人工智能也无法进行数据分析和支撑。

雷蕾提到,由于前期没有明显冷空气影响,北京地区处于暖气团控制,基础温度高,而且8日天气以晴为主,光照条件较好,干燥的地表在阳光的炙烤下,向低层大气发出长波辐射(热辐射),因此气温上升快。

 三种3D视觉成像技术

视频结构化。视频结构化的概念已出现多时,是指利用计算机视觉和视频监控分析方法对摄像机拍录的图像序列进行自动分析,包括目标检测、目标分割提取、目标识别、目标跟踪等。主要作用是为未来人工智能进行数据追踪和关联分析提供事前预警。

另外,现在安防家用摄像头很普遍,但是隐私泄露隐患给公众造成了心理压力和安全问题。

据央视新闻,记者专访全国人大代表、中国工程院院士、天津中医药大学校长张伯礼时,他表示,中医药走向世界,不是一厢情愿的。中医药能走向世界,一定是世界有需求。我愿意给,他愿意要,这样才行得通,强行“出国”是不行的。中医药不单治病,它还能防病。只要是好东西,我们就愿意分享。现在西方人不理解中医药,以后慢慢会理解,等他们理解了我们再走出去,现在不要着急。先练好内功,到了合适的时候就可以走向世界。

雷蕾称,受高空槽影响,8日夜间山区、9日傍晚到夜间大部分地区有雷阵雨。受降雨和云量增多影响,9日气温回落,最高气温32℃左右。

最后一个是人工智能识别技术对视频成像的质量有较高要求。为什么会有高要求呢?这就是我后面要展开的,3D视觉与智能安防到底是怎样的关系?

据美国约翰斯·霍普金斯大学数据,截至22日晚10时,美国新冠肺炎确诊病例达160万人,死亡95972人。

我们在很多场景中已经开始使用3D视觉,智慧养老场景中,为家里的老年人做异常姿态检测;智慧金融场景中,检测异常情况,例如有人倒地、打架斗殴或者有人徘徊等事件;在智慧监舍场景,由于监舍对犯人的行为监控要求非常高,用3D摄像头可以识别他们的一些高危险行为。

奥比中光成立于2013年,虽然成立至今只有7年时间,但是发展迅猛。公司共有员工700余人,其中研发人员占据70%以上。奥比中光是全球第四家能够量产3D消费类传感器、摄像头的公司,前面三家分别是苹果、微软和英特尔。目前奥比中光已经进行了D轮融资,由蚂蚁金服领投,估值超过100亿,公司全面覆盖20多个业务领域,全球摄像头的出货量已经超过300万台。

2D与3D在安防产品的应用中有哪些区别?

3D 传感技术主要分为结构光、ToF和双目视觉三种,不同的技术路线决定了精度曲线,进而决定应用场景。