新闻中心News
2019深圳安博会丨揭秘佳都科技安博会亮点——AR三维实景融合技术
浏览数: 发布时间:2019/10/29

10月28-31日,第十七届中国国际社会公共安全博览会(简称“CPSE安博会”)于深圳会展中心隆重举行。本次展会,佳都科技围绕“数据智能”“孪生城市”两大主题,全面展示公司世界级人工智能技术及产品、专业服务以及在各个行业场景的综合解决方案。

据了解,今年安博会,佳都科技带来了面向空天地海廊的通用市场产品:AR三维实景融合技术平台。平台是融合数据场景、地图场景与视频场景,实现对真实世界的全息数字刻画的新一代可视化技术平台,在第十七届中国国际社会公共安全博览会上获得最高荣誉奖“金鼎奖”。

AR三维实景融合技术平台究竟有何作用?为什么发布不久就获此殊荣?今天,让我们揭秘佳都科技“亮点”。

AR三维实景融合技术是由地理测绘技术、激光雷达遥感技术、大规模视频融合拼接技术、BIM技术、三维GIS技术等多种技术通过实景复刻三维重建手段相结合的一种新兴技术。AR三维实景融合技术脱胎于智慧城市安防建设中的常见应用场景。在视频监控方面,随着智能前端视频监控设备的不断发展,安防能力在CMOS感光技术、超高清技术、枪球联动高低点联动、AI人工智能人脸识别车辆识别技术的加持下逐步解决了看得见、看得清、看得全、看得懂的问题。但其弊端也显而易见,画面独立看不全,视角分散不直观,画面位置不明确,视角信息难看懂。在地图GIS方面,传统二维地图无法满足交通领域的高架桥、涵洞、隧道、桥梁等立体化建设的标记标注目标。因此AR三维实景融合技术应运而生,通过将视频-数据-地图三者进行三合一从而达到融合地图场景、视频场景、数据场景,更高效的对现实世界进行“全息的刻画”,“深刻的洞察”,“智慧的赋能”,实现场景要素全面的可知、可测、可控。

地图、视频、数据三大要素

AR三维实景融合技术的瓶颈和疑难是如何将地图,视频,数据三者以一种统一的形式在一个应用界面中进行全息刻画,深刻洞察,智慧赋能。为什么要选择地图、视频、数据这三个场景,着力三景合一?这是当前的安防市场决定的,这是历史沉淀的智能交通的各种建设项目积累的技术经验决定的,安防系统中积累的各种视频前端设备联网实战运维平台,乃至视频云等解决方案积累了较为深厚的GIS地理信息系统技术解决方案,并围绕着GIS进行了流程类导入数据类接入的大量开发工作。这些 GIS的数据积累匹配各类项目中的前端设备接入成为了持续开发集成形成各类公共安全领域凝聚的核心竞争力,包括对视频接入能力、解析能力、结构化能力、算法能力,而这些能力能够帮助我们具备更广泛的前端设备兼容性,更快速准确的图像解析能力。

地图:地图场景包括了多种地图融合应用的基础能力,并能够扩展为行业图层,多种地图包括视频 AR 地图、室内3D 地图、二维 GIS 地图、VR 全景地图、在线卫星地图、在线街景地图、倾斜摄影地图。这些地图是可以随着视频、数据的发展而逐步发展的,我们将地图的技术发展中的各类地图作为载体,研究地理信息要素对于实景融合技术实现上的关键作用,应用地图技术中的多种高程、倾斜、投影、瓦片、切图等工艺,提取其工艺赋能到其工艺中最适合应用的落地场景中,从而达到对地图这样一个“培养皿”的“河床”作用。

这个作用能够直接或间接的成为“视角能力”的可视化能力的基础。目前我们集成应用的视频 AR 地图、室内 3D 地图、二维 GIS 地图、VR 全景地图、在线卫星地图、在线街景地图、倾斜摄影地图这些地图,在AR三维实景融合技术看来,每一种地图都不仅仅是一个“死”的不动的地图展示,而是一个“活”的“视角能力”的载体,让不动的地图用动的视角来展示,这样才能让地图活起来,在这个“培养皿”般的地图中培养泛智慧交通中的各类要素,构建其关联关系,落地场景应用的整个闭环,在地图中看到整个场景落地的生态,从而让AR三维实景融合技术做到不同视角应用不同地图,由视角能力作为地图能力的种子,来开发构建视角能力为基础的如多层级指挥联动,预案导向指挥,盲区协防区域联防等视角变换要求多样化的丰富应用。

因此,我们将各类已生产的地图进行多地图融合,融合的牵引线就是场景应用,形成的这样的场景地图“河床”式沉淀,将能够快速的将我们的场景应用进行复制,形成各类行业地图和精分地图,如应急指挥在场馆、路段、县乡道、核心商圈,并能够根据上述地图的融合形成行业图层,以场馆路段为例,有标志标线的交警图层、有绿化环卫的城管图层、有地下燃气管线的安监图层等。

视频:视频场景包括了建筑 BIM 模型导入形成室内外视频联动、无人机倾斜摄影快速建模形成长镜头一镜到底可视化能力,第一人称视角的多镜头融合高低点联动能力,镜头漫游,跨镜追踪等多种视频场景。相比传统视频应用平台AR三维实景融合技术的视频能力具备几个技术难点:

    1、 不同于视频打标签的视频展示方式,我们使用视频叠加融合方式,以虚实结合方式,进行实时全景展示。我们是“全视界”视频展示,强调的是真实世界的全息刻画。

    2、 由于具有全视界视频展示的效果,因此视频发布载体突破了传统视频的中看不中用,瓶颈难点更强调用,用的体现是基于三个方面来呈现的:

中看:让你看的更全局,更连贯,更清晰,是以上帝视角进行精准聚焦,视角的变换对应的俯视、旁注、直面、侧面均充分的调取各种地图的能力和视频融合的角度和连续视频的拼接,从而达到全息 刻画。更中用:让你能够有一机四屏的使用方式,补齐传统视频平台的大屏上墙单一方式,能够在APP 端、载具端、大屏端、电子沙盘端进行相同展示效果,不同场景方式的使用方式。

“用”更体现在将实时视频机构化的能力中达到视频内实时结构化效果做到 3 秒以内结构化。能够通过AR三维实景融合技术引擎将结构化、解析算法等用的方式 与视频结合起来,让视频不但用来看,更用来实战。

“用”更体现在交互性及控制性。所见即所得的视频拼接效果能够给予视频使用者更多交互控制的通道,比如视频会议模式下的应急指挥场景,对多层级指挥中的一线指挥-分控指挥-中控指挥-联动指挥-移动指挥中对瞬息万变的信息一致性准确性实时性要求,实时视频融合实时视频结构化 带来实时信号控制输入输出。利用视频与控制系 统融合,让控制指令通过视频界面直接发送,实现设备可视化管理交互控制的能力。能够形成类组态的控制能力,控制交通信号灯,让系统不但能看还能用。

高清道路三维全景数据示意图

全息刻画  深刻洞察 智慧赋能

在智慧交通领域应用前景和趋势是利用AR三维实景融合技术对交通领域的全息路口、全息路段、全息路网、交通大脑、虚拟标志标线、交通设施进行全息的刻画,深刻的洞察,智慧的赋能。

“全息的刻画”:刻画的发动机是AR三维实景融合技术引擎,这是一个三合一引擎,是数据引擎+地图引擎+视频引擎的三合一自主引擎。既然是全息,一定不是单一的仿真,仿真缺乏感知,仿 真无法全维度。视频融合+多地图集成多视角应用+第一人称视角的多镜头融合高低点联动室内外联动+实时视频实时人脸车辆特征行为实时结构化解析分析=全息刻画=身临其境=沉浸式体验指挥。

 “深刻的洞察”:洞察要求透过现象看本质,现象是所见即所得的视频,地图,结构化。过程是对应的人地物事情组织,本质是图像侦查精准研判,是火眼金睛般的进行慧眼人、地、物、事、情、组织,在视频大数据中进行深度学习,利用知识图谱技术按图索骥,精准破案。其深刻的洞察对其深刻二字是对三维实景智慧交通系统的看的准、看的清、看的远,离不开数据引擎的支持,专有算法的赋能。协同战斗队形里,三维实景智慧交通系统作为决策支持交互与展示的先锋,圈定多层防护圈和数据感知和模型的深刻洞察数据源,沉淀疑情案情的共性与特异性辅助精细化案事件解析,导入差异化算法和行为提供 给智慧交通数据源源源不断的新奇特数据输入,提供多维数据感知 的大数据研判海量数据支持,使得场景选取到落地更快准狠。

“智慧的赋能”:三维实景智慧交通系统要赋能,给谁赋能?赋什么能?目前三维实景智慧交通系统给公安的交警、科信、指挥、治安、图侦赋能,也给泛公共安全的交通、应急、安监赋能。以公安为例,赋能应用是通过三维实景智慧交通系统形成面向指挥应用、全景侦察、精准布控、全息场景刻画、场景回溯周边视频、POI自动批量导入形成行业POI图层、视频动态可视域、盲区协防、视频PTZ分离、警务看板、大规模全景拼接一镜到底、警卫安保路线、安保预案演练、一标三实管理、视频巡更、周界防范、勤务指挥、视频警力调度、一机四屏应用。

智慧城市是真实城市环境与虚拟城市环境的融合与协同,AR三维实景融合技术在其中发挥重要的时空信息承载和纽带作用,并提供了有力的可视化分析方法和支撑手段。未来,佳都科技也将不断探索AR三维实景融合技术更新、更优的概念框架、方法和技术,打造数字孪生城市。

更多精彩产品与技术,欢迎各位莅临深圳会展中心-1号馆1B12佳都科技展位交流探讨!

00.jpg