当前位置: 周礼新闻 > 科技 > 这是一个神奇的“加工厂”,超200亿条数据在这里被赋予了时空

这是一个神奇的“加工厂”,超200亿条数据在这里被赋予了时空

2019-11-12 10:41:55 阅读:3971

如何赋予大数据空间和时间的概念并整合其应用?11日,上游新闻重庆晨报记者参观了最近建成的重庆市时空大数据展示中心,在这里,数据被赋予了服务城市运营和市民生活的时空概念。

重庆时空大数据展示中心是重庆市规划和自然资源局利用云计算、大数据和空间地理信息技术建设的自动化、智能化时空大数据“加工厂”,集空间数据采集、汇聚、管理、共享应用和运营监控于一体。实现了时空数据采集的自动化、管理流程和应用智能化。该结果支持在城市中应用200多个系统,平均数据呼叫量每天超过700万次。

一张图片展示了重庆对大数据的日常使用

整个展览中心分为四个区域:时空序列馆,千里之外,志辉广阔,未来的城市。在这里,来自82,400平方公里土地的数据通过高科技手段智能应用大数据来协助决策。

依次走过重庆的时空大数据显示中心后,盛开的花朵图片的最后一部分与我们想象的无聊大数据计算完全不同。

这是一幅如此盛开的花卉图,展示了重庆每时每刻对大数据的利用。“在图片中,如果每个部门共享超过3万条呼叫数据,一朵花将会绽放。每秒3次以上的数据调用将会飞进蝴蝶体内。一只鸟每秒钟会飞10次以上。此外,流水的速度代表每秒调用数据的速度。”重庆地理信息与遥感应用中心工作人员介绍。

它最初是在上世纪90年代左右生产的。

这些时空大数据是如何发展的?

展览中心列出了重庆市时空大数据发展的几个阶段。

在第一阶段,大约在1990年代,地形图、等高线和数据高程模型被用来描述表面地形的形态。在展览中心,游客可以通过互动沙盘体验学习。

第二阶段,随着航空遥感技术的进步,遥感图像可以用来描绘空中的地球。显示中心选择了一些地区的遥感图像,可以清晰地看到重庆的变化。

第三阶段,随着信息技术的进步,以三维方式描绘现实世界,建立与现实世界相对应的虚拟世界。现实世界可以从地下、地表、地面和其他维度进行建模。这时,你可以看到城市地下管网等。

第四阶段,在对现实世界建模的基础上,整合城市运营信息的各个方面,建立与物理城市相对应的数字双城。只要展览中心的工作人员控制住它,除了展示大楼的基本信息外,甚至可以清楚地了解大楼内企业的情况。

原材料超过200亿条数据,形成一个时空大数据工厂。

时空大数据包含哪些具体数据?重庆地理信息与遥感应用中心信息研究所所长梁星表示,这些数据包括政务共享数据、地理信息数据和在线公共数据。“自去年开始运行以来,整个收集系统的总收集量接近40亿,平均每天更新40多万个数据,形成了我们庞大的原始数据资源池。”

除了自发布以来收集的数据之外,“我们的整个数据资源库还包括前一时期收集的数据。就以政务共享数据为例,它包括全民数据、企业基本信息、各部门行政审批等。市级部门数据自动共享已达60多个,打破了全市各部门信息壁垒,实现了政务资源互联互通。目前,共享平台汇集了63个部门、3005种类型、26705项信息资源,总量超过200亿项,有效支持全市跨层次、跨地区、跨部门、跨系统、跨服务的数据共享交流和业务协作。”重庆地理信息与遥感应用中心信息研究所所长梁星说。

地理信息数据涵盖重庆的基础地理、自然资源、遥感影像、住宅建设、道路、水系等地理相关数据。在互联网上开放数据,主要是利用互联网获取大量的社会数据,如兴趣点、房屋、评论、公众意见等。;物联网数据主要包括一些水环境、空气质量监测数据、gps数据、视频监测数据等。

有2353个标准质量评估规则来清理数据

由于原始数据来源不同,数据质量参差不齐,采用的标准也大相径庭。"为了更好地支持后续应用,我们需要进一步处理这些数据原材料."重庆地理信息与遥感应用中心工作人员表示,整个数据治理包括数据原材料质量评估、数据清理和时空整合。“首先,我们需要评估收集到的原始数据的质量,从数据完整性、正确性、标准化和相关性方面找出数据的质量,并找出问题数据。”

根据不同的数据,“共制定了2353条质量评价规则,进行数据的自动检测。这些数据主要是重复的、错误的、不完整的和非标准的数据。”这位工作人员说。

接下来,鉴于质量评估检测到的问题数据,将在数据清理阶段进行实时处理,以移除重复和错误的数据。同时,对非标准数据进行标准化,统一各种数据的标准,有利于时空整合。

重庆地理信息与遥感应用中心工作人员表示,数据清理阶段引用了国家标准、地方标准、行业标准和企业标准等555项标准。

时空融合是在数据清理后多源数据的时空关联集成过程。通过建立专题数据融合模型,利用数据转换工具,以时间和空间为轴融合原本独立的离散数据资源,最终形成高质量的时空融合数据。

每天有近700万个数据呼叫被应用。

这些时空融合的数据是在数据治理后形成的,“我们根据不同的应用领域,进一步处理和形成了自然资源、交通运输、电子许可证、宏观经济和健康保护等31个数据产品,为数据应用提供服务。”重庆地理信息与遥感应用中心的工作人员说。

目前,时空大数据工厂形成的数据产品在重庆支持80多个单元和200多个应用,“如重庆生态修复快速办公室、精准扶贫大数据平台、两江新区市场综合监管平台等应用。数据呼叫总数超过73亿次,平均每天有近700万次。”重庆地理信息与遥感应用中心的工作人员说。

上游新闻,重庆晨报记者罗雪梅,重庆市规划和自然资源局

江苏快三 新疆十一选五开奖结果 快中彩 黑龙江十一选五