继物联网、云计算后,大数据已经成为当前信息技术产业备受关注的焦点。大数据最早出现在1980年著名未来学家托夫勒在其所著的《第三次浪潮》中,书中提出:如果说IBM的主机拉开了信息化革命的大幕,那么‘大数据’才是第三次浪潮的华彩乐章。伴随2021年麦肯锡发布《大数据:下一个创新、竞争和生产力的前沿》研究报告后,彻底将“大数据”引爆,并引领了大数据行业的快速发展。
本篇,我们将对GIS与大数据的结合进行讨论,看两者之间碰撞出了什么样的火花。
大数据时代到来
伴随互联网、移动互联网、物联网、5G等信息通信技术及产业的发展,全球数据量呈现爆发式增长。想要从巨量复杂的信息资料中快速且准确地获得有价值的信息,就需要通过大数据的能力实现。当下,大数据已经成为推动数字经济深入发展的重要手段,更成为推动现代化建设的重要引擎。
根据IDC数据显示,预计2024年全球大数据市场规模将达到3984亿美元,到2026年将超过3600亿美元。据国家网信办发布的数据显示,数字中国建设成就显著,数字基础设施实现跨越发展,数据资源价值加速释放,数字经济规模全球领先,数字政府治理服务效能显著提升,数字便民利民惠民服务加快普及。从2017年到2021年,我国大数据产业规模从4700亿元增加到1.3万亿元。
市场规模的不断扩大,离不开政策的支持。党中央、国务院对大数据在推进经济社会中发挥的作用高度重视,自2014年至2021年间,包括国务院、全国人大常委、工信部、国家互联网信息办公室、国家发改委、交通运输部、国标委、公安部、国家测绘地理信息局办公室、水利部、农业部、国家林业局、国土资源部、环保部等各部位和相关单位出台了一系列政策,鼓励大数据产业发展。
大数据已被广泛应用,并渗透在各个行业,其中金融、汽车、餐饮、电信、能源、城市管理、公共安全领域等领域。在科技变革下,GIS与大数据紧密结合,GIS也从传统开始迈向大数据时代,地理信息产业与大数据呈现融合发展态势。科学技术部原部长、中国科学院院士徐冠华曾表示,GIS基础软件技术是地理信息产业链条的关键,其与大数据的融合即将进入新的发展阶段,对整个地信发展意义重大,应用空间十分广阔。
人们日常生活和工作中80%的数据和空间位置有关,基于互联网、移动互联网、物联网等自动采集的数据,其带有空间位置的占比最为突出。在庞大数据体量下,构成了当下的空间大数据时代。
易智瑞持续发力
易智瑞信息技术有限公司大数据事业部总监刘春影在2022服贸会“元宇宙与数字经济论坛”上曾表示,我们处于经济社会的高速发展向高质量发展的迈进阶段,在自然资源两统一大背景下,人与自然和谐发展、生物多样性保护等内容是绿色发展的核心内容,而时空大数据是信息化建设的典型支撑和保障,是数字化发展的基石和基础。时空大数据相比其他数据具备了数据来源广泛、数据体量庞大、数据生成速度快、数据时空特性等典型特征。
当下,众多GIS企业开始与大数据产生交集,利用大数据技术与GIS技术进行深度融合,把GIS核心能力嵌入到大数据基础框架之内。易智瑞信息技术有限公司GeoScene平台在大数据方面也有所建树,在分布式计算架构、功能丰富度和算法智能化以及交互适用易用性和流程化有着较强优势,可对数据实现智能化分析。
GeoScene大数据由两个产品组件构成,包括GeoAnalytics Server以及GeoAnalytics Server Plus,向上提供多种使用方法,来支撑不同领域的业务应用,向下对接和适配多源数据类型。随着版本的迭代,GeoScene大数据产品在三个方面体现了新能力,包括新增数据治理模块、增强大数据分析能力以及整体架构强化,恰好解决了数据层面、分析层面和架构层面的需求。
GeoScene在空间数据挖掘方面进一步拓展了应用的深度和广度,包括复杂业务场景、时空态势挖掘以及价值洞察预测。全新升级版本的GeoScene 3.1提供的大数据分析算子的粒度更细、覆盖面也更广,包括空间数据读取、写出、清洗、处理、分析、计算、机器学习等多方面的能力。同时提供了覆盖多领域的业务模型,如自然资源行业的土地利用变化监测模型、批而未供数据分析、用地选址分析等复杂业务场景。
目前,GeoScene大数据已支撑重庆市规划和自然资源局的用地红线智检业务,并成为时空大数据与业务结合的成功实践项目。在这个项目中,通过空间大数据技术来构建统一的平台,在数据资源层全面整合各类自然资源数据,包括现状数据、规划数据、管路数据、社会经济数据,针对这些数据进行统一的汇聚和注册,形成完整的自然资源地理空间大数据资源池,并进行分库设计,按照业务需求分为关系型数据库和分布式文件系统,实现了高效查询和高性能计算能力。借助 GeoScene 大数据所提供的分布式计算能力,进行一系列业务模型构建,从而支撑了不同业务处室的多项业务。
是机遇,也是挑战
大数据与GIS的融合将进一步提升空间信息处理能力,让空间大数据的价值挖掘变得简单,从而推动地理智慧的更大提升,在新型智慧城市、新型测绘、不动产与国土资源管理、城市大数据、资源环境与应急减灾、BIM与智慧设施等诸多领域的产生巨大的发展动能。同时,大数据与GIS的融合,对GIS软件的能力有了更高的要求,势必将推动GIS软件基础能力的提升。国家测绘地理信息局副局长宋超智认为,GIS技术拥抱大数据已成为热潮。推动地理信息大数据的应用发展,需要积极创新地理信息数据的挖掘、收集、处理分析能力,加强相关行业深度合作,积极营造地理信息产业新的生态,构建地理信息安全管理、技术防控体系,在地理信息开放共享的环境下,更好地维护我国地理信息行业的安全。
值得注意的是,虽然时空大数据已经解决了很多业务问题,但依然面临着很多难题和挑战。包括:如何解决体量庞大且多来源的时空数据的汇聚和存储;有效对多维度、多结构时空数据治理和管理;如何高效应用算力资源,实现分布式运算;如何实现数据信息提取并有效转化;如何让时空数据支撑不同领域业务智能化应用。
诚然,时代和科技的发展为GIS的发展带来了全新的机遇,大数据已经成为驱动数字经济创新发展的核心动能,而“时空大数据”更揭示了大数据的时空观,把大数据放在空间和时间的四维中研究,使其价值最大化。在大数据与其他新技术的相互作用下,将开启数据驱动业务的新篇章。
最后,小易将分享GeoScene在大数据方面具备了哪些能力,希望可以在实际的工作中给到大家帮助。
GeoScene 大数据提供了一套完整的数据治理、数据分析、在线建模、分析应用模式。
实现了多来源数据的感知和接入。涵盖关系型、非关系型数据源、文件型数据源、分布式文件系统的接入和管理,并提供时空数据的元数据管理、血缘关系追溯、数据关系图谱查看能力;
以工作台模式实现数据治理。针对地理空间数据图形表达的特点,采用工作台的方式对数据进行追溯、管理、治理、质检,并提供了数据体检套餐功能,针对常见的空间数据存在的典型问题,形成一站式套餐体检策略;
提供了100+在线建模算子。通过即拿即用拖拽式算子组建成业务模型,算子涵盖了时空数据读取、数据输出、数据清洗、数据检测、数据处理、统计计算、空间分析、汇总统计、模式分析、机器学习等多方面的能力;
所见即所得的数据资源查看和分析。通过直观地搜索、浏览、拖拽数据资源,直观的支撑业务场景建设;
细粒度的任务监控机制。详细的任务监控机制,把复杂的分析过程进行清晰地呈现,分析阶段、执行步骤、计算内容、处理耗时、任务状态,让用户深刻感知资源情况与任务进行情况。
责任编辑:kj005
文章投诉热线:156 0057 2229 投诉邮箱:29132 36@qq.com