时空大数据平台设计
时空大数据与云平台建设方案
Ⅴ
Ⅳ
加入共享目录(租户)
管理员经过审核后将数据或服务 地址映射至衡阳市时空信息大数 据共享目录.
3 核心需求之四—应用更加简单
2 市县一体化理论基础—六位一体化的原则
标准一体化
一体化平台建设标准、基础测绘数 据标准、地理框架数据标准、地理 信息服务标准
硬件一体化
计算资源、存储资源、网络资源一 体化建设、一体化管理、
0 数据资源方面
空
时
DLG数据 DOM数据 三维数据 专题数据 。。。
看到超市的过去
二维
动态更新 实时数据 民生数据(水电气) 运营商数据
展在示。城。市 。
的现
规划数据 数据挖掘 模拟推算 大数据分析 。。。
展望城市的未来
多维
0 平台主要功能
按需提供软、硬件、数据资源 按需快速搭建平台 按需提供在线GIS功能服务
15 0
10 0
5 0
0 数据生产费用
3 0 2 0
软件开发费用
5
3
0
0
3
3
0
0
0
0
基础硬件费用
基础软件费用
单位:万元
3 0
0 0
人力资源费用
1
0
基础版
政务版
公众版
2 县级平台建设技术的问题—技术能力不足
建设前所需技术能力
项目设计删选能力
项目招投标把关
常规模式—依据一期建设经验
按照国家标准一个完整县级数字城市建设项目,建设单位的工作
一个平台
多种应用模式
2 一套标准体系
市县一体化基础测绘数据标准
建立衡阳市地理实体编码体系,规范数据生产标准与流程,建 立数据存储模型,增加地理实体时间域属性
自然资源管理背景下的时空大数据平台建设
01 一、引言
目录
02
二、时空大数据平台 建设的背景
03
三、时空大数据平台 建设的必要性
04 四、时空大数据平台 建设的现状和挑战
05 五、时空大数据平台 建设的策略和方法
06 六、结论
随着社会经济的快速发展,自然资源管理面临着越来越大的挑战。为了更好地 应对这些挑战,时空大数据平台建设逐渐成为自然资源管理的趋势。本次演示 将介绍自然资源管理背景下的时空大数据平台建设的意义、必要性、现状和挑 战,以及策略和方法。
3、自然资源开发利用:通过时空大数据平台,可以更好地了解自然资源的分 布、储量和品质,为自然资源的合理开发利用提供支持。
四、时空大数据平台建设的现状 和挑战
虽然时空大数据平台建设取得了初步成果,但仍然面临着许多挑战:
1、数据采集:目前,数据采集主要依赖于人工方式和传感器等设备,采集效 率和精度有待提高。
2、数据处理:由于时空大数据具有数据量大、结构复杂等特点,处理过程中 需要耗费大量计算资源和时间,如何提高处理效率和精度是亟待解决的问题。
3、数据存储:随着数据量的不断增加,存储设备的容量和性能也需不断升级, 以满足大规模数据的存储需求。
4、技术标准:目前,时空大数据平台建设缺乏统一的技术标准,不同系统和 数据格式之间的兼容性有待提高。
五、时空大数据平台建设的策略 和方法
为了更好地建设和应用时空大数据平台,以下策略和方法值得:
1、选择合适的技术手段:根据实际需求,选择合适的技术手段,如遥感技术、 GIS技术、数据库技术等,以实现数据的快速采集、处理、存储和分析。
2、处理大量数据:采用分布式计算和存储技术,提高数据处理和存储的效率。 同时,利用数据挖掘和机器学习等技术手段,对数据进行深入分析和挖掘。
智慧城市时空大数据管理系统设计与实现---以成都市为例
智慧城市时空大数据管理系统设计与实现 ---以成都市为例摘要:智慧城市是加快建设全面体现新发展理念城市、打造美丽宜居公园城市、提升城市综合竞争力的重要支撑。
时空大数据作为加快推进智慧城市建设,全面提升超大城市治理体系和治理能力现代化水平的重要基础,对时空数据多源汇聚、智能处理、深度融合、共享交换等方面提出了更高要求。
本文结合成都市时空信息云平台项目建设,探讨构建全市时空大数据管理系统框架、关键技术及系统成果。
实践证明,该系统能够为各级政府部门、社会企业和公众提供坚实的“时空底座”服务。
关键词:时空大数据;资源体系;数据管理时空大数据是时空信息、自然人文及社会信息的融合体,是重要的大数据之一[1-2]。
时空大数据的价值在于信息的分析、知识的生成、事件的预测与决策[3]。
通过时空大数据的治理融合、挖局分析可揭示区域发展规律,它是智慧城市开展城市治理应用不可或缺的重要基础信息支撑[4]。
目前,时空大数据应用逐渐朝智能化的高级形态发展,通过新一代信息技术的应用,将更加精准、实时、全面的反应城市发展变化规律,为智慧城市的规划、建设、管理和运营全过程、全方位决策提供强有力支撑[5]。
本文将以建设全面覆盖、多端融合、智慧联动的“时空底座”为目标,结合成都市时空信息云平台建设经验,提出了支撑各领域智慧应用的时空大数据管理系统建设模式。
1总体架构时空大数据管理系统作为时空信息云平台的核心支撑对象,通过对基础地理、政务、运营和感知等多源异构数据智能汇聚、多态存储、融合治理、深度挖掘等加工后,可向时空信息云平台前端(如门户)提供辅助决策分析的信息知识服务。
系统架构包括基础设施层、数据层、系统层、应用层四个层级,及制度保障、安全保障体系。
1.1基础设施层由核心机房和电子政务云平台两部分组成,分别对应敏感涉密空间数据和政务共享空间数据的存储和管理。
基于云计算架构,形成可按需服务的高性能计算环境、容器环境,满足时空大数据的重型运算需求。
智慧城市时空大数据与云平台建设技术大纲
智慧城市时空大数据与云平台建设技术大纲一、引言随着信息技术的不断发展和智能化时代的到来,智慧城市已成为时下城市发展的重要战略。
而构建智慧城市的关键在于对城市的时空大数据进行有效的管理与分析,以此为基础建设云平台。
本文将就智慧城市时空大数据与云平台建设的相关技术进行探讨,提出技术大纲。
二、智慧城市时空大数据技术1. 数据采集与存储技术智慧城市中,各类传感器和设备将大量产生数据,如交通流量、环境监测等。
为了实时获取这些数据,需要构建可靠的数据采集系统,并通过云端技术将数据存储在云平台上。
2. 数据预处理技术时空大数据需经过预处理,包括数据清洗、噪声剔除、数据融合等,以消除数据中的冗余和错误,提高数据质量和准确性。
3. 数据挖掘与分析技术智慧城市时空大数据中包含了各类有价值的信息,如城市交通拥堵、人口流动等。
通过数据挖掘与分析技术,可以发现隐藏在大数据中的规律和趋势,为智慧城市决策提供科学依据。
三、云平台建设技术1. 云计算技术云计算是支撑智慧城市建设的重要技术基础。
通过云计算技术,可以实现对海量数据的存储、处理和分析,提供较高的计算效率和可靠性。
2. 数据安全与隐私保护技术智慧城市时空大数据中涉及大量居民个人信息,保护数据安全和隐私成为云平台建设的重要任务。
通过加密、权限控制等技术手段,确保数据在传输和存储过程中的安全。
3. 可视化与用户界面技术云平台应提供用户友好的可视化界面,使城市管理者和居民能够直观地了解城市的运行情况和问题,并能进行智能化的决策。
四、智慧城市时空大数据与云平台建设技术应用案例1. 交通优化基于智慧城市时空大数据与云平台建设技术,可以实时监测交通流量和拥堵情况,通过智能控制信号灯和路由导航等手段,提高交通效率和减少拥堵。
2. 环境保护借助智慧城市时空大数据与云平台建设技术,可以收集和分析环境监测数据,实现对环境污染的实时监控和预警,并制定相应的环保措施。
3. 突发事件响应智慧城市时空大数据与云平台建设技术可用于突发事件的响应和控制,通过实时监测和数据分析,快速获取事件信息并采取相应的应对措施。
数字政府时空数据中台设计与实践
异构数据集成
将来自不同来源、不同格式的时空数据进行整合和 集成,如地图数据、卫星遥感数据、社交媒体数据 等。
数据存储与备份
采用分布式文件系统或数据库,对时空数据 进行高效、可扩展的存储,同时建立数据备 份机制,确保数据安全。
时空数据处理与转换实践
数据清洗与预处理
对采集到的时空数据进行清洗、去重、格式转换等预处理 操作,提高数据质量。
为城市管理和决策提供了全面、客观的数据支持 ,提高了决策的科学性和准确性。
案例四:公共安全时空大数据分析平台
目的:通过建设公共安全时空大 数据分析平台,提高公共安全事 件的预警和处置能力。
整合公安、消防、安监等部门的 公共安全数据,包括视频监控、 报警信息、事故报告等。
背景:公共安全是社会稳定和发 展的重要保障,涉及公安、消防 、安监等多个部门。
案例三:城市规划时空大数据平台
背景
城市规划需要综合考虑城市发展历史、 现状和未来趋势等多方面因素。
VS
目的
通过建设城市规划时空大数据平台,为城 市规划提供全面、客观的数据支持。
案例三:城市规划时空大数据平台
01
实施过程
02
收集历史、现状和未来各个时 间节点的城市规划相关数据, 进行清洗和整合。
03
3. 支撑政府决策和智慧 城市发展:为政府决策 提供及时、准确的时空 数据分析结果,推动智 慧城市建设和治理水平 的提升。
时空数据中台的体系结构
时空数据中台的体系结构包括数据层、 处理层、服务层和应用层四个部分。
应用层:面向数字政府各业务部门,提 供时空数据应用服务,包括公共安全、 城市规划、环境保护等。
服务层:提供统一的时空数据服务,包 括地图服务、位置服务、可视化服务等 。
时空大大数据中心及信息云平台建设方案设计
市时空大数据中心及信息云平台建设方案目录1 项目概述 (1)1.1 项目名称 (1)1.2 项目期限 (1)1.3 项目建设目标 (1)1.4 项目建设容 (1)2 项目单位概况 (4)2.1 项目建设单位 (4)2.2 项目实施单位 (4)3 项目背景分析 (5)3.1 建设背景 (5)3.1.1 机构改革背景 (5)3.1.2 信息化快速发展背景 (5)3.1.3 政策背景 (6)3.2 现状分析 (6)3.2.1 国土与规划数据资源现状 (6)3.2.2 数据管理现状分析 (7)3.2.3 基础设施现状 (8)3.3 项目建设意义 (9)4 需求分析 (11)4.1 目标分析 (11)4.2 用户分析 (11)4.3 业务需求分析 (13)4.4 功能需求分析 (14)4.5 数据需求分析 (15)5 总体设计方案 (17)5.1 建设思路 (17)5.2 建设原则 (18)5.3 建设依据 (19)5.3.2 技术依据 (20)5.4 总体设计 (22)5.4.1 项目逻辑构架 (22)5.4.2 项目技术架构 (23)5.4.3 项目应用架构 (25)5.4.4 项目部署架构 (26)5.4.5 项目部关系 (28)5.4.6 项目安全设计 (30)6 项目建设方案 (31)6.1 时空大数据中心建设 (31)6.1.1 资源汇聚 (31)6.1.2 空间处理 (34)6.1.3 数据引擎 (39)6.1.4 分布式管理系统开发 (42)6.2 时空信息云平台建设 (47)6.2.1 通用化平台 (48)6.2.2 专业化平台 (65)6.2.3 个性化平台 (76)6.3 专题应用系统建设 (76)6.3.1 智慧耕地管理 (77)6.3.2 不动产权籍管理 (79)6.3.3 国土空间规划实施监测评估 (83)6.3.4 综合执法管理 (85)6.4 支撑系统建设 (88)6.4.1 总体框架 (88)6.4.2 支撑系统建设原则 (90)6.4.3 支撑系统云架构设计 (90)7 项目组织管理与培训 (96)7.1.1 项目领导小组 (96)7.1.2 项目管理办公室 (97)7.1.3 专家顾问和技术支持组 (97)7.1.4 监理单位 (98)7.2 项目管理模式 (98)7.3 项目管理制度 (99)7.3.1 项目管理体制 (99)7.3.2 项目管理方法 (99)7.3.3 项目管理原则 (100)7.4 项目实施管理 (100)7.4.1 项目实施机构 (100)7.4.2 项目实施制度 (100)7.4.3 项目实施保障 (102)7.5 项目监理 (103)7.6 项目培训 (104)7.6.1 项目推进与概念培训 (105)7.6.2 项目管理培训 (105)7.6.3 系统使用人员技术培训 (105)7.6.4 数据管理维护人员技术培训 (105)7.6.5 系统维护人员技术培训 (105)8 项目保障机制 (106)8.1 进度保障 (106)8.1.1 进度保障管理措施 (106)8.1.2 进度保障组织措施 (107)8.1.3 进度保障技术措施 (107)8.2 质量保障 (108)8.2.1 质量保障管理措施 (108)8.2.2 质量保障组织措施 (109)8.2.3 质量保障技术措施 (109)8.3 安全 (110)8.3.1 安全管理措施 (110)8.3.2 安全组织措施 (110)8.3.3 安全技术措施 (112)9 运行维护方案 (113)9.1 运维组织机构 (113)9.2 运维管理制度 (113)9.3 系统运行安全保障体系 (114)9.4 运维队伍建设 (114)9.5 应急措施 (115)10 环保、消防、职业安全卫生和节能措施 (116)10.1 环保措施 (116)10.2 消防措施 (116)10.3 职业安全和卫生措施 (117)10.4 节能措施 (118)11 项目实施计划 (119)11.1 项目工期 (119)11.2 项目进度安排 (119)11.2.1 第一阶段工作 (119)11.2.2 第二阶段工作 (119)11.2.3 第三阶段工作 (120)12 投资估算和资金来源 (122)12.1 投资估算编制说明 (122)12.2 投资估算编制依据 (122)12.3 投资估算书 (123)12.3.1 项目投资估算 (123)12.3.2 资金来源与落实情况 (123)12.3.3 项目投资估算表 (124)13 风险及效益分析 (125)13.1 风险分析及对策 (125)13.1.1 风险识别和分析 (125)13.1.2 风险对策和管理 (126)13.2 效益分析 (128)13.2.1 经济效益 (128)13.2.2 社会效益 (128)1项目概述1.1项目名称市时空大数据中心及云信息平台建设方案1.2项目期限本项目的建设周期为12个月。
2023-时空大数据平台整体建设方案-1
时空大数据平台整体建设方案随着科技的不断发展,大数据已经成为了一个不可或缺的部分,其在各个领域中的作用也越发重要。
而时空大数据更是在生态保护、城市安全、农业发展等领域发挥着关键作用。
因此,如何建立一个完善的时空大数据平台,已经成为了各个领域的重要课题。
一、平台架构设计首先,要建立一个完善的时空大数据平台,需要进行平台架构的设计。
平台架构设计包括了数据采集、存储、处理、分析和可视化展示等环节。
应该根据各个环节的实际需要,设计相应的技术方案,并建立相应的系统架构。
二、数据采集数据采集是整个平台中最为关键的一环,它直接影响到数据的质量和准确性。
数据采集应该涵盖多种数据源,包括卫星遥感、传感器监测、社交媒体、公共交通等等。
需要建立专业的数据仓库,确保数据的实时采集、传输和归档。
三、数据存储数据存储方面需要建立一个可靠的集群式系统。
对于来自不同数据源的数据,应该分别存储于不同的数据仓库,再通过分布式系统进行相应的组装和整合。
应该采用高可用性的技术方案,定期备份数据,以避免一旦发生宕机或数据丢失的情况,数据可以迅速恢复。
四、数据处理数据处理是整个平台中必不可少的环节,涉及到数据的清洗、整合、归一化等多个方面。
应该采用分布式计算的方式,实现数据的实时处理,并依据功能需要执行相应的算法。
五、数据分析数据分析环节是利用已经处理过的数据进行实质性分析、挖掘和建模的过程。
其重要任务是解决复杂的问题,帮助用户更好地理解数据并支持决策。
这一环节需要采用机器学习等先进算法对数据进行建模处理,从而更好地满足用户需要。
六、可视化展示数据可视化是大数据平台中很重要的一环,其目的是通过可视化手段,将数据的关键信息呈现给用户。
应该采用先进的大数据可视化技术,展示出数据的特点、趋势以及关联。
其可以方便用户快速了解数据信息,发现问题和模式,并取得最佳决策。
综上所述,建立一个完善的时空大数据平台需要进行平台架构设计、数据采集、处理、分析和可视化展示等多个方面的工作。
2023-智慧城市时空大数据平台建设方案-1
智慧城市时空大数据平台建设方案智慧城市建设是当前城市发展的热点,而时空大数据平台作为支撑智慧城市建设的重要组成部分,具有巨大的发展潜力和应用空间。
在此,我们将围绕“智慧城市时空大数据平台建设方案”展开讨论,以期为智慧城市建设提供一些思路和借鉴。
第一步:数据采集数据采集是建设时空大数据平台的前提和基础,也是整个方案的重中之重。
数据来源包括社会化数据、传感器数据、政府公共服务数据等。
在数据采集上,需要注重数据的时效性、完整性和准确性。
同时,还应该关注数据的标准化、互通性和可扩展性等问题。
第二步:数据处理数据处理是决定时空大数据平台质量的关键环节。
在处理数据时,需要结合业务需求进行分类、过滤、聚合等处理操作,形成可视化的数据模型。
同时,还需要采用先进的算法和技术,优化数据处理和分析,提高数据质量和实时性。
第三步:数据存储数据存储是时空大数据平台的重要组成部分。
在数据存储上,需采用大规模分布式存储技术和云计算技术,建立数据仓库,存储各种数据类型的海量数据,并确保存储的可靠性、安全性和扩展性。
第四步:数据应用数据应用是时空大数据平台的价值所在。
在数据应用上,需建立适合的应用场景和业务模式,同时采用可视化的应用界面,实现数据的展示、分析、预测等各种应用功能。
同时,还需考虑数据安全性和保护用户隐私等问题。
综上所述,时空大数据平台建设方案的实施需要关注各个环节的协调和统筹,注重数据的质量和实时性,提升数据处理和分析能力,建立可扩展、安全和可靠的数据存储系统,同时建立适合的应用场景和业务模式,实现数据的优化和价值的最大化。
只有在这个基础上,才能切实推动智慧城市建设的发展,提高城市治理水平和市民生活质量。
智慧嘉兴时空大数据与云平台设计与实现
第35卷第1期2021年1月北京测绘BeijingSurveyingand MappingVol35No1January2021引文格式:李小卫•智慧嘉兴时空大数据与云平台设计与实现北京测绘,2021,35(1)3035.DOI:1019580/jcnki1007-3000202101007智慧嘉兴时空大数据与云平台设计与实现李小卫(嘉兴市规划设计研究院有限公司,浙江嘉兴314050)[摘要]在数字嘉兴建设成果的基础上,本文结合“智慧嘉兴”时空大数据与云平台试点项目建设,探讨构建全市统一的智慧城市时空大数据与云平台,介绍了平台总体架构、技术路线设计、系统实现、示范应用及关键技术分析,根据运行实践证明,该平台能够为全市政府部门、企事业单位及社会公众提供权威、统一、可靠的智慧时空信息服务。
[关键词]地理信息;智慧城市;时空大数据;云平台[中图分类号]P208[文献标识码]A[文章编号]1007-3000(2021)01-0030-060引言嘉兴在全国率先开展数字城市建设,早在2006年就开始了地理空间框架数据库、平台、标准等一系列探索,经过多年的努力,嘉兴在基础地理信息数据、政务交换数据、平台应用、运行支撑体系建设等方面取得显著成果,但仍然存在不足,如各类专题数据覆盖面不够、信息汇聚与共享标准不统一、现有底层软件整合力度不够等,同时在多类型公共资源管理方法的有效集成、支撑深度应用等方面,也仍需进一步提升。
2016年10月,国家测绘地理信息局正式批准嘉兴为云平台建设试点地区。
本文在数字嘉兴已有的一系列成果基础上,结合大数据、云计算、物联网和地理空间信息等现代科技手段,以时空信息为抓手,整合嘉兴市政务信息资源、物联网感知信息等,形成具有时间序列的时空信息大数据库,搭建全市统一的时空信息云平台,从而形成测绘地理信息数据、专题资源数据智慧化应用的新格局,推进全市生产、生活和管理方式的创新,解决城市发展过程中面临的新问题[1]。
时空大数据平台设计
时空大数据平台设计1.项目概况智慧城市作为现代信息技术集中应用与展示的重要载体,己成为促进经济社会建设升级的重要力量。
2006年以来测绘地理信息主管部门开始数字城市地理空间框架建设,取得了一系列地理空间数据资源、地理信息公共服务平台软件资源、应用示范建设资源等成果。
2012 年开始智慧城市时空大数据与云平台建设工作,分别出台了《智慧城市时空信息云平台建设技术指南》(2015版)、《智慧城市时空大数据与云平台建设技术大纲》(2017版)、《智慧城市时空大数据平台建设技术大纲》(2019版)。
时空大数据与云平台作为智慧城市各行各业全面建设的重要基础性支撑平台,是智慧城市所有与地理空间位置有关建设内容的核心支撑,也是智慧城市中用于关联其他信息的时空信息支撑平台和时空信息基础设施,实现时间、空间的地理空间信息共享,提供时空维度的分析与应用,协调和关联各个政府部门时空信息的产生、流向、管理、应用的技术体系和数据保障,将全而服务于政府部门的管理决策, 方便广大公众享受更为智能、便捷的生活服务。
为推进国民经济发展和城市信息化建设,盘活地理信息资源,促进地理信息资源的共建共享和充分利用,需要建设时空大数据与云平台。
2.建设目标智慧城市时空大数据与云平台将在智慧城市总体框架下,充分利用基础地理信息己有的建设成果以及在智慧城市方而的建设资源,对基础地理信息数据库和地理信息公共平台在内容、功能和效能上进行补充建设,构建城市时空信息数据库和云平台,最终实现基础地理信息接入感知信息,从而发展到准确定位、有机整合、深度利用;信息资源由现在的分布式存储、逻辑式集中,发展到用云计算、宿主资源;从现在的对接式服务共享,发展到知识引擎、按需服务。
选择多个应用领域,开展智能专题示范建设。
通过丰富带有时间标识的基础地理信息数据和倾斜摄影测量三维等新型产品数据,整理历史和远景规划地理信息,集成智慧城市大数据中心的典型数据资源,形成静态地理信息;同时,扩充物联网智能感知设备位置数据和实时感知的流式数据及其多层次摘要信息等, 形成实时动态数据,构建时空信息大数据。
空间大数据分析平台规划方案
04 平台功能规划
基本功能设置
数据采集与整合
支持多种来源、格式的空间数据导入 ,实现数据清洗、整合和转换。
数据存储与管理
提供高效、可扩展的数据存储方案, 支持海量空间数据的存储、备份和恢 复。
数据查询与检索
提供灵活的数据查询和检索功能,支 持关键字、空间范围和属性条件等多 种查询方式。
数据可视化与展示
1 2 3
数据加密存储
采用先进的加密技术,对平台数据进行加密存储 ,确保数据在传输和存储过程中的安全性。
访问权限控制
建立严格的访问权限控制机制,对用户和角色的 访问权限进行细粒度控制,防止数据泄露和非法 访问。
定期安全审计
定期对平台进行安全审计和漏洞扫描,及时发现 和修复潜在的安全隐患,确保平台的安全性。
制定详细的版本迭代计划,明确每个版本的功能需求、开发进度和发布时间,确 保平台功能不断完善和升级。
更新策略制定
根据版本迭代计划,制定合理的更新策略,包括灰度发布、A/B测试等,确保每 次更新都能够平稳过渡,避免对用户造成过大影响。同时,建立完善的回滚机制 ,确保在更新出现问题时能够及时回滚到上一个稳定版本。
分布式计算框架选择及优化
01
Hadoop/Spark框 架
基于Hadoop或Spark分布式计 算框架,实现空间大数据的并行 处理和计算。
02
空间数据分区
03
数据倾斜处理
根据空间数据的分布特征,采用 合适的分区策略,提高分布式计 算的效率和准确性。
针对空间数据分布不均匀的情况 ,采用数据倾斜处理技术,避免 部分节点负载过重。
跨领域融合与应用创新
空间大数据将与其他领域的数据进行 深度融合,推动跨领域的应用创新和 发展。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
时空大数据平台设计1.项目概况智慧城市作为现代信息技术集中应用与展示的重要载体,已成为促进经济社会建设升级的重要力量。
2006年以来测绘地理信息主管部门开始数字城市地理空间框架建设,取得了一系列地理空间数据资源、地理信息公共服务平台软件资源、应用示范建设资源等成果。
2012年开始智慧城市时空大数据与云平台建设工作,分别出台了《智慧城市时空信息云平台建设技术指南》(2015版)、《智慧城市时空大数据与云平台建设技术大纲》(2017版)、《智慧城市时空大数据平台建设技术大纲》(2019版)。
时空大数据与云平台作为智慧城市各行各业全面建设的重要基础性支撑平台,是智慧城市所有与地理空间位置有关建设内容的核心支撑,也是智慧城市中用于关联其他信息的时空信息支撑平台和时空信息基础设施,实现时间、空间的地理空间信息共享,提供时空维度的分析与应用,协调和关联各个政府部门时空信息的产生、流向、管理、应用的技术体系和数据保障,将全面服务于政府部门的管理决策,方便广大公众享受更为智能、便捷的生活服务。
为推进国民经济发展和城市信息化建设,盘活地理信息资源,促进地理信息资源的共建共享和充分利用,需要建设时空大数据与云平台。
2.建设目标智慧城市时空大数据与云平台将在智慧城市总体框架下,充分利用基础地理信息已有的建设成果以及在智慧城市方面的建设资源,对基础地理信息数据库和地理信息公共平台在内容、功能和效能上进行补充建设,构建城市时空信息数据库和云平台,最终实现基础地理信息接入感知信息,从而发展到准确定位、有机整合、深度利用;信息资源由现在的分布式存储、逻辑式集中,发展到用云计算、宿主资源;从现在的对接式服务共享,发展到知识引擎、按需服务。
选择多个应用领域,开展智能专题示范建设。
通过丰富带有时间标识的基础地理信息数据和倾斜摄影测量三维等新型产品数据,整理历史和远景规划地理信息,集成智慧城市大数据中心的典型数据资源,形成静态地理信息;同时,扩充物联网智能感知设备位置数据和实时感知的流式数据及其多层次摘要信息等,形成实时动态数据,构建时空信息大数据。
建设按需提供服务能力,扩充感知定位、接入解译及模拟推演API接口、云服务系统、地名地址匹配引擎、业务流引擎、云端自主制图、按需定制服务系统,增强大数据时空分析和数据挖掘能力,搭建时空信息云平台。
3.建设内容按照总体建设目标,时空大数据与云平台分五大部分建设内容。
第一部分是标准规范建设。
建设内容包括时空大数据平台建设、使用与维护管理办法,时空数据整合、交换和共享管理办法,时空信息云平台建设的基本规定、数据规范、技术规范、服务规范、接口规范等。
第二部分是时空大数据建设。
参照《基础地理信息数据库基本规定》(CH/T 9005-2009)的定义,时空信息数据库应蕴含时空信息和物联网节点地址数据,实现其获取、分类、编码、输入、编辑、浏览、查询、统计、分析、表达、输出、更新等管理、维护与分发功能的软件,以及支撑环境。
项目将建设倾斜摄影测量三维建模等新型数据,集成多时期数字线划图,整合多时期历史影像图,建设多时期地理实体,融合多时期影像、地名地址(POI)和基础地理数据,接入物联网时空数据,整合行业专题数据,开展时空信息大数据管理、分析挖掘和服务产品制作等。
第三部分是时空信息云平台。
时空信息云平台在内容上包括业务流引擎、知识化引擎、地名地址服务系统、宿主服务系统、云服务系统、大数据挖掘与可视化系统、云端自主制图系统、按需服务定制系统和时空地理信息公众服务系统等。
第四部分是支撑环境建设。
时空大数据与云平台的软硬件环境将依托自然资源和规划局已有的软硬件及新建设备进行部署。
第五部分是应用示范建设。
在时空信息云平台基础上,提供接口服务,协助相关委办局开展智慧水利、智慧国土(自然资源)、智慧交通、智慧医疗、智慧旅游、“智慧公安”以及安全应急保障系统等示范应用对接工作。
4.数据建设(一)基础地理信息数据库建设(1)多时期数字线划图集成以自然资源和规划局的基础地理信息建设及更新成果为基础,包括1︰1000 数字线划图(DLG),集成建设单位收集提供的1︰10000DLG、1︰50000DLG数据、1︰250000DLG数据、1︰500000DLG 数据等多期数据资料,通过数据格式转换、坐标转换、数据重组等处理,形成多时间序列、多尺度的数字线划图成果。
(2)地理实体库建设以自然资源和规划局的基础地理信息建设及更新成果为基础,融合多行业数据,结合智慧城市应用工程的需求,按照地理实体建设要求,选择试点片区,建设地理实体数据库,实现地理信息与社会经济信息的挂接、管理,实现位置、属性多维度的时态管理与表达。
(3)多时相遥感影像融合融合已有的多时期0.1米、0.3米分辨率的高清正射影像,整合多年份历史影像成果,建设智慧城市时空大数据与云平台影像时空数据库。
(4)地名地址(POI)融合以公安部门建设的现势的标准地址库为基础,整合基础地理信息地名地址(POI)成果,融合民政部门、商业电子导航公司的地名地址(POI)数据,形成地名地址(POI)数据。
(二)物联网时空数据获取与融合(1)智能传感设备位置数据采集与接入依托时空信息云平台,建智能传感设备位置数据采集平台,满足第三方用户采集具备开放和共享条件的其他传感设备空间位置,为智慧城市传感信息深度共享提供支撑。
以城市视频监控共享平台等工程建设为契机,接入各类具备开放和共享条件的智慧城市智能传感设备位置数据。
(2)实时位置与实时感知数据接入与集成依托时空信息云平台,接入智慧城市框架下具备开放和共享条件的传感设备,对其实时位置和实时感知流式数据进行动态解析。
(三)行业专题时空信息资源建设(1)远景规划地理信息集成融合城市发展规划数据,如国民经济和社会发展规划、国土空间规划、生态环境规划、产业布局规划等规划内容信息,添加时间、空间和属性三域标识。
(2)政务专题数据空间化与集成配合政务数据开放平台建设,选择典型政务数据将其统一空间化,赋予空间位置信息,丰富政务开放数据的信息度;将政务开放数据资源集成到时空信息云平台。
探索建设空间化的政务专题共享数据目录体系,为建立以空间化形式共享政务专题数据的常态机制提供支撑。
(四)基础测绘数据与时空信息数据一体化管理系统通过自定义数据抽取规则,自动提取基础测绘数据成果,形成天地图、时空信息数据库,自动形成电子地图配图文件。
针对在线浏览和专题标图的需要,对矢量数据、影像数据进行内容选取组合所形成的数据集,经符号化处理、图面整饰、分级缓存后形成重点突出、色彩协调、符号形象、图面美观的视屏显示地图。
经符号化处理、图面整饰、晕渲、分级裁切后可形成的色彩协调、图面美观的各类显示地图。
包括线划图和影像地图两类电子地图,其中线划类电子地图是以基础地形要素数据为主数据源,经过数据分级、可视化设置而成,影像类电子地图数据是以影像数据为基础,并配以标记级矢量线划数据。
成果输出为固定大小(256*256)的分块瓦片,数据格式为PNG。
电子地图数据分面向政府部门应用的政务电子地图和面向公众服务的公众电子地图。
政务电子地图在地理实体数据基础上,通过整合政府关注的且具有应用需求的社会经济信息形成,主要内容包括水系、交通、居民地、地貌等基础地理信息以及行政机关、公共服务设施等专题信息,作为电子政府建设的地理底图。
公众电子地图在政务电子地图基础上,将涉密信息及不适于面向公众发布的内容进行删除、屏蔽、简化、模糊和综合,增加公众兴趣信息,包括企事业单位、学校、医院、宾馆酒店、体育场馆等,为社会公众提供服务。
公众电子地图的具体内容将结合地理信息公众服务系统的建设进行展开。
系统主要功能如下:(1)数据提取建立与基础数据相关数据内容对应的数据层与要素类的对照表,按照图号检索,图幅检索,空间索引图检索,道路、水系等范围要素检索,行政区划检索等检索条件,从相关基础地理数据中提取数字城市框架数据库和智慧城市时空数据库。
(2)数据一致性处理地理信息公共服务平台的数据源存在着不同来源,不同比例尺、不同坐标系和不同形状特征等情况,根据实际情况,用大比例尺数据修正小比例尺数据,用权威部门的数据修正其他数据,处理内容主要包括几何形状和数据属性等。
(3)数据编辑按照《地理信息公共服务平台地理实体与地名地址数据规范》、《地理信息公共服务平台电子地图数据规范》要求,其中道路数据的几何表达与拓扑关系表达应尽可能遵循《导航地理数据模型与交换格式》(GB/T 19711-2005)与《车载导航地理数据采集处理技术规程》(GB/T 20268-2006),对数据进行编辑处理。
(4)电子地图制作按照《地理信息公共服务平台电子地图规范》的要求,制作地理信息公共服务平台的线划地图、影像地图和DEM晕渲地图。
按照显示比例尺规划各级数据,对数据进行符号化,并对其中的细节进行人工数据调整和注记调整。
(5)符号配置管理按照《地理信息公共服务平台电子地图规范》中对各矢量要素的符号的相关要求进行符号配置,制定电子地图的符号表现方案,可以手工进行要素代码和符号的一一配置,也可以通过制定地形图符号方案配置文件的方式进行载入。
(6)数据检查数据检查是在建库前对数据进行质量检查,以保证数据的准确性和完整性。
按照一定的标准和规范对数据进行检查。
(7)数据脱密数据脱密是把涉密版数据遵照《基础地理信息公开表示内容的规定(试行)》、《公开地图内容表示若干规定》、《公开地图内容表示补充规定(试行)》、《遥感影像公开使用管理规定(试行)》四个文件的要求过滤、删除涉密信息内容,降低空间精度,形成可在非涉密网环境中使用的公开数据集,并通过地图审核。
空间位置精度需符合《公开地图内容表示补充规定(试行)》的要求,即位置精度不高于50米,等高距不小于50米,数字高程模型格网不小于100米,在线发布的影像分辨率不高于0.5米。
(8)生成瓦片库在线划地图、影像地图和DEM晕渲地图三种电子地图基础上,制作瓦片电子地图,以文件的形式保存在数据库服务器中。
瓦片电子地图可以提高用户的访问效率。
5.软件平台建设(一)云服务系统云服务系统主要由时空信息资源目录服务、时空信息功能服务、时空信息资源共享交换服务、云平台运维服务、二次开发接口、智慧城市时空信息云门户等组成。
(1)时空信息资源目录服务对时空信息云平台数据资源服务、功能服务、基础设施服务的目录进行管理,包括目录体系建设、目录的编辑更新等。
(2)时空信息功能服务为用户提供在线空间分析、空间计算、坐标转换、数据格式转换等功能服务。
(3)时空信息资源共享交换服务聚合时空云平台中各类资源服务,为用户提供自有资源服务的共享交换和所需资源服务资源的调用。
(4)云平台运维服务进行时空云平台业务规则管理、运行服务管理、服务运行监控管理、云节点管理、基础设施租用管理等。