智慧气象大数据分析平台整体解决方案
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
运维
计
• 不灵活,难以支撑信息
算
化扩展
资
• 安全水平低,难以持续
源
预报中心 气象中心 公服中心
提供信息化基础设施能
池
力
管 理
气候中心
人工影响天气 中心
……
• 信息化管理部门无法向 快速为业务部门信息化
气象信息中心(数据中心)
需求提供服务
基础设施大整合
云计算服务
存
网
储
络
资
资
源
源
池
池
基础设施
容
统
灾
一
资
运
100
业务系统
• 重复录入,效率低下
数
基础库
实时库
行业库
据
/
自动站 数据
卫星数据
雷ຫໍສະໝຸດ Baidu数据
数值产品
平
台
结构化数据+非结构化数据 百亿条基础数据,数值预报数据庞大
• 数据量大,处理效率 低
• 数据格式杂,无法处 理
• 数据无法有效共享 • 多元化数据如何创新
信息化方向 业务应用大平台
统一大平台门户
CIPAS MICAPS 资源整合平台
GIS
……
数据资源大整合
业务支撑平台
大数据分析平台
资源服务平台
业务 厂商
网络
业务网+气象专网+互联网 二级、三级、四级网
• 设备多,品牌杂
基 础
服务器
多品牌服务器+小机
设
存储
施
FC SAN + NAS + 分布式文件
容灾
本地备份 双活、异地容灾(弱)
• 利用率低,服务器20%
利用
• 管理难,无法有效监控
智慧城市 愿景及目标
主要任务 总体架构
业务架构 应用架构 技术架构
重点工程 行动计划 关键路径 指标体系 保障措施
气象云主题建设内容
咨询规划
云计算中心
气象大数据平台
应用展示中心
应用体系
气象大数据主体建设内容
咨询规划
云计算中心
气象大数据平台
应用展示中心
应用体系
气象工程展示中心主体建设内容
咨询规划
公众服务 国家级相关部门
公众服务 省市县相关部门
公众服务 省市县相关部门
公众服务 省市县相关部门
国家气象云建设
1个主中心(含北京局) +1个同城灾备中心 +1个异地灾备中心 +30个省级分中心
标准体系建设
技术架构 安全标准 数据标准 服务标准
气象云计算平台网络拓扑架构
气象有私有云资源池
气象有公共服务资源池
• 数据收发系统(CTS): 包括数据收集、收集处理、 分发处理、数据补调等
• 加工处理系统(DPC): 数据解码系统、质量控制 系统、产品生产系统等
• 存储管理系统(SOD): 结构管理、元数据管理、 数据处理、数据清除等
• 共享服务系统:检索查询、 数据统计分析、可视化等
平台分类
系统构成 数据收集
智慧业务、智慧管理、智慧服务
气象信息化行动方案
智慧气象云工程
应用资源整合
标准化 数字化
数据资源整合
标准化 数字化
管理信息化
硬件资源整合
标准化 数字化
问题导向:数据分散、信息孤岛、 应用林立
以资源整合和应用集约为抓手,以标准化贯 穿始终,从流程再造入手,初步完成数据、硬件和 业务应用等三大资源整合,以统一构建的国省数据 环境,统一规划的基础设施资源池,统一的加工处 理流水线,构建扁平化的信息组织体系,为实施金 云工程,发展智慧气象奠定基础。
源
维
池
管
理
02 气象行业解决方案
章节 PART
构建基于CIMISS的国省两级气象云应用体系-整体架构
国家气象云参考部署架构
天气预报
应用2
气象公有云 应用1 应用3
减灾服务
气象观测
卫星遥感
科研计算
数值预报
同城双活中心 应用2
省级分中心
国家气象云主中心 应用1
应用3 省级分中心
异地灾备中心 省级分中心
智慧气象大数据分析平台整体解决方案
目录
CONTENTS
1 需求梳理及行业发展趋势 2 气象行业解决方案 3 案例分析
01 需求梳理及行业发展趋势
章节 PART
气象局新一代信息工程总体技术架构理解
重点解析:总体架构和云架构是衔接-演进的关系
资源整合共享是国家新一代信息工程建设的重点
实施气象信息化行动方案,夯实气象云建设基础
环境 特征 虚拟机
数据收发系统 (CTS)
加工处理系统 (DPC)
存储管理系统 (SOD)
收集处理
分发处理
数据分发
数据补调
系统交互
监所管理
数据解码 质量控制 产品生产 结构管理 入库存储 数据处理 数据清除
虚拟机 虚拟机 多核 虚 拟机 大内存 虚 拟机 虚拟机 虚拟机
高IO 虚拟机
虚拟机
共享服务系统 (GDS)
气象云内外网数据安全传输
气象云部署架构
171 7
气象公有云部署和设想
从客户角度出发,为了保证技术的透明性和可持有性,理解气象公有云建设是运行在互联 网 上的气象云建设,而不是纯粹由互联网厂商运行的黑匣子。
根据公有云部署应用的情况 分析可以考虑数据库的云化;
气象局可以考虑采购服务的 模式,避免自建,按需计费;
云计算中心
政务大数据平台
应用展示中心
应用体系
开放共赢 融合创新
气象应用体系主体建设内容
咨询规划
云计算中心
气象大数据平台
应用展示中心
应用体系
气象信息化建设发展方向:大整合、大平台
信息化现状
信息化痛点
业
CIPAS
MICAPS CIMISS
• 业务自建、缺乏标准 • 系统多杂,多次登陆
务
日志审计
请求服务
物理部署位置选择:最 近 的城市云中心(无锡、南 京等),或者上海超算中心 云化资源池。
气象公有云部署和设想
191 9
CIMISS平台与云平台的关系分析
1、应用拆分
2、应用/WEB上云
3、数据库U2L
CTS
CMISS 平台
DPC SOD GDS
MCP
• CMISS平台按照不同阶段 处理流程划分
4、数据上云
存 储 搬 迁
• 数据物理分散转变为物理集中 • 分散存储转变统一云存储; • 集中资源,降低未来容灾难度
接警信息库
案件信息库
数
串并案库
违法人员库
据
嫌疑人库
其他数据库
上
原始数据库
云
大
数
据
信息资源数据
平
库
台
统一大数据平台平台
检索系统
虚拟机
数据获取 数据可视化
虚拟机 大内存 虚拟机
数据分发及统计 虚拟机
DB1
HA/CLUSTER
DB2
DB1’
DB2’
小型机
HA/CLOUSTE R
X86服务器
•网络加速 IB网络:心 跳、业务网 万兆网络 :业务网
•IO加速:
PCIE-SSD
•内存数据库加速:开启
Oracle12c内存数据库功能
应用导向,搭建国省统一CIMISS数据环境
以CIMISS为基础构建国省统一数据环 境
CIMISS确立了标准,整合了各类数据 这就是气象大数据在国省、省际流动并创造价值的前提基础
气象信息化整体规划思路和路线
咨询规划
云计算中心
气象大数据平台
应用展示中心
应用体系
发展战略
现状分析
问题分析
标杆研究
需求
内涵及要素构成