气象大数据云平台建设方案
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
根据公有云部署应用的情况 分析可以考虑数据库的云化； 气象局可以考虑采购服务的 模式，避免自建，按需计费；
物理部署位置选择：最
的城市云中心（无锡、南
近
京等），或者上海超算中心
云化资源池。
气象公有云部署和设想
19 1 9
CIMISS平台与云平台的关系分析
1、应用拆分
CTS
2、应用/WEB上云
国家气象云参考部署架构
天气预报
气象公有云
应用1 应用2 应用3
减灾服务
气象观测
卫星遥感
科研计算
数值预报
国家气象云主中心
同城双活中心 应用2 省级分中心 异地灾备中心 应用1 应用3 省级分中心 省级分中心
国家气象云建设
1个主中心（含北京局） +1个同城灾备中心 +1个异地灾备中心 +30个省级分中心
气象大数据云平台整体解决方案
目录
CONTENTS
1
需求梳理及行业发展趋势 气象行业解决方案 案例分析
2
3
章节 PART
Hale Waihona Puke 01需求梳理及行业发展趋势
气象局新一代信息工程总体技术架构理解
重点解析：总体架构和云架构是衔接-演进的关系
资源整合共享是国家新一代信息工程建设的重点
实施气象信息化行动方案，夯实气象云建设基础
标准体系建设
技术架构 安全标准
公众服务 公众服务 公众服务 公众服务
数据标准 服务标准
国家级相关部门
省市县相关部门
省市县相关部门
省市县相关部门
气象云计算平台网络拓扑架构
气象有私有云资源池
气象有公共服务资源池
气象云内外网数据安全传输
气象云部署架构
17 1 7
气象公有云部署和设想
从客户角度出发，为了保证技术的透明性和可持有性，理解气象公有云建设是运行在互联 网 上的气象云建设，而不是纯粹由互联网厂商运行的黑匣子。
HA/CLUSTER
SOD GDS MCP
数据收发系统 （CTS）
DB2
DB1’
DB2’
存 储 搬 迁
• 数据物理分散转变为物理集中 分散存储转变统一云存储； 集中资源，降低未来容灾难度
小型机
• •
CMISS平台按照不同阶段 处理流程划分 数据收发系统（CTS）： 包括数据收集、收集处理、 分发处理、数据补调等 加工处理系统（DPC）： 数据解码系统、质量控制 系统、产品生产系统等
气象大数据主体建设内容
咨询规划 云计算中心 气象大数据平台 应用展示中心 应用体系
气象工程展示中心主体建设内容
咨询规划 云计算中心 政务大数据平台 应用展示中心 应用体系
开放共赢 融合创新
气象应用体系主体建设内容
咨询规划 云计算中心 气象大数据平台 应用展示中心 应用体系
气象信息化建设发展方向：大整合、大平台
咨询规划 云计算中心 气象大数据平台 应用展示中心 应用体系
发展战略
现状分析 问题分析 标杆研究
业务架构
主要任务 总体架构
应用架构
技术架构
需求
重点工程 行动计划
内涵及要素构成 智慧城市 愿景及目标
关键路径 指标体系
保障措施
气象云主题建设内容
咨询规划 云计算中心 气象大数据平台 应用展示中心 应用体系
加工处理系统 （DPC）
HA/CLOUSTE R
• •
存储管理系统 （SOD）
接警信息库
案件信息库 违法人员库 其他数据库
•
共享服务系统 （GDS）
•
存储管理系统（SOD）： 结构管理、元数据管理、
虚拟机 虚拟机 大内存 虚拟机 数据分发及统计 虚拟机
X86 服务器
•网络加速 IB网络：心 跳、业务网 万兆网络 ：业务网 •IO加速: PCIE-SSD •内存数据库加速：开启 Oracle12c内存数据库功能
信息化现状
信息化痛点
信息化方向
业务应用大平台
业 务
数 据 / 平 台
CIPAS 日志审计
MICAPS 请求服务
CIMISS 业务系统
100
• • • • • • • • • • • •
业务自建、缺乏标准 系统多杂，多次登陆 重复录入，效率低下 数据量大，处理效率 低 数据格式杂，无法处 理 数据无法有效共享 多元化数据如何创新 设备多，品牌杂 利用率低，服务器20% 利用 管理难，无法有效监控 运维 不灵活，难以支撑信息 化扩展 安全水平低，难以持续 提供信息化基础设施能 力 信息化管理部门无法向 快速为业务部门信息化 需求提供服务
理流水线，构建扁平化的信息组织体系，为实施金
云工程，发展智慧气象奠定基础。
数据资源整合
标准化 数字化
管理信息化
硬件资源整合
应用导向，搭建国省统一CIMISS数据环境
以CIMISS为基础构建国省统一数据环境
CIMISS确立了标准，整合了各类数据 这就是气象大数据在国省、省际流动并创造价值的前提基础
气象信息化整体规划思路和路线
智慧业务、智慧管理、智慧服务
气象信息化行动方案
智慧气象云工程
问题导向：数据分散、信息孤岛、 应用林立
以 资源整合 和 应用集约 为抓手，以 标准化贯
应用资源整合
标准化 数字化
标准化 数字化
穿始终，从流程再造入手，初步完成数据、硬件和 业务应用等三大资源整合，以统一构建的国省数据 环境，统一规划的基础设施资源池，统一的加工处
基础设施大整合
云计算服务 计 算 资 源 池 存 储 资 源 池 网 络 资 源 池 容 灾 资 源 池 统 一 运 维 管 理
服务器 存储 容灾 预报中心
气象中心
人工影响天气 中心
气象信息中心（数据中心）
公服中心
……
•
管 理
气候中心
基础设施
章节 PART
02
气象行业解决方案
构建基于CIMISS的国省两级气象云应用体系-整体架构
统一大平台门户 CIPAS
MICAPS
GIS
……
业务 厂商
基础库
自动站 数据
实时库
卫星数据 雷达数据
行业库
数值产品
数据资源大整合
资源整合平台 大数据分析平台 业务支撑平台 资源服务平台
结构化数据+非结构化数据 百亿条基础数据，数值预报数据庞大
网络
基 础 设 施
业务网+气象专网+互联网 二级、三级、四级网 多品牌服务器+小机 FC SAN + NAS + 分布式文件 本地备份 双活、异地容灾（弱）
3、数据库U2L
4、数据上云
DPC
平台分类
CMISS 平台
系统构成 数据收集 收集处理 分发处理 数据分发 数据补调 系统交互 监所管理 数据解码 质量控制 产品生产 结构管理 入库存储 数据处理 数据清除 检索系统 数据获取 数据可视化
环境 特征 虚拟机 虚拟机 虚拟机 多核 虚 拟机 大内存 虚 拟机 虚拟机 虚拟机 高IO 虚拟机 虚拟机 DB1
物理部署位置选择：最
的城市云中心（无锡、南
近
京等），或者上海超算中心
云化资源池。
气象公有云部署和设想
19 1 9
CIMISS平台与云平台的关系分析
1、应用拆分
CTS
2、应用/WEB上云
国家气象云参考部署架构
天气预报
气象公有云
应用1 应用2 应用3
减灾服务
气象观测
卫星遥感
科研计算
数值预报
国家气象云主中心
同城双活中心 应用2 省级分中心 异地灾备中心 应用1 应用3 省级分中心 省级分中心
国家气象云建设
1个主中心（含北京局） +1个同城灾备中心 +1个异地灾备中心 +30个省级分中心
气象大数据云平台整体解决方案
目录
CONTENTS
1
需求梳理及行业发展趋势 气象行业解决方案 案例分析
2
3
章节 PART
Hale Waihona Puke 01需求梳理及行业发展趋势
气象局新一代信息工程总体技术架构理解
重点解析：总体架构和云架构是衔接-演进的关系
资源整合共享是国家新一代信息工程建设的重点
实施气象信息化行动方案，夯实气象云建设基础
标准体系建设
技术架构 安全标准
公众服务 公众服务 公众服务 公众服务
数据标准 服务标准
国家级相关部门
省市县相关部门
省市县相关部门
省市县相关部门
气象云计算平台网络拓扑架构
气象有私有云资源池
气象有公共服务资源池
气象云内外网数据安全传输
气象云部署架构
17 1 7
气象公有云部署和设想
从客户角度出发，为了保证技术的透明性和可持有性，理解气象公有云建设是运行在互联 网 上的气象云建设，而不是纯粹由互联网厂商运行的黑匣子。
HA/CLUSTER
SOD GDS MCP
数据收发系统 （CTS）
DB2
DB1’
DB2’
存 储 搬 迁
• 数据物理分散转变为物理集中 分散存储转变统一云存储； 集中资源，降低未来容灾难度
小型机
• •
CMISS平台按照不同阶段 处理流程划分 数据收发系统（CTS）： 包括数据收集、收集处理、 分发处理、数据补调等 加工处理系统（DPC）： 数据解码系统、质量控制 系统、产品生产系统等
气象大数据主体建设内容
咨询规划 云计算中心 气象大数据平台 应用展示中心 应用体系
气象工程展示中心主体建设内容
咨询规划 云计算中心 政务大数据平台 应用展示中心 应用体系
开放共赢 融合创新
气象应用体系主体建设内容
咨询规划 云计算中心 气象大数据平台 应用展示中心 应用体系
气象信息化建设发展方向：大整合、大平台
咨询规划 云计算中心 气象大数据平台 应用展示中心 应用体系
发展战略
现状分析 问题分析 标杆研究
业务架构
主要任务 总体架构
应用架构
技术架构
需求
重点工程 行动计划
内涵及要素构成 智慧城市 愿景及目标
关键路径 指标体系
保障措施
气象云主题建设内容
咨询规划 云计算中心 气象大数据平台 应用展示中心 应用体系
加工处理系统 （DPC）
HA/CLOUSTE R
• •
存储管理系统 （SOD）
接警信息库
案件信息库 违法人员库 其他数据库
•
共享服务系统 （GDS）
•
存储管理系统（SOD）： 结构管理、元数据管理、
虚拟机 虚拟机 大内存 虚拟机 数据分发及统计 虚拟机
X86 服务器
•网络加速 IB网络：心 跳、业务网 万兆网络 ：业务网 •IO加速: PCIE-SSD •内存数据库加速：开启 Oracle12c内存数据库功能
信息化现状
信息化痛点
信息化方向
业务应用大平台
业 务
数 据 / 平 台
CIPAS 日志审计
MICAPS 请求服务
CIMISS 业务系统
100
• • • • • • • • • • • •
业务自建、缺乏标准 系统多杂，多次登陆 重复录入，效率低下 数据量大，处理效率 低 数据格式杂，无法处 理 数据无法有效共享 多元化数据如何创新 设备多，品牌杂 利用率低，服务器20% 利用 管理难，无法有效监控 运维 不灵活，难以支撑信息 化扩展 安全水平低，难以持续 提供信息化基础设施能 力 信息化管理部门无法向 快速为业务部门信息化 需求提供服务
理流水线，构建扁平化的信息组织体系，为实施金
云工程，发展智慧气象奠定基础。
数据资源整合
标准化 数字化
管理信息化
硬件资源整合
应用导向，搭建国省统一CIMISS数据环境
以CIMISS为基础构建国省统一数据环境
CIMISS确立了标准，整合了各类数据 这就是气象大数据在国省、省际流动并创造价值的前提基础
气象信息化整体规划思路和路线
智慧业务、智慧管理、智慧服务
气象信息化行动方案
智慧气象云工程
问题导向：数据分散、信息孤岛、 应用林立
以 资源整合 和 应用集约 为抓手，以 标准化贯
应用资源整合
标准化 数字化
标准化 数字化
穿始终，从流程再造入手，初步完成数据、硬件和 业务应用等三大资源整合，以统一构建的国省数据 环境，统一规划的基础设施资源池，统一的加工处
基础设施大整合
云计算服务 计 算 资 源 池 存 储 资 源 池 网 络 资 源 池 容 灾 资 源 池 统 一 运 维 管 理
服务器 存储 容灾 预报中心
气象中心
人工影响天气 中心
气象信息中心（数据中心）
公服中心
……
•
管 理
气候中心
基础设施
章节 PART
02
气象行业解决方案
构建基于CIMISS的国省两级气象云应用体系-整体架构
统一大平台门户 CIPAS
MICAPS
GIS
……
业务 厂商
基础库
自动站 数据
实时库
卫星数据 雷达数据
行业库
数值产品
数据资源大整合
资源整合平台 大数据分析平台 业务支撑平台 资源服务平台
结构化数据+非结构化数据 百亿条基础数据，数值预报数据庞大
网络
基 础 设 施
业务网+气象专网+互联网 二级、三级、四级网 多品牌服务器+小机 FC SAN + NAS + 分布式文件 本地备份 双活、异地容灾（弱）
3、数据库U2L
4、数据上云
DPC
平台分类
CMISS 平台
系统构成 数据收集 收集处理 分发处理 数据分发 数据补调 系统交互 监所管理 数据解码 质量控制 产品生产 结构管理 入库存储 数据处理 数据清除 检索系统 数据获取 数据可视化
环境 特征 虚拟机 虚拟机 虚拟机 多核 虚 拟机 大内存 虚 拟机 虚拟机 虚拟机 高IO 虚拟机 虚拟机 DB1