国家气象中心气象信息共享门户系统技术方案
基于气象大数据云平台的数据访问实现方法
DOI:10.15913/ki.kjycx.2024.04.018基于气象大数据云平台的数据访问实现方法陶睿(内蒙古自治区气象数据中心,内蒙古呼和浩特010051)摘要:随着气象观测系统的不断发展,气象数据类型、数量日益增长。
气象大数据云平台支持大数据汇聚交换、产品加工、共享服务和挖掘分析,实现了气象数据的高效服务。
通过介绍基于气象大数据云平台的Rest数据访问方式、脚本数据访问方式和文件目录数据访问方式的参数配置和具体应用,可以使气象工作人员对气象大数据云平台有更深入的了解,并自主高效获取数据,最大程度地发挥气象数据效能。
关键词:气象大数据云平台;数据访问;脚本;文件目录中图分类号:TP311.13;P409 文献标志码:A 文章编号:2095-6835(2024)04-0069-04随着信息化的快速发展,气象信息化也在快速适应时代变化。
以气象信息化驱动气象现代化,建设智慧气象,是落实创新驱动发展战略和国家信息化发展战略的重要举措,气象数据共享服务将在保证数据安全的前提下更加开放多样。
全国综合气象信息共享平台(CIMISS)是国家气象信息基础性建设的重要工程,是一套覆盖全国,集数据收集和分发、质量控制与产品生成、存储管理、共享服务于一体的气象信息共享业务系统,为部门内外用户提供地面、高空、海洋、辐射、农气、数值模式、大气成分、气象灾害、雷达、卫星、服务产品等气象观测数据和气象服务产品的共享服务。
但随着用户使用数据需求多样化,CIMISS平台出现了用户暴力检索、业务系统长时间序列数据服务效率低以及数据安全性差等问题[1]。
2019年国家气象局研发了“数算一体”的气象大数据云平台。
气象大数据云平台不仅可以解决全国综合气象信息共享平台服务接口现状问题,而且降低了存储技术开发难度,解耦应用与数据,直接支撑业务系统。
气象大数据云平台服务接口遵循CIMISS接口规范,并按需拓展,可以高效支撑天气预报服务、人工影响天气等多种气象应用,形成“云+端”的应用生态[2]。
天地一体化风云四号A星数据服务系统的设计与实现
天地一体化风云四号A星数据服务系统的设计与实现徐喆;咸迪;高云;亓永刚【摘要】风云四号A星数据服务系统是风云四号卫星地面应用系统的重要组成部分,也将是实现气象卫星数据共享服务的基础平台.数据服务系统是一个综合的气象卫星信息服务系统,不仅可以提供数据的检索下载服务,还将为各类用户共享使用卫星数据提供各类辅助手段和信息帮助,满足国内外各类数据服务用户对气象卫星数据和信息以及云图动画的需求.根据风云四号卫星数据和产品的规格,建立稳定、可靠、安全的业务化卫星数据存档管理系统.通过天上卫星数据直接广播、CMACast 转播,地面Internet、专线通信等方式,建立天地一体化的、布局全国的风云四号A 星数据获取和共享服务体系.【期刊名称】《卫星应用》【年(卷),期】2018(000)011【总页数】6页(P55-60)【关键词】风云四号;数据服务【作者】徐喆;咸迪;高云;亓永刚【作者单位】国家卫星气象中心;国家卫星气象中心;国家卫星气象中心;国家卫星气象中心【正文语种】中文一、前言风云四号(FY-4)是我国第二代静止气象卫星,星载四类有效载荷:成像仪、探测仪、闪电仪和空间天气监测仪器包。
成像辐射计具有14个光谱波段,极大提高了遥感对地观测的空间、时间和光谱分辨率;干涉式红外探测仪将为区域数值模式和短临预报提供观测数据和新的应用模式;闪电成像仪可以作为强对流天气的“示踪器”。
与风云二号(FY-2)相比,风云四号原始数据量提高了160倍,产品数据量提高了80倍,每日数据量高达4TB。
风云四号A星(FY-4A)地面系统接收的实时资料,以及业务系统加工处理得到的各级数据和产品,在天气预报、生态环境监测等应用领域将发挥重要作用,在国民经济的多个领域(农业、林业、水利、环境、交通等)都有很强的应用需求。
数据服务系统是风云四号卫星地面应用系统九大系统之一,也是国家民用空间基础设施——气象卫星数据中心的重要组成部分,是实现气象卫星数据共享服务的基础平台。
地面气象资料数据访问接口设计与实现
地面气象资料数据访问接口设计与实现闫荞荞;刘莹;刘雯;严婧【摘要】针对用户对高质量、高时效气象数据服务的需求,在对气象资料服务现状剖析的基础上,基于MDOS数据库设计实现了地面气象资料数据访问接口.在提高数据服务效率的同时可屏蔽底层数据结构变化对用户应用的影响,保证数据服务的规范性、稳定性和安全性.【期刊名称】《微型机与应用》【年(卷),期】2017(036)014【总页数】3页(P20-22)【关键词】数据访问接口;地面气象资料;数据同步;MDOS【作者】闫荞荞;刘莹;刘雯;严婧【作者单位】湖北省气象信息与技术保障中心,湖北武汉430074;湖北省气象信息与技术保障中心,湖北武汉430074;湖北省气象信息与技术保障中心,湖北武汉430074;湖北省气象信息与技术保障中心,湖北武汉430074【正文语种】中文【中图分类】TP391资料服务是气象资料业务的落脚点,为用户提供高时效、高质量的数据服务是其核心。
传统的数据服务方式主要有:(1)经资料主管部门批准,资料服务单位将报文数据直接通过FTP定时推送至使用单位,数据质量较低;(2)资料使用者向资料主管部门提出申请,获批后资料服务单位制作数据集后再提供给用户,质量有保证但时效较差。
这种粗放式和点对点的数据服务模式,一方面不利于资源的高效利用和集约化管理,增加用户管理数据负担的同时资料管理部门在数据服务上存在重复劳动;另一方面,时间上的滞后越来越不能满足用户对数据时效的需求,数据被订正后也很难保证不同数据副本间的一致性。
为解决传统数据服务存在的问题,提高气象资料业务对其他气象业务的支撑能力,本文基于气象资料业务系统(Meteorological Data Operational System, MDOS)设计实现了地面气象资料数据访问接口,旨在基于MDOS质控和处理后的数据,为部门内用户提供高质量的数据服务。
为避免数据服务对MDOS实时业务产生影响,利用SQL Server数据复制技术建立专门用于数据服务的共享数据库,基于共享数据库建立数据访问接口;为便于监控用户的数据访问行为,保证数据访问安全,设计了基于角色和审计信息的数据访问控制策略。
什么网站能查询到历史天气数据
什么网站能查询到历史天气数据
建议你可以从以下几个网站查一下:
1、天气在线;
2、中国天气社区;
3、中国气象数据网;
4、天气后报。
最推荐的一种:中国气象数据网
推荐理由:
1、中国气象数据网是专门对外提供气息数据服务的官网平台;
2、从1981年到2010年的历史气象数据都可以检索和下载,非常的简单!
扩展资料:
中国气象数据网是气象科学数据共享网的升级系统,是国家科技基础条件平台的重要组成部分,是气象云的主要门户应用系统,是中国气象局面向国内和全球用户开放气象数据资源的权威的、统一的共享服务平台,是开放我国气象服务市场、促进气象信息资源共享和高效应用、构建新型气象服务体系的数据支撑平台。
中国气象数据网以满足国家和全社会发展对气象数据的共享需求为目的,重点围绕标准规范体系建立、数据资源整合、共享平台建设和数据共享服务等四个方面开展工作。
中国气象数据网服务模式分为在线数据服务和离线数据服务两种,在线服务主要通过中国气象数据网提供在线数据下载和服务,离线数据服务包括电话咨询、信息咨询以及根据用户需求制作专题数据产品等。
国家气象网络计算应用节点门户系统的设计与实现
主要模 块的开发 , 已集成打包 为一整体 , 并 运行 于中国气象局 国家园 区网 内。
关 键 词 门 户 系 统 气象网络节点 服 务 中 心 门 户 用户 接入 门户 气 象 模 式 应 用 门 户 JP S
引 言
目前 , 已经 开 发完成 了 门户 系统 的大部 分开发 ,
1 门户 系统 设计 1 1 气 象 网络节 点的整 体架构 . 气 象 网络 节点 的整体 设计 架构 如 图 1所示 。整 体上 架构 可 分 为 门户 层 、 中间 层 、 源层 等 3个 层 资
次。
气象 网络节 点 着眼 于行业 内气 象计算 资源 分 布 的不 均匀 性和地 方气 象部 门对 气象计 算 资源 的 巨大
气象模 式应 用门户 , We 以 b方式来共享使用承载于高性能计算机 系统上的气象模 式。系统的 开发 中采 用了 J E 2E
的 S rl /S b组 件 技术 , “ cpe o o 插 件 ” ev tJ PWe e 在 E ls +l i mbz 集成 环境 进行 开发 调 试 。 目前 已经 完 成 了 3个 门 户 子 系 统
中间层 : 用 了 国 际 领 先 的 网 格 中 间 件 系 统 采 MO B 网格 套 件 ( A MOA i S i )2作 为 基 础 , B Gr ut [ d e ] 进行 自主开 发 。 资 源 层 : 源层 汇 聚 了 国家 气 象信 息 中心拟 开 资 放共享 的各种 资 源 , 括 超级 计 算 机 、 据 、 象 模 包 数 气
维普资讯
第3 4卷 , 刊 增 20 0 6年 8月
气
象
科
技
Vo . 4, u p 13 S p l Sp 06 e .2 0
我国科技资源共享的现状及其分析
我国科技资源共享的现状及其分析世界各发达国家均普遍重视提高科技资源的管理水平、努力实现科技资源的广泛共享,从而为科学研究和技术开发提供有效支持,这也是其能够快速发展科技、赢得竞争优势的基础所在。
各国政府往往通过立法和国家的政策积极引导和推动科技资源的保护与共享。
在我国,科技资源的共享问题近年来开始引起国家和各地方的重视。
本文将梳理我国科技资源共享的现状,并对此进行分析。
一、我国科技资源共享现状建国以来,特别是改革开放以来,我国的科技资源建设工作取得了一定的进展。
积累了一些重点领域的常规科学数据和文献,建立了部分区域性的观测与监测网络,收集整理了一定数量的种源和标本,拥有了一批科技基础设施等。
"九五"以来,在资源整合方面,进行了积极的探索,推动了科学数据、大型科学仪器、自然科技资源和科技图书文献资源的共建共享工作。
(一)科学数据领域科学数据是人类社会科技活动所产生的基本数据、资料,以及按照不同需求而系统加工的数据产品和相关信息,具有明显的潜在价值和可开发价值,并在应用过程中得以增值,是信息时代最基本、最活跃、影响面最宽的科技资源。
建国以来,我国在许多科学领域组织开展了不同程度、规模不等的观测、探测、调查和试验研究工作,通过科技攻关、高技术研究及产业化、重大基础研究与科研基地的建设等,积累了大批宝贵的科学数据和基于这些科学数据所得出的大量综合性信息,基本构成了我国海量科学数据的大致轮廓。
目前为止,我国已先后建成一批国家级科学数据中心;建成规模不等、质量各异的科学数据库5000个到6000个,内容基本覆盖了科学技术的各个领域。
各有关部委还相继成立了专门的信息中心,负责收集和整理本部门所采集的各类数据资料,通过建立数据库和产品加工,向用户提供信息服务以及相应的技术支撑。
目前这些信息中心已经成为所在政府部门向社会提供公益性、基础性服务的重要窗口。
科技部在促进科学数据的共享过程中发挥了较大的作用,一方面通过科技计划支持一批科学数据库的建设,另一方面还专门设立了国家科技基础性工作专项,先后启动和支持了一批急需的科技基础数据库建设项目。
WMO信息系统中气象元数据的设计与实现
气 象资 料和 相关 信息 的交 换 。全球 通信 系统 ( o — Glb a T lcmmu iainS se 简称 GT ) 其 中负 l eeo nct y tm, o S是 责 资料 交换 的基 础业 务 系统 。到 2 0世 纪 8 0年代 后 期, 全球 通 信 系统数 据 交 换 能 力 不 足 的 问题 日渐 突 显 , 界气 象组 织各 项 计 划 中 的大 量 数据 通 过 全 球 世
2 1 年 1 , 京 GIC 系 统制 作并 提供 系 统 内全 部 数 据 对 应 的气 象 元 数 据 , 计 约 1 万 条 。 02 月 北 S 共 2 关 键 词 : 数 据 ; M0 信 息 系 统 ; M0 核 心 元 数 据 标 准 ;气 象 数 据 元 W W
WI) 为世界 气象 组 织及 其 他 国际组 织 有 关计 划 的 S,
引 言
2 O世 纪 6 一7 O O年 代 , 界 气 象 组 织 ( r 世 Wo l d
Mee r lgc l g nzt n 简称 wMO) tooo i a i i , a Or ao 正式 推 出 了必要 的政 策和 系统 来支 持免 费 和不受 限制 的 国际
信 息交换与共享 提供支撑 , 为各 国水 文气 象部 门 以外
高 元 数 据 定 义 、 集 、 档 和 交 换 的标 准化 水 平 在 内 的 总 体 需 求 的 背 景 下 , 据 W MO 核 心 元 数 据 标 准 设 计 并 由 自 收 归 依
开 发 程 序 自动 生 成 的 。北 京 G S IC系 统 是 W MO 信 息 系 统 中承 担 区 域 间 及 全 球 资 料 交 换 的 主 干 通 信 中 心 之 一 , 至
系统详细设计方案(仅用于学习的参考模板)
XXXX建设项目智慧平台软件系统详细设计方案1.概述1.1.项目背景XXXX资源是关系到国计民生的基础资源,我国存在XXXX资源短缺、XXXX污染加剧和XXXX 土流失严重等XXXX问题,如何合理有效地进行XXXX资源的保护和综合利用,一直是各级XXXX 利部门的工作重心。
近年来,全国XXXX利系统坚持以XX信息化带动XXXX利现代化,积极进行信息化基础设施的建设,提出了XXXX资源管理、防汛抗旱指挥、农村XX信息管理等重点工程,服务于各种XXXX利业务管理。
当前,以物联网、移动互联网、智能技术为代表的新一代信息技术正在带来第3次信息技术革命,信息技术正在与城XXXX的基础设施、城XXXX的管理运行系统、XXXX民的生活和企业的运行相融合,创造出原来难以想象的城XXXX和生活的新形态。
为应对气候变化和人类剧烈活动导致的洪涝灾害、干旱缺XXXX、XXXX体污染、XXXX土流失等复杂的XXXX利相关问题,推动XX信息化XXXX平向更高层次发展,借鉴“智慧地球”的理念,在“智慧城XXXX”的引领下国内外相继开展了“智慧XX”的建设实践。
当前,在智慧城XXXX、XXXX利现代化、最严格XXXX资源管理和生态文明建设的大背景,使我国在XXXX资源综合管方面必然选择走一条技含量高的智慧XX建设之路。
XXXX智慧XX软件信息化建设,是体现城XXXX管理智能化XXXX平的重要标志之一,是XXXX 利事业发展、行业管理与服务的重要支撑和保障,也是保民生的技术支撑手段,关系到城XXXX 运行优化资源配置、职能提升、公共服务完善等各项任务的顺利完成。
智慧XX建设将以新技术应用带动XX信息化技术XXXX平的全面提升,以重点应用系统带动信息化建设效益的发挥,为XXXX利管理的精细化、智慧化提供信息化技术支撑。
XXXX按照国家XX信息化建设及智慧城XXXX建设要求,在全面分析建设现状的基础上,针对存在的问题和不足,制定涵盖XX信息化标准、数据库、应用系统、支撑系统、基础设施、监测系统、安全系统、运维体系等在内的全面的XX信息化建设规划方案,率先建立起较为完善的XX信息化体系,对推动和加快XXXX乃至广西自治区XX信息化进程具有非常重要的意义。
信息资源管理建设方案
信息资源管理建设方案一、编制说明信息资源管理建设包括数据标准管理、元数据管理、主数据管理、数据质量管理、数据安全管理等内容。
●数据标准是指保障数据的内外部使用和交换的一致性和准确性的规范性约束。
数据标准管理是指数据标准的制定和实施的一系列活动。
主要目标是通过统一的数据标准制定和发布,结合制度约束、系统控制等手段,实现大数据平台数据的完整性、有效性、一致性、规范性、开放性和共享性管理,为数据管理提供参考依据。
主要包括数据分类标准、信息资源目录、统一编码标准、主数据标准、逻辑数据模型标准、物理数据模型标准、元数据标准、公共代码标准等。
●元数据管理是数据资产管理的重要基础,是为获得高质量的、整合的元数据而进行的规划、实施与控制行为。
主要目标是通过元数据管理活动,可以使数据信息的描述和分类实现格式统一,有助于理解数据的真实含义,为数据资源的管理和数据应用奠定了基础。
●主数据是指用来描述核心业务实体的数据,是核心业务对象、交易业务的执行主体,是在整个价值链上被重复、共享应用于多个业务流程的、跨越各个业务部门、各个系统之间共享的、高价值的基础数据,是各业务应用和各系统之间进行信息交互的基础。
主数据管理是一系列规则、应用和技术,用以管理与核心业务实体相关的系统记录数据。
主要目标是通过对主数据值进行控制,使得企事业单位可以跨系统使用一致性和共享的主数据,提供来自权威数据源的协调一致的高质量主数据,降低成本和复杂度,从而支撑跨部门、跨系统数据融合应用。
●数据质量管理是指运用相关技术来衡量、提高和确保数据质量的规划、实施与控制等一系列活动。
主要目标是通过开展数据质量管理工作,可以获得干净、结构清晰的数据,是开发大数据产品、提供对外数据服务、发挥大数据价值的必要前提,也是开展数据资产管理的重要目标。
●数据安全管理是指对数据设定安全等级,保证其被适当地使用。
目标是建立完善的体系化的安全策略措施,全方位进行安全管控,通过多种手段确保数据资产在“存、管、用”等各个环节中的安全,做到“事前可管、事中可控、事后可查”。
公共气象服务网站数据的及时发布
图 1 公 共 气 象 服 务 网 站 系 统 架 构
为 突 出重 点 , 给 出 系统 中 图 2所 示 的 资 源管 仅 器 或气 象 信 息 共 享平 台为 依 托 , 照 1h 6h或 日 按 、
为 间 隔的时 间周期 , 取全 国 2 6 获 5 6个 站点 自动报 文
公 共气 象 服务 是政 府公 共服 务体 系 的重要 组成 部分, 是气 象工 作 的出发 点 和归宿 。随着 2 0 0 8年 中
国气 象 局公 共气 象 服 务 中心 的 成立 , 共 气 象服 务 公 工作 成 为各 级气 象机 构 的一项 基 本业 务活 动 。2 0 09 年公 共 气象 服 务 中 心 开展 了 we b环 境 下 l 以 中 国 _ 】 天气 网 内容 管理 系 统 、 门户 管 理 系 统 为 基 础 的省 级 网站 建设 。各省 级 网站 可 以通 过 人机 交互 方式 的 内
2 数据 层模 型设计
出 不 同 的 资 源 项 起 始 点
编 号 (tm—d 。将 资源 项 按 照 气 象 站 号 和 内容 类 Ie i)
收 稿 日期 : 0 0年 3月 2 21 6日; 稿 日期 : O O年 9月 2 定 2l 6日
44 8
气
象
科
技
第 3 9卷
客户端 :E I 浏览器 、F r F x h o e i e o 、C r m
门户层 :u b N 。O e M Tro CS pnC S 应 用层:
站数 据需要 进入 公 共 气 象服 务 数 据 库 , 天 至 少新 每 增 (4 1 ×2 0 —6 0 0条 记 录 。将 这 些 数 据 及 2 + ) 60 5 0 时进 入数 据库 、 及时 进行 简单 的质量 控制 、 时完成 及 各种 统计 分析计 算 并 对 各种 查 询 提 供 及 时服 务 , 需 要有 一套 高效数 据模 型支 撑 。设计 这套 数据模 型 的 基本 思 路 是 尽 可 能 地 将 数 据 处 理 放 在 数 据 层 中
大数据管理中心设计规划方案
大数据管理中心规划设计方案2整体规划方案关键能力实现方案实施方案背景与需求分析大数据里有民意有民心用大数据改善政府服务、更好满足群众需求 要依托互联网、大数据优化再造政府办事流程 同时也要加强数据安全保护智慧型政府善政惠民 兴业城市大数据科学管理 精准调控 高效协同……服务民生 拉动产业 孵化创新……✓公共数据共享✓社会数据协同✓数据服务开放✓社会治理✓宏观经济✓市场监管✓生态保护✓促进产业发展✓拉动数字经济优化城市资源配给促进城市科学管理✓应急响应✓事件预防✓形成统一的跨部门、跨地域、跨层级的信息交换共享房产局 房产交易所✓购房资格审核✓交易手续确认✓购房能力评估✓……税务局住建委人社公安✓税收审核✓税收缴纳✓社保年限✓缴纳金额✓房产评估✓人户核实✓户口迁转民政✓婚姻状况大数据平台人社数据民政数据税务数据金融信贷数据人员户口数据……✓逐步实现立体化、多层次、全方位的数 据服务体系✓有效支持电子政务公共服务能力提升横向协同纵 向 联 动宏观数据分析应用城市人口分析规划⚫人口迁移分析⚫人群特征分析⚫人群发展预测⚫……社会安防环保数据金融数据公共服务交通数据医疗数据社保数据公共安全分析预测⚫建筑安全评估⚫人流分析预警⚫……生态环境分析研判⚫大气污染分析⚫水质资源分析⚫…………大数据平台资源领导决策政策研究资源投放算法算力存储……市公安物业单位运营商市急救中心大数据平台 事件感知&实时处理消防部门✓消防接警✓消防出警✓救护车资源调拨✓急救医护资源调拨✓事故路段增派人手✓沿途路线道路疏通✓疏散建筑人群✓检查应急通道✓短信通知涉事区域人员✓实时监控区域人流实时感知策略研判实时传递协同处置人口库法人库电子证照库空间地理库航空公司延误旅客数据大数据平台市级数据库个人信用评级社会数据金融机构出行数据个人征信数据保险公司航班延误险定价小型金融机构个人信用评估个人征信数据延误旅客数据BDACE数据归集的频度无法满足业务协同需要未规划数据实时采集技术,无法支撑高效业务协同城市精细化管理缺乏基础数据保障数据共享和开放能力不全面,应用创新动能不足安全管控能力待提升数据授权、使用、审计的全生命周期管控存在短板,数据的安全防护有待提升未实现数据的统一运营,管理及维护难度过高设备、平台、数据规模高速增长,难于实施高效数据治理, 无法及时发现、诊断及解决问题源端数据标准各异,加工存在技术壁垒湖&库缺乏统一规划,数据标准还需完善 应用支撑能力较为薄弱,容易形成数据沼泽10整体规划方案关键能力实现方案实施方案背景与需求分析数据 标准资源 目录安全 体系整合数据能力赋能智慧运营政策 法规运营 策略打造信息化枢纽平台 能力统一管控技术平台逐步实现数据能力规模发展 围绕城市治理提供全产业链服务数据联动数据汇聚管理 制度大 数 据 体 系数据治理AI 服务业务服务数据服务促进大数据供给侧改革,围绕 大数据各项能力开放,推动数 据应用创新发展,激发数据价 值整合现有公共数据资源,布局 行业数据引入,逐步形成城市 数据枢纽搭建数据,业务,智慧三大 中台,与行业先进技术保持 同步演进;打造城市数据运 营、事件管理等数字孪生技 术能力1数据 汇聚3服务赋能2技术驱动使能高效协同,全面优化数据动态更新与同步机制推动公共数据完整归集,按需及时同步和更新公共数据,形成大数据枢纽,保证委办间政务协同驱动数据应用,进一步完善大数据中心主题库建设完成主题数据库建设,推动数据资源整合及数据分析应用聚焦服务赋能,初步构建中台能力开放体系搭建统一流数据处理和业务中台,并完善数据共享服务与数据分析和可视化服务,提升数据共享与开放效能加强数据运营,推动全市数据统一标准化管理及运维构建统一数据开发与调度,增强数据管理能力建立统一数据运维和自有的大数据组件技术栈,保障平台稳定运营确保安全可控,完善数据安全和平台安全管控建立完整的平台安全和数据安全管控体系,保障数据安全管控13市领导各委办局分析人员区政府外部机构公民开发者运维管理者数 据 层服 务 开 放 层门 户应 用 层非结构化数据区对外开放区对外数据开放脱敏区数据沙箱数据沙箱数据沙箱视频数据音频数据图片数据……数据私有数据处理一期升级开放中心一网通办城运系统运营中心分布式存储分布式分析数据库RDB 存储缓存存储采 集 分 发 层数据管理元数据 管理数据开发数据质量 管理数据安全安全合规 管理安全配置 检查网络安全 分析安全事件 响应敏感数据 加密敏感数据 脱敏数据泄漏 防护数据目录任务调度统一 运维数 据 运 维平 台 运 维数据标注共享中心业务中台服务规则定义事件管理AI 中台服务边缘计算存储数据实验区项目1数据项目2数据项目n 数据项目3数据经济运行社会治理二期大数据区实时数据区应用租户应用租户应用租户实时模型实时指标实时事件结 构 化 数 据城市大脑……批量计算流计算挖掘计算计算AI 能力(语音识别、人脸识别)深度学习(模型训练)离线采集实时采集数据采集数据源互联网爬虫政务数据(国家、市级、区)公共事业数据行业数据(金融、电信)互联网数据….物联网数据(气象、摄像头…)流媒体采集数据导入上报物联网网关采集准实时采集图数据库事件服务数据中台服务数据共享交换服务分发消息查询下载数据分析和可视化服务数据可视化工具数据探索工具文件数据开放服务申请/计量合作开发创新研究共享层(标签、指标)标准层(主题模型)数据湖整体规划方案关键能力实现方案实施方案背景与需求分析162.统一汇聚推动数据共享协同实时感知支持城市智慧运营价值提炼 支持宏观管理决策数据互补 政企数据互促互进◼计算资源的读写分离:在TDC 、KunDB 等数据库中 对处理和访问节点分离;◼库的读写分离:数据处理 库和数据访问库分离。
OneMap
OneMap1 概述OneMap Platform是集海量、多源异构空间信息资源的整合、管理、发布、WEB服务、应用搭建和运维保障为一体的完整的解决方案,是服务于社会公众、企事业单位和政府部门的综合性地理信息服务平台。
1.2 应用领域OneMap Platform已广泛的应用在空间信息共享平台的基础设施建设中,服务于国家地理信息公共服务平台(天地图)、数字城市建设,形成了天地图・陕西、天地图・辽宁、天地图・上海、天地图・重庆、数字乌鲁木齐等多个成功的省级地理信息公共服务平台和数字城市案例。
同时,OneMap Platform还可应用于国土、规划、公安、应急、电信、电力、环保、交通、房产、林业、气象、水利等专业领域中,构建行业的地理信息服务平台。
1.3 技术特点OneMap Platform v2.0(以下简称OneMap)由五个子产品构成,具备内容创建、服务发布、服务管理、服务调用一体化的完整的业务流程,拥有完善、稳定的后台运维系统、强大丰富的地理处理功能框架和丰富的客户端API及炫酷的前端体验。
平台特点: ? 一体化解决方案 ? 多样化服务类型? 专业化制图方案 ? 优化缓存切片方案 ? 安全完备的服务管理 ? 提供运维服务接口 ? 强大的资源管理能力 ? 离线资源管理能力 ? 丰富的地图应用开发接口 ? 便捷的移动地图应用? 严格遵循国际和国家相关技术标准 ? 跨平台的能力2 OneMap Platform v2.0体系结构2.1 公共服务平台的技术结构地理信息公共服务平台一般具有基础支撑层、数据层、服务层、应用层的四层技术结构,遵循统一的标准规范,由安全保障体系为整个平台提供全方位的运行保障。
(1)基础支撑层:主要包括网络、服务器集群、存储备份、计算机机房环境等。
(2)数据层:主体内容是公共服务平台的框架数据,它是面向地理信息网络化服务需求,依据统一技术规范而构建的一体化地理信息资源体系。
气象局信息网络安全现状及防范措施
73农业灾害研究2022,12(11)作者简介 张瀛(1988—),男,江苏泰兴人,助理工程师,主要从事综合气象观测工作。
收稿日期 2022-08-21Security Status andPreventive Measures of Meteorological Bureau Information NetworkZHANG Ying et al (Ningde Meteorological Bureau, Ningde, Fujian 352100)Abstract Basedonthebigdatainformation era and the practical application of meteorological security network, the network security work link of meteorologicalinformation is designed to effectively ensure the stable development of meteorological business system . On the basis of meteorological safety work and stable facility function, attach great importance existed various problems in meteorological information network. For the urgent meteorological information security management problem, formulate related measures. Ensure the meteorological bureau plans the management of network control user terminals.Key words Meteorologicalinformation;Network security; Strategies and methods气象局信息网络安全现状及防范措施张 瀛1,胡伟萍21.宁德市气象局,福建宁德 352100;2.宁德市三沙气象台,福建宁德 355101摘要 基于大数据信息化时代,结合气象安全网络的实际应用,设计了气象信息的网络安全工作流程,有效保障了气象业务系统的稳定发展。
政务云解决方案V2
¥5000/月
云应用
云网盘
华三云网盘
1、委办局原来怎么用,在云中也怎么用:计算、网络、存储、防火墙、负载分担、数据库、中间件,
全IT资源虚拟化; 2、方便申请使用、透明公开:申请资源立刻就能用,不用等;使用审批服务透明、公开;
14
解决之道-全IT资源交付-云主机
15
解决之道-全IT资源交付-云防火墙
需 求 与 痛 点
核心问题:
•
•
多租户存在IP地址重叠(市卫生局);
不改变租户现有业务网络规划,无缝将 业务迁移到云中;
舟山政务云建设原采用电信天翼云建设,有25个不满足需求项; 改用H3Cloud云,实现了委办局需要什么样服务,政务云中心就提供什么服务;
20
解决之道-南北向安全隔离
政务外网
Internet
依托于电子政务外网; 对Internet开放服务;
整合方式:
1、统一现有门户网站群; 2、Web服务器虚拟化;
7
1 2 3 4
政务云发展 政务云建设规划
政务云建设技术要点
安全 架构 服务
政务云案例
运维
8
政务云建设规划
9
云架构的选择
云架构的作用
OpenStack提供了一个操作平台或工具包,采用Python语言开 发,整合了针对计算、存储、网络基础资源的统一管理,封装资 源,提供界面、接口,使用云如同操作Windows一样,实现面 向大规模云业务的编排。 云架构:主机、网络、存储、安全、计费等协同组织,提供服务
虚拟数据中心
套 餐 1 套 餐 2
大型 适合1000 人以下场景
名称:高性能云主机 规格:4vCPU 8G内存
0
最全的气象类网址
最全的气象类网址数值预报类:1. /天气在线,集成多种数值预报模式可供参考。
2. .tw/V5/forecast/nwp/nwp_data.htm台湾气象局数值模式3. http://www.ecmwf.int欧洲中期天气预报中心数值模式4. http://www.kma.go.kr/ema/ema03/gdps_eng.html韩国气象局GDAPS T426/L40模式5. .hk/nwp/nwpc.htm香港天文台电脑模式预测天气图6. /research/nwp/numerical/operational/index.html英国气象局全球数值模式7. https:///PUBLIC/WXMAP/美国海军大气模式(nogaps)8. /sz/qh1.asp国家海洋环境预报中心数值预报9. /nmc/treeNavigator.do?type=TyphoonForecast中国气象局台风数值模式10. http://ddb.kishou.go.jp/grads.html日本气象厅数值模式(JMA GSM based on GrADS)11. .hk/WRF/香港城市大学WRF中尺数值模式12. 上海台风研究所数值预报网气候数据类:1. /index.jsp中国气象科学数据共享服务网2. /cn/国家气候中心3. /cru/data自1856年全球5°×5°网格温度资料。
(P. D. Jones)4. /data全球100个小区的温度资料。
(J. E. Hansen)5. /cru/data自1900年全球格点降水资料。
(Hulme)6.(/Monitoring/DailyMonitoring/glbtmeana/glbtmeana20061227.gif)全球每日平均气温距平(提示修改日期即可获得近期每日数据,把两个glbtmeana均改成glbtmean便可获得全球每日平均气温实况)如上面网址的图片为7. .tw/las/main.pl NCAR/NCEP再分析资料气象综合类常用网站:http://www.wmo.ch(世界气象组织)(美国国家海洋大气局)(美国气象学会)http://www.ecmwf.int(欧洲中尺度天气预报中心)(欧洲气象协会)教学资源类常用网站:/perlserv/(世界气象组织官方学术杂志)/Ph.D.-courses.html(AMS出版物)/curricula/alphaindes.html#h/current/bulletins.cgi/uhslc(夏威夷大学海平面中心)(康斯维星大学)/tv_univ.htm(美国各大学气象系的相关链接)(康斯维星大学)(美国怀俄明大学)(美国耶鲁地理学系).tw/net/net.htm(气象相关台站网络连接)http://weather.is.kochi-u.ac.jp(日本高知大学)/jpkc/dili/web10.htm(中国自然地理学精品课程网站)/cgi-bin/forum/leoboard.cgi(中科院动力论坛)http://222.195.136.24/mm5.html(高山红老师个人主页)科技类全文资源常用检索网站:(科技检索网站)(中文科学技术专业性搜索网站)(科技文献查找网站)/nsfc/cen100/kxb/sw/superlink-science.htm(美国大学气象专业搜索门户)各类综合常用气象数据资料下载网站地址:http://www.lib.noaa.goc/docs.pubsoure.html(NOAA实验室数据资料)(NOAA的地球研究实验室数据资料)/public.data(中国气象局)/datasets(UCAR数据资料)http://weather.is.kochi-u.ac.jp(日本高知大学)(美国怀俄明大学)/sources/levitus94/monthly/(Levitus资料)/cas/guide/Atmos/Surface/data.html(UCAR资料)NOAA组织分类研究性网站:/genera/getdata.htmlhttp://www.cdc.noaa.gochttp://www.cdc.noaa.goc/cdc/reanalysis/reanalysis.shtml/oa/mpp/freedata.html//oa/ncdc.htmlhttp://www.lib.noaa.gob/docs/pubsource.html/psd/psd3/publications.html/licensees.html//dataexplorer常用气象数据资料获取网站:/amsedu/dstreme/index.html/http://www.awi-bremerhaven.de/MET/sat /sat.htmlhttp://www.cicero.uio.no/cicerone/index_e.asp/nagazine/springer/00382/index.asp/ucardil/datasets/da083.2/dynamic/links.htmlhttp://www.wmo.ch/pages/prog/gcos/index.htmhttp://www.emc.ncep.noaa.goc/gmb/para/parahome.html/grads/archive/index.cgi.au/data/spt–AdvancedSearch.phphttp://www.ifm-geomar.de/index.php/ftphttp://weather.is.kochi-u.ac.jp/sat/gms.seahttp://www.ipcc.ch/http://www.jamstec.go.jp/e/index.html/JIMARhttp://www.jreaporg/index_e.html.tw/net/net.htm/research/hadleycentre/index.html/~geerts/cwx/www/g002.html#data(美国怀俄明大学数据)/home/index.html(NASA主页)/audience/forresearchers/features/index.html(NASA预报中心)(NASA地球观测中心)(国家大气科学中心)(美国UCAR中心)/search(美国国家科学研究中心)/pub/reanalysis(UCAR的FNL再分析数据)(NOAA国家天气预报中心)(生命地球化学研究实验室)/main/links/index.html(英国牛津大学气象网站链接站点)(太平洋研究实验室)(中国气象数据共享网)/MET/Enso/index2.html(太平洋ENSO研究中心)/publications.html/data/(康斯卫星数据资料)/webweather/(美国气象网络小课堂)/links.html(美国气象站点相关链接)[url=http://www.wmo.ch/[ages/prog/wcrp/About_links.html]http://www.wmo.ch/[ages/prog/wcrp/About_links.htm l[/url] (WMO气象站点链接)(看天吃饭)气象类遥感方向常用网站:(遥感系统网站)/is_nsmc/(中国卫星遥感服务网)(美国夏威夷大学遥感数据)/wxfax.htm(日本气象厅天气预报图)http://www.jma.go.jp/jma/indes.html(日本气象厅)气象卫星方向常用网站:/eos/project.html(国家MODIS数据中心)/index.asp(国家EOS-MODIS数据共享平台)/(中国MODIS共享平台)/(美国空间局MODIS项目网页)(国家卫星海洋应用中心)(海色和海表面温度MODIS)/(美国NASA的MODIS研究中心)/tqyb/product/TQ/CNCSYT/3.html(中国气象局卫星数据资料)/dac/databand/databank.htm(国内气象数据共享卫星资料类)/shuju/index.jsp(中国气象局卫星数据)(中国高等教育信息网).tw/93/home.htm(台湾国立中央大学大气科学系)(中国教育科研计算机网)/(中国科学院数据库)气象专题类常用网站:(风暴)/(风暴)/(暴风雪)/research/storms/(风暴)/data/snow/(降雪)/tornadoes.html(龙卷风)http://www.agora.ex.nii.ac.jp/digital-tyhoon/index.html.en(台风)/tropical/tropical.html(飓风)/(飓风)/tropic/tropic(热带气旋)/~psguest/polarmet/geninfo(极地)(极地)/~psguest/polarmet/geninfo/index.html(极地)/MET/Enso/index2.html(ENSO)/climate/t_elnino.html(ENSO)====================我是常用分割线========= /中国气象局/国家气候中心/中国天气网。
国家级气象业务内网建设方案
开发、多产品集成显示功能的开发;
负责气候预测产品在线发布和详细数据信息服务。
五、重点工作
国家气象中心
负责预报相关图形化产品生成;灾害预警产品的发布;专业气象服务 产品的制作;决策服务系统的建设、天气预报检验评分系统的建设; 负责天气业务产品的分发;制作和更新相关元数据信息; 建设或整合改造气象业务产品的制作和分发流程;
及省以下用户的气象业务服务内网。
六、技术方案
系统总体架构
六、技术方案
系 统 总 体 信 息 流 程
六、技术方案
系 统 软 件 功 能
六、技术方案
关键技术
• 流程控制的自动化调度处理平台
六、技术方案
关键技术
• 气象资料图形图像生成与处理技术 1. 统一的气象数据格式读取 2. 灵活易扩展的图形图像生成 3. 方便易用的配置框架
六、技术方案
关键技术
• 基于WEBGIS的可视化发布技术
六、技术方案
关键技术
• 移动应用平台
六、技术方案
关键技术
• 运行监控平台
六、技术方案
性能指标
用户访问量
a) 支持同时动态用户(在线用户)数> 2万人 b) 最大支持同时检索和下载资料并发数> 1,000次/秒 c) 年处理业务总量(下载等数据服务操作)>1000万人次
实现国家级业务内网在国家级运行,省级业务内网在省级运行 建立国家级技术指导和研发运行、省级本地特色应用研发和业务运行
形成在统一模式框架下的联合研发机制
在国家级建立气象业务内网开放合作的研发平台,组织和吸引国省级 优秀人才和技术资源共同参与研发工作 在全国统一研发的业务内网服务框架下,省级进行本地化应用并集成 整合省内相应业务产品和管理功能
天擎·湖北Portal网站及用户使用概述
2022年 3月 March 2022Digital Technology &Application 第40卷 第3期Vol.40 No.3数字技术与应用189中图分类号:P409;TP393.09 文献标识码:A 文章编号:1007-9416(2022)03-0189-03DOI:10.19695/12-1369.2022.03.60天擎·湖北Portal网站及用户使用概述湖北省气象信息与技术保障中心 王娟娟 王华 邢丽平气象大数据云平台·天擎湖北是湖北省气象部门最新的核心信息化支撑平台,在该系统中,“天擎·湖北”Portal网站是一个展示资源、开放平台所有资源,并具备一定资源管理能力的气象大数据云平台门户网站。
用户通过Portal网站,不仅可以访问数据资源,还可以使用存储和算法等资源。
本文阐述了“天擎·湖北”Portal网站的用途及用户使用,使用户更清晰地了解并使用“天擎·湖北”系统。
随着湖北省气象业务服务和信息技术的不断发展,全国综合气象信息共享系统(简称“CIMISS系统”)已暴露出气象数据环境支撑应用能力和气象大数据供给不足等缺陷[1]。
基于此需求,2020年,湖北构建了“天擎·湖北”系统,逐步建成了能够支撑省、市、县三级气象业务应用的气象大数据云平台,该系统于2021年开始试运行。
该系统不仅能提供“数算一体”的平台化服务,为全省统一提供共性技术、业务协同能力组件,还能实现平台应用众创发展,使算法集成率达到90%以上。
全部气象数据资源通过“天擎·湖北”进行统一管理,基本实现“一套数据,一次获取,同步共享”、气象数据全覆盖和业务流程集约化的功能。
1 天擎·湖北2017年12月27日,中国气象局发布《气象大数据行动计划(2017-2020年)》,至2020年将气象大数据云平台打造成为气象部门最完备、最权威的在线数据库与数据挖掘应用的云计算平台[2];2020年1月,中国气象局再次明确提出要构建以气象大数据云平台为“云”、气象业务系统为“端”的“云+端”的气象技术体制,实现数据管理、加工处理、应用服务的高度集约[3]。
气象大数据云平台建设方案
物理部署位置选择:最
的城市云中心(无锡、南
近
京等),或者上海超算中心
云化资源池。
气象公有云部署和设想
19 1 9
CIMISS平台与云平台的关系分析
1、应用拆分
CTS
2、应用/WEB上云
国家气象云参考部署架构
天气预报
气象公有云
应用1 应用2 应用3
减灾服务
气象观测
卫星遥感
科研计算
数值预报
国家气象云主中心
同城双活中心 应用2 省级分中心 异地灾备中心 应用1 应用3 省级分中心 省级分中心
国家气象云建设
1个主中心(含北京局) +1个同城灾备中心 +1个异地灾备中心 +30个省级分中心
气象大数据云平台整体解决方案
目录
CONTENTS
1
需求梳理及行业发展趋势 气象行业解决方案 案例分析
2
3
章节 PART
Hale Waihona Puke 01需求梳理及行业发展趋势
气象局新一代信息工程总体技术架构理解
重点解析:总体架构和云架构是衔接-演进的关系
资源整合共享是国家新一代信息工程建设的重点
实施气象信息化行动方案,夯实气象云建设基础
标准体系建设
技术架构 安全标准
公众服务 公众服务 公众服务 公众服务
数据标准 服务标准
国家级相关部门
省市县相关部门
省市县相关部门
省市县相关部门
气象云计算平台网络拓扑架构
气象有私有云资源池
气象有公共服务资源池
气象云内外网数据安全传输
上海气象信息全流程可视化监控系统的设计与实现
上海气象信息全流程可视化监控系统的设计与实现杨礼敏;胡平;王亚东【摘要】主要从建立气象信息流业务的可视化统一集中监控系统,实现对上海气象信息资源和安全、业务和应用,以及数据流转生命周期的智能分析和全面监控.业务和应用监控随时掌握业务流程实时状态信息,对重要业务流程实现分钟级的故障感知能力与部分故障预知、控制能力,有效缩短故障处理时间;数据和资源监控帮助多层次多角度随时了解资源使用情况、数据流转状态与数据热点;数据中心环境监控接入并整合数据中心基础资源运行环境监控,实现基础配套资源和安全态势的实时可视性,资源故障和安全时间随时对接技术人员第一时间处理.【期刊名称】《气象科技进展》【年(卷),期】2019(009)003【总页数】7页(P29-35)【关键词】信息化;全流程;可视化;监控【作者】杨礼敏;胡平;王亚东【作者单位】上海市气象信息与技术支持中心,上海 200030;上海市气象信息与技术支持中心,上海 200030;上海市气象信息与技术支持中心,上海 200030【正文语种】中文0 引言随着信息技术的飞速发展和在气象部门的广泛应用,越来越多以IT技术和气象信息为支撑的业务系统应运而生,并逐渐成为现代气象业务发展的基础,保障各业务系统稳定运行成为信息中心的主要工作内容[1]。
气象业务系统的高可靠性有赖于综合全面的监控和高效运维,为适应这一需求,本文建立气象信息全流程可视化监控系统,该系统是集监控、展示于一体的综合系统,在充分利用原有资源的基础上,收集多源数据,融合异构信息,将大数据分析的方法应用到故障检测中,以动态、直观的方式对处理后的信息进行集中显示,辅助工作人员更加高效的完成运维工作[2]。
1 业务现状与需求分析一体化气象信息与大数据支撑平台涵盖了资源、业务、数据3个主要方面工作,主要承担气象数据的搜集、处理、入库到数据的共享情况,以及气象数据共享平台、高性能计算机、气象监测网络、气象数据服务产品加工制作、网络与安全的支撑。
国家气象中心气象信息共享门户系统技术方案
国家气象中心气象信息共享门户系统技术方案一、引言随着气象科学的发展和信息技术的进步,国家气象中心需要建立一个气象信息共享门户系统,以方便气象信息的实时获取、共享和应用。
本文将提出一个技术方案,以满足国家气象中心的需求。
二、系统架构气象信息共享门户系统的核心是一个集中化的数据管理和共享平台,系统架构如下:1.前端界面:支持多种方式的用户接入,包括网页访问、移动应用等,方便用户获取气象信息。
2.数据采集和处理模块:负责采集气象观测数据、预报数据、卫星遥感数据等,并进行数据质量控制和转换处理。
3.数据存储和管理模块:将采集和处理后的气象数据存储在数据库中,并提供数据备份和恢复机制。
4.数据共享和发布模块:提供数据的实时共享和发布功能,包括实时气象数据、预报产品、气候数据等。
5.数据分析和应用模块:提供气象数据分析和应用的接口,方便用户进行数据处理、模型建立、预测等。
6.安全保护模块:确保系统的数据和用户信息的安全,包括身份验证、访问控制、数据加密等。
7.系统管理模块:提供系统的运行监控、故障处理、用户管理等功能,方便管理员对系统进行管理和维护。
三、关键技术1.数据采集和处理技术:采用自动化的气象观测仪器和卫星遥感设备,实现气象数据的实时采集和处理。
同时,还需要开发数据质量控制算法,确保采集的数据准确可靠。
2. 数据存储和管理技术:选择合适的数据库管理系统(如SQL Server、Oracle、MySQL等),进行气象数据的存储和管理。
此外,还需要开发数据备份和恢复机制,以防止数据丢失。
3. 数据共享和发布技术:采用Web服务技术,提供数据的实时共享和发布功能。
用户可以通过Web界面或API接口,获取实时气象数据和预报产品。
4.数据分析和应用技术:开发气象数据分析和应用的接口,支持用户进行数据处理、模型建立、预测等。
同时,还可以提供一些常用的气象分析和应用工具,方便用户使用。
5.安全保护技术:采用身份验证、访问控制和数据加密等技术,确保系统的数据和用户信息的安全。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
国家气象中心气象信息共享门户系统技术方案1项目概况随着国家气象中心天气预报业务精细化水平的发展,预报产品不断丰富,对外辐射能力不断增强。
现有业务流程中存在的业务系统部署多,业务系统之间彼此独立,数据到产品缺乏统一的管理系统,协调能力不足等问题,已无法满足当前快速发展的现代化天气业务的需求。
气象信息共享门户将在国家气象中心现有业务基础上建立完善业务流转与控制体系,优化中心的预报服务业务流程,提高数据流转和产品利用效率,减少预报服务过程中的人为干预,降低中间环节的复杂度与出错率,增强预报服务协同能力,推进预报和服务业务系统的建设应用,促进天气监视、预报及决策服务平台专业化发展,为国家气象中心现代天气发展及服务能力提升打下良好基础。
同时将建立业务系统规范和数据规范,建立标准化的数据和服务,对预报员、服务人员和业务管理人员身份、权限进行数字化的管理,对国家气象中心主要预报、服务业务系统的运行、数据流转状态等实现实时监视,实现对整个中心业务系统的数据衔接与流转控制,实现对预报员身份信息、准入系统信息、业务监控信息、产品流转状态、任务调度等所有实时信息的显示和统计分析,实现预报产品和服务产品的分发控制,并增强国家气象中心互联网展示气象产品的水平。
2业务需求分析2.1 业务现状分析国家气象中心是全国天气预报的国家级中心,也是世界气象组织亚洲区域气象中心、核污染扩散紧急响应中心,其前身中央气象台,成立于1950年3月1日。
50多年来,国家气象中心有了巨大发展。
国家气象中心的气象服务包括为党中央、国务院和有关政府部门制订指导国民经济发展、组织指挥防灾减灾科学决策所需气象信息的决策气象服务,通过电视、广播、报纸、网站等媒介为公众提供公益气象服务,向国家重点工程、企事业单位趋利避害组织生产所需的专业气象服务,为全国省级气象部门提供指导性气象服务。
国家气象中心建立了针对台风、暴雨、寒潮、高温、沙尘暴、大雾等各类灾害性天气的预报警报系统,开展了0-3天的定量降水预报,4-7天逐日要素滚动预报,10-30 天的延伸期预报;基本形成了警报信息服务、决策气象服务、专业气象服务和专项气象服务等构成的气象服务体系。
国家气象中心业务系统由气象数据平台、气象业务平台、气象产品加工平台及气象数据服务平台组成气象数据平台是国家气象中心实时业务的核心平台,由MICAPS数据系统、决策服务库、气象专题库、气象个例库及预报产品库等组成。
其中MICAPS数据系统包括大院业务单位及省级业务部门传输的实况、卫星、雷达、灾情等气象资料,以及国家气象中心预报台室制作的各种落区预报及服务产品。
气象业务平台是国家气象中心核心业务系统,由MICAPS系统及各类以MICAPS为基础的专业平台:短时临近SWAN平台,短期预报平台,中期延伸期预报平台,台风预报平台、海洋预报平台、农气预报平台及中央气象台文字发布系统等组成。
气象产品加工平台是国家气象中心决策服务及对外服务所需的支撑平台。
主要包括MESIS以及自动出图系统MSPGS,国家气象中心预报产品基本都是通过这两个平台进行加工出图,对外服务。
气象数据服务平台是国家气象中心数据服务平台,主要承担预报数据、预报图像的内部流转及对外发布,保证数据一致性、权威性。
2.2 技术要求2.2.1硬件环境气象信息共享门户系统采用分布式体系结构,多机构成群集系统,并实现负载均衡调度。
已购置并未来投入应用的主要硬件环境如下:1)2 台应用和数据库服务器:2-4 颗Xeon 2GHz CPU ,16-32G 内存,双千兆网卡。
根据业务需要部署LINUX 和WINDOWS 操作系统。
2)存储服务系统:存储容量至少20T。
3)2-4 台Web 及应用服务器:1-2颗Xeon 2GHz CPU ,8-16G内存,双千兆网卡。
根据业务需要部署LINUX 和WINDOWS 操作系统。
2.2.2软件环境1)操作系统:采用异构平台,不同服务器根据实际情况采用LINUX 或WINDOWS 操作系统,客户机采用WINDOWS 操作系统。
2)程序设计语言:LINUX 系统配置JAVA、标准C、C++等程序设计语言与相应的开发工具;WINDOWS 平台配置.NET、VC++、JAVA 等程序设计语言与相应的开发工具。
3)数据库系统及联机分析系统:Oracle 数据库软件产品,从产品的数据容量、稳定性、可靠性、分布式计算等方面均有着同类产品较强的优势,还支持数据仓库、数据挖掘以及联机分析等高级分析功能。
2.2.3研制方法要求严格按照《计算机软件工程规范国家标准》的软件工程化方法进行。
2.3 性能需求考虑性能要求及软件质量要求,保障正常的监测分析服务业务处理逻辑流程,能够最大限度的利用系统的CPU、内存、磁盘资源。
在发生故障时能够尽快恢复系统,保证系统长期、稳定、安全运行。
2.3.1性能要求本软件系统的主要性能要求如下:1)响应时间:非指明要求,指系统对各种用户操作反映的处理时间。
本地查询,系统对用户操作的反映能力原则上不超过0.5 秒;远程查询,应该在1 秒内做出反应;长时间操作需要有进度条指示。
2)平均无故障时间:平均无故障工作时间是衡量系统可靠性的重要指标,要求平均无故障工作时间不低于1000 小时。
2.3.2稳定性与可靠性气象信息共享门户系统是一个重要的业务系统,在软硬件的设计实现上要考虑系统长期运行的稳定性和可靠性。
软件在运行期间,针对任何一个重要操作,都必须具有判断错误的能力,必要时可以进行恢复性操作,否则要发出报警消息,以便于人工干预。
系统部署上线后,系统将进入长期业务运行状态。
因此,无论是计算机硬件系统还是软件系统都必须具有较高的可靠性和故障后快速恢复的能力。
具体要求如下:1)应用软件开发应严格遵循软件工程国、局标的开发、测试和集成规范,制定合理的数据处理、监测服务产品生成和质量检验的调度接口,进行资料质量和产品质量控制,采用作业自动恢复和作业人工补做等措施;2)在支撑平台可靠性的保证下,关键高可用业务系统在3 分钟内恢复运行状态。
2.3.3安全性气象信息共享门户系统不仅是国家气象中心(中央气象台)重要的业务系统,同时又对外提供服务,因此必须具备必要的安全运行措施。
除了在系统上考虑安全性外(如内外网隔离、防火墙等),系统也应提供基于角色(例如:系统管理员、操作员、高级用户、一般用户等)的安全控制策略。
主要包含两个方面的内容:1)业务系统的安全保证性。
即系统的软件成份不会由于自身的故障或失效导致应用系统的其它部分相继失效甚至崩溃的特性(如不正常地持续占用大量CPU、内存、I/O 等计算机资源,导致系统的其它部分无法运行)。
制定完整的故障隔离、规避和恢复策略,确保全系统业务软件运行的正常与安全;2)访问的安全保证性,防止外界或内部用户的非法或恶意访问系统。
为此,必须从访问级别上严格控制不同用户的权限,避免用户越权使用或非法使用系统资源,甚至控制系统操作权力,造成全体系统运行能力下降甚至崩溃。
2.3.4可扩展性和易维护性气象信息共享门户系统的建设是一项长期任务,因此系统应具有较好的可扩展性,便于今后的扩充和改造。
除了要求系统本身具有良好的维护性外,还应当拥有离线的维护环境,以便在不影响正常业务的情况下进行软件的维护工作。
2.3.5易用性气象信息共享门户系统是面向各类应用的业务软件,为适应不同专业用户的要求,软件应该具备方便、友好的操作界面。
此外,部分功能软件自动运行,无需人工干预,运行操作人员仅在系统报警提示的情况下,进行必要的人工干预和故障维修。
所有的故障状态和信息都应自动记录和存储,便于事后的故障对策分析。
3系统解决方案3.1 系统总体设计国家气象中心气象信息共享门户系统提出系统总体建设框架,在结合气象中心业务的实际情况,特别是采取“建立以流程为驱动,以消息通信和服务为中心的业务协同管理”的软件建设思想与实现技术路线情况下,系统总体架构设计对初设提出的总体建设框架进行了具体落实,形成系统总体架构。
(如下图所示)图 2.3.5-1系统总结设计国家气象中心气象信息共享门户系统总体架构正是由于遵循了“建立以流程为驱动,以消息通信和服务为中心的业务协同管理”的方法论和实现路线,由统一业务标准规范和业务驱动机制,由数据资源、业务流程和业务功能的统一规划,由业务模型的开放性和技术无关性,从而保证了整个系统的整体性、集成性应用,保证了互联互通、共建共享,保证了整体框架下业务应用的长远发展和进步,保证了“在立足实际需要,利用现代信息技术和科学管理手段,形成整体性、集成性的互联互通、共建共享应用方面跨上新台阶的同时,为今后的建设和发展开拓广阔的空间”目标的实现,这是国家气象中心气象信息共享门户系统总体架构设计的主要出发点和依据。
3.2 系统功能结构图 2.3.5-1系统功能结构国家气象中心气象信息共享门户系统包括认证与授权管理、业务流程管理、产品制作及管理、用户行为追踪、共享门户及网站六部分构成。
具体描述如下:认证与授权管理分系统包括机构管理、人员管理、基础信息、单点登录、系统日志等功能。
业务流程管理包括流程建模、流程监控、流程分析、监控预警及调度作业;产品制作及管理分系统包括元数据管理、产品归档、产品目录、产品同步、产品传输、数据服务及功能升级。
用户行为追踪分系统包括日志信息采集、日志信息分析、日志信息统计及日志信息查询。
共享门户分系统包括产品长序列、会商支持、站点管理、内容管理、数据服务及全文检索。
网络化气象产品展示包括全新预报天气子网站、专业频道包括海洋频道、台风频道、产品频道。
3.3 系统技术层次架构图 2.3.5-1技术架构整个信息门户系统的技术层次架构分为五个层次,从上至下依次是:展现、服务管理、开发部署平台、数据库和第三方系统,其中安全层贯穿于整个系统层次(见软件构架示意图)。
1.数据库和第三方系统包含了产品共享门户系统所要集成的数据和信息源,这些源包括数据库、MICAPS、MESIS、MIWAPS、MSPEG和NCL。
产品共享系统从这些数据源获取数据进行数据分析,并与之进行交互。
2.开发部署平台:整个产品共享门户系统基于J2EE进行开发,并部署于Oracle的Weblogic Application Server应用服务器系统。
•J2EE:J2EE是一种利用Java平台来解决企业应用方案的开发、部署和管理相关复杂问题的体系结构。
J2EE由于其开放性获得了大量的应用,是当前最主流和应用最广泛的企业应用技术,其最突出的特点表现在其的高稳定性、可靠性和平台无关性。
3.服务管理:在产品共享门户系统和其所要集成的系统之间搭建一个服务管理层,由服务管理层实现门户请求的远程路由和调用。
服务管理的职责在于将第三方系统对外暴露的接口以服务的形式进行打包并进行管理,同时对门户调用暴露出这些编排后的服务。