【智慧城市与智能交通中心】大数据平台介绍

智慧城市与智能交通研究中心大数据平台 中国物联网研究发展中心 中国科学院物联网研究发展中心 中国科学院电子研究所 简介 本平台提供智慧城市海量数据的分布式传输、存储和分析解决方案。以低廉和高可靠的方式为用户提供强大的数据存储和计算能力的同时，对数据仓库进行分析与挖掘，形成应用的知识库和信息库，从而对上层的应用系统提供数据支持。

数 据 平 台 感知设备（系统） 业务系统 数据源层 数 据 存 储 系 统 分布式文件系统 分布式NOSQL 数据库 数据库数据 点击流日志 K-V 数据 关系型数据 文档数据 数 据 仓 库 统一化格式数据 聚合数据 多维数据模型 业务模型 数据服务应用接口 应 用 层 数据挖掘 分布式计算系统 报表系统 即席查询 数据分析 分布式计算系统 分布式数据库系统 基础设施资源整合管理系统 分布式文件系统

3 2 1

4 数据仓库

5 对底层的基础设施资源进行资源整合与管理，包括网络资源、存储资源以及计算资源。通过虚拟化与分布式管理技术，实现资源池的

统一管理、调用、分配。

存储结构化数据、海量非结构化文件数据以及海量结构化流式数据，

为各项应用提供存储与数据支撑。

提供经优化后的MapReduce 与MPI 的多种计算模型，并提供调度和

管理功能。大数据平台将来自数据源的多元异构信息组织起来，形

成统一化标准数据，方便进行信息共享和数据处理。

存储海量文件，提供超高速的吞吐率、提供横向扩展功能，为所有

存储系统提供底层支持。 提供面向主题的通用数据存储系统。为用户管理决策提供数据支撑。02 03 04 01 智慧交通：交通分析、交通视频

分析。

智慧城市：城市数据存储、汇聚、

整合。

智慧医疗：多源异构数据的整合、

分析、挖掘。

智慧安防：超大规模数据的快速

检索、异常行为发现。

应用场景

平台组成

分布式存储系统：支持单集群百亿文件存储。支持软RAID 压缩，在不减少可靠性的前提下，大大减少数据冗余。 分布式数据库：支持千亿级数据的存储和检索功能，百亿级容量下，毫秒级检索响应。 分布式计算系统：支持MapReduce 与MPI 等计算任务的混布，支持内存级Shuffle 过程。 数据仓库：支持多数据源数据接入，支持TB 级数据容量，并提供基础的类SQL 检索。 数据分析与挖掘：支持多种分析挖掘工具，支持大规模数据的挖掘。

平台优势