大数据与大数据技术PPT课件

2019/11/3
22
IoT 解决方案
You have devices on the network edge…
Basic Sensors Intelligent Devices
that provide you data…
Table Storage Blob Storage
SQL Databases
音智达
3
公司概况
专注于分析预测与行业应用的的大数据公司
北京 青岛
上海
深圳
新加坡
雅加达
业务1 业务2
提供基于大数据技术的预测性分析及商务智能解决方案
• 300+ 技术服务人员 • 端到端的大数据平台 • 数据集成、数据挖掘与预测性分析、高级分析 • 企业级大数据仓库、企业绩效管理、商务智能
提供全球顶尖的大数据软件产品
全部基于唯一Hadoop集群内，统一存储统一计算
减少数据传输迁移的同步问题 维护便捷：一套集群,维护简单 扩展性：无限扩展 线性提升
便捷的开发及报表展现工具
图形化 ETL，数据挖掘开发 便捷报表展现分析工具 建模过程100% 用户参与 IT基础架构与用户数据准备、探查、分析、预测分离
数据 集市
2002
数据仓库 绩效管理
2019/11/3
5
主要客户
汽车制造 · 电子产品及家电 · 快消零售 · 医药与生命科学 · 航空与物流 · 高科技制造业 ·金融及其他
2019/11/3
பைடு நூலகம்
6
大数据软件产品
以
HadooHpa do op
以
Text here
为
核
心
为的 大
流计算
机器学习
核数
心的大数据据 产 品 系 列
Hadoop 核心层
图形化数据分析 智能搜索
11
大数据技术的顾虑
技术更迭过快 开源产品成熟度 开发效率 与现有架构的关系 运维与安全
大数据平台计算框架
Y
SQL
A R
N
传统数仓功能
非结构化流式挖掘分析
DATA PLATFORM(HDFS)
软件架构 （举例）
数据安全以及认证（Portal集成） 管理控制台 （CloudEra、Talend、KNIME）
• 大数据平台、数据集成与准备工具、开源开发技术 • 自助式分析工具、数据可视化工具
业务3
大数据SaaS应用和DaaS服务
• 基于云平台的软件即服务大数据应用 • 为企业提供全面的数据服务
2019/11/3
4
发展历史
至今
大数据技术 大数据应用 分析预测 数据挖掘 数据即服务
14年来，
我们与数俱进
高级分析 数据可视化 看板管理 商务智能2.0
2019/11/3
19
大数据团队组织建设
内部团队与专业伙伴紧密合作
大数据管理员
数据科学家 Evan
数据与业务的结合
咨询团队
大数据开发团队
业务人员 技术平台支持
2019/11/3
20
大数据技术应用
2019/11/3
Advanced Analytic Services
音智达
21
Internet of Customers and Internet of Things
灵活数据准备
SQL in Hadoop 数据挖掘与预测
S Q L（ODBC、 API：Java, JDBC、、。NET） C/++, Python
前端应用
报表
下游系统 外部应用
用工具取代代码作坊
MapReduce Performance
(runs on disk)
Spark Performance
音智达
9
Hadoop技术的发展
物联网应用需要将Hadoop变为一个高性能的分析平台 需要Hadoop不光能存储数据，更要能够处理计算数据
2019/11/3
10
基于大数据技术的数据分析处理
SQL 分析
时间、用户、地理位置、 事件 等标签
挖掘预测
2019/11/3
辅助技术：
Kafka, HBase, Cassandra, Accumulo
Vortex
产
品
SQL on Hadoop
数据集成与准备
数
开源开发技术
据
可
视
化
Statistica
数据挖掘
云
2019/11/3
7
HEAD竞LIN争E优势
拥有多元化的数据科学家团 队和十余年的数据分析经验。 经十余年自主开发的IP打造 数据行业领先的技术优势。
数据
创新
追踪吸收和引进行业内最先 进的技术，产品和应用经验。 世界顶尖数据技术公司在中 国地区的首选合作伙伴。
Advanced Analytic Services
音智达
专注于分析预测与行业应用的的大数据公司
虞强 2016.10
议程 公司简介 大数据与大数据技术 大数据技术应用 大数据案例分享 问题讨论
2019/11/3
2
公司简介
2019/11/3
公司概况&发展历史 主要客户&大数据产品
Advanced Analytic Services
20X (ruFnsains-mteemr ory &
on disk)
One Click
同时处理实时与批次
实时，流数据
推荐引擎
转换
Spark Streaming/Kafka
清洗
流式处理 治理
批次处理
Spark
转换
清洗
数据库，文件，批次数据
治理
数据流 输出
HDFS 文件
基于用户数据理解地模型预测
图形化数据准备挖掘 运用Spark Mlib 等进行计算 结果回写入Impala或者HIVE
非结构化数据为存储的新型SQL
基于落地HDFS的文件或HBASE进行SQL建表解析 提供工业MPP级别查询性能 线性可扩展 标准JDBC SQL界面，直连BO，Tableau ，
Qlikview, MSTR等报表工具
技术方案：特点小结
基于开源系统的成熟商用插件方案
部署简便 提高开发效率 降低实施风险 基于内存的计算 性能优异
在一大批竞争行业（汽车、 制药、快消、家电、物流等） 内拥有深厚的客户基础和众 多行业成功案例。
经验
融合
追求行业业务能力和技术能力的 融合以及企业系统架构与解决业 务问题间的平衡，具有扎实的项 目实施能力。
2019/11/3
8
大数据与大数据技术
2019/11/3
Advanced Analytic Services
Plant Floor Things
Back Office Supply Chain
Things
Things
DocumentDB External Storage
that you that enable you to understand,cahpapnlgye your rules, modelbsuasnindess… more…