星环科技大数据方案
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
9
Transwarp Data Hub产品架构图
Transwarp Manager
Inceptor
PL/SQL批处理 交互式分析
Discover
数据挖掘 机器学习
Hyperbase
NoSQL数据库 搜索、图计算
Stream
流处理 引擎
率先通过100TB TPC-DS测试 性价比是传统数仓几十倍
高性能,低成本
2.性能超群
率先进入复杂数据分析的百TB时代
3.唯一支持分布式事务处理
• 保证事务处理的ACID • BEGIN TRANSACTION/COMMIT/ROLLBACK语 法进行事务处理
(98%)
• 业界唯一支持DB2 SQLPL(90%) • 业界唯一支持Teradata 存储过程 (80%) • 帮助用户零成本迁移传统应用
Apache Projects
2017/9/25
www.transwarp.io
10
数据仓库分析能力100TB测试
星环已处于新兴技术公司中的领先地位
单机 计算并行 计算分布 数据、计算均分布化
MPP数据库 过去的优势 高性能 SQL支持完整(SQL92/SQL99) 工具全 主要弱点
数据重分布
Βιβλιοθήκη Baidu
3000
星环科技大数据方案
——打造世界领先的大数据引擎
2017/9/25
www.transwarp.io
1
1
公司简介
2017/9/25
www.transwarp.io
2
公司概况
目前已完成B轮融资,A+B共融资2.55亿元。 目前星环科技大数据团队有200余人 上海、北京设有分公司 10余处办事处:广州、沈阳、天津、济南、西安、南京、 武汉、长沙、福州等 新增纽约、休斯顿办事处 80%的员工为研发工程师 以博士硕士为主,60%以上为硕士
应用标准化
自定义 应用
Transwarp Operating System
唯 一
一 家 上 榜 的 中 国 公 司
+
远 见
者
星环科技
“Transwarp is probably the coolest #Hadoop company even you've never heard of transwarp.io.” --Nick Heudecker, Gartner分析师
500
0
1TB
10TB
30TB
100TB
星环Hadoop集群已经可以在生产环境中 部署1000+节点,处理20PB+的数据
www.transwarp.io
2017/9/25
11
星环技术六大核心优势
1.支持最全SQL,唯一支持PL/SQL
• 支持99%的SQL 2003语法 • 业界唯一支持Oracle PL/SQL
• 帮助用户零成本将传统业务逻辑变成
流应用
统一Hadoop集群 • 多租户数据 不搬家,可用不可见
2017/9/25
www.transwarp.io
12
Transwarp Operating System云操作系统
1.开发、测试和部署采用统一的docker容器镜像; 2.一次开发,到处部署; 3.采用微服务架构构造大型应用,敏捷开发,按需部 署
•
两阶段封锁协议可保证事务的完全可序
列化
• 多版本(快照)隔离可以保证只读事务的 高并发性
4.业界唯一分布式流式SQL
发效率
5.丰富的数据挖掘和机器学习算法
6.安全无忧
• • 用户管理、资源权限管理 表级、行级、主题、单元格数据权限
• 降低流应用开发门槛,提高流应用开
• 针对性的优化让StreamSQL比编程开 发流应用性能更高
Transwarp Inceptor’s Performance TPC-DS Execution Time for 99 Queries (in minutes)
2500
Test environment:
•29 worker nodes •2 CPUs, 12 Cores, E5-2620 v2 •96GB memory •Network: 2 X 1Gbps 1500 •Disks: 12 X 3TB
Guardian
安全管控
支持SQL 2003和存储过程 业界唯一支持增删改查和事务的ACID
实 时 同 步
兼容性,易用性
(内置Transwarp Extension)
资源管理 YARN
批处理
Pig
批处理框架
MapReduce2
工作流
Oozie
交互分析
Zeppelin
交互工具
HUE
Data Alive
2017/9/25
www.transwarp.io
5
星环科技典型案例 (落地案例最多)
金融(16+)
银行、保险、证券
移动、联通、电信 山东、辽宁、浙江等 国网+南网 电商+CDN 工商+税务 EMS 华数+卫视
电信运营商(20+) 交通公安(30+)
能源
互联网 政府 物流快递 广播电视
团队来自Intel、谷歌、微软、BAT、EMC 3
2017/9/25
www.transwarp.io
发展历程
2017/9/25
www.transwarp.io
4
全球最具有前瞻性的大数据厂商
六
大 Hadoop 三 年 内 数 据 仓 库 象 限 最 具
发 行 版 厂 商 之 一
20 0
落 地 案 例
(内置Transwarp Erasure Code) Elastic Search
优化存储 HDFS
全文搜索
Zookeeper
协作服务
数据集成
Sqoop
日志采集
Flume
消息队列
Kafka
经过200+案例证明的可靠性,可恢复 性,可用性,安全性
高安全,可信赖
Transwarp Proprietary
2000 1000
容错性
扩展性
Transwarp 最新进 展 总体性能超越MPP 完整支持SQL2003,以及PL/SQL扩展 支持主流传统BI/ETL工具及新兴分析工具 固有优 势 数据无需重分布,不易受数据倾斜影响 Map/Reduce和Spark具备容错调度机制 性能近乎线性扩展(星环部署有600个节点集群)
2017/9/25
www.transwarp.io
6
我们的部分客户
2017/9/25
www.transwarp.io
7
产品简介
2017/9/25
www.transwarp.io
8
产品家族
TDH 大数据平台
专业服务&生态系统
TOS PaaS云平台
TxData 超融合一体机
2017/9/25
www.transwarp.io