Hadoop大数据系统理论与实践-赵
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
八、报名方式:
请各有关部门统一组织本地区行政、企事业单位报名参加会议,各单位也可直接报名参加。
报名回执表请传真或 Email 至会务处。 九、联系方式:
联系人: 赵 刚
电 话:010-57617216 13161664511
传 真:010-57617216
E_mail:zgygzhao@vip.163.com
目。而在大数据领域的众多技术中,最受关注的是衍生于开源平台的 Hadoop 生态系统。Hadoop 从
2006 年诞生至今已经超 8 年时间。2014 年,整个生态系统变得比以往更加丰富,无论是在开源 领域,商业软件厂商或是硬件厂商,都开始推出基于 Hadoop 的相关产品。Hadoop 之所以受到如 此的关注,主要原因在于它支持用户在低价的通用硬件平台上实现对大数据集的处理和分析,在 某种程度上替代了传统数据处理所需的昂贵的硬件设备和商业软件。中国管理科学研究院人才战
和提高。
二、 目标收益
本课程将为大家全面而又深入的介绍 Hadoop 平台的构建流程,涉及 Hadoop 系统基础知识,
概念及架构, Hadoop 实战技巧,Hadoop 经典案例等。
通过本课程实践,帮助学员对 Hadoop 生态系统有一个清晰明了的认识;理解 Hadoop 系统
适用的场景;掌握 Hadoop 等初、中级应用开发技能;搭建稳定可靠的 Hadoop 集群,满足生产
中国管理科学研究院人才战略研究所
人才所[2015]第(06)号
“Hadoop 大数据系统理论与实践”高级培训班通知
一、培训特色 当前,我国已经进入大数据时代,在这样的时代背景下,Hadoop 的应用也逐渐深入,正在
从互联网企业,逐渐拓展到电信,金融,政府,医疗这些传统行业。目前 Hadoop 应用场景已广
“ Hadoop 大数据系统理论与实践” 培训班报名回执表
(传真电话: 010-57617216)(此表复制有效)
单位名称 通讯地址 联系人 学员姓名 职务
性别
电话 邮箱
邮编 传真
联系电话及手机
培训地点
培训费
万仟佰拾元
汇款日期
□ 银行转帐
开户名:盛科博文(北京)文化发展有限公司 缴费方式
开户行:招商银行股份有限公司北京万寿路支行Hale Waihona Puke Baidu
泛应用于日志存储、查询和非结构化数据处理等大数据应用领域,随着 Hadoop 技术的不断成熟 以及生态系统相关产品的完善,包括 Hadoop 对 SQL 不断加强的支持,以及主流商业软件厂商对 Hadoop 支持的不断增强,必定会带动 Hadoop 渗透到越来越多的应用场景中。
2014 年是中国大数据的应用落地年,越来越多的行业用户开始重视并启动大数据相关的项
略研究所特举办“hadoop 大数据系统理论与实践”高级培训班;并由盛科博文(北京)文化发展
有限公司具体承办。
本课程将分别从理论基础知识,系统搭建以及应用案例三方面对 Hadoop 进行介绍。
本课程采用循序渐进的课程讲授方法,首先讲解 Hadoop 系统基础知识,概念及架构,之后
讲解 Hadoop 实战技巧,最后详尽地介绍 Hadoop 经典案例,使培训者从概念到实战,均会有收获
统
实践:编写运行在 YARN 上的应用程序
MapReduce 基本原 理论:介绍计算框架 MapReduce 基本原理与架构
理与架构,编程实践 实践:手把手介绍如何用 java、C++、php 等语言编写
第三天 (分布式计
算)
(涉及多语言编程) MapReduce 程序
Spark 计算框架
理论:介绍 Spark 背景,使用以及应用案例 实践:使用 spark 进行数据分析
证书费等)住宿可统一安排,费用自理。
2、参加此次培训并通过考试的学员,可以获得:中国管理科学研究院人才战略研究所《hadoop
大数据处理工程师》人才证书。
3、经培训考试合格后颁发中华人民共和国工业和信息化部 《大数据处理工程师》职业技术水平
证书。
注:请学员带二寸免冠蓝底照片 2 张(背面注明姓名)、身份证复印各两张。
YARN 架构设计与实现原理》(http://item.jd.com/11226135.html )书籍作者,两本书销量超过 20000
本,是 Hadoop 领域非常权威的畅销书,书籍主页:http://hadoop123.com/。
董老师是资深 Hadoop 技术实践者和研究者,拥有超过 5 年的 Hadoop 平台研发经验,曾参
Hadoop 与 Spark 案例分析
介绍两个实际应用案例,分别是互联网日志分析系统和电 子商务商品推荐系统
2
六、讲师简介
董西成(个人博客:http://dongxicheng.org/ ),《Hadoop 技术内幕:深入解析 MapReduce 架构
设计与实现原理》(链接:http://item.jd.com/11359215.html )和《Hadoop 技术内幕:深入解析
主办单位:
承办单位:
中国管理科学研究院人才战略研究所 2015 年 03 月 20 日
盛科博文(北京)文化发展有限公司 2015 年 03 月 20 日
1
五、培训内容 主题
授课内容
1. 大数据层级结构
介绍大数据系统基本架构与流程
2. Hadoop 生态系统概述以及版本演化
大数据架构概述 概要介绍 Hadoop 生态系统及其版本演化历史,并给出
环境的标准;了解和清楚大数据应用的几个行业中的经典案例。
三、时间地点
2015 年 4 月 24 日——2015 年 4 月 27 日 北京
(第一天报到,授课三天)
四、培训对象 各类 IT/软件企业和研发机构的软件架构师、软件设计师、程序员。对于怀有设计疑问和问题,
需要梳理解答的团队和个人,效果最佳。
与商用 Hadoop 原型研发,以及分布式日志系统、全网图片搜索引擎、Hadoop 调度器等项目的设
计与研发;曾在中国云计算大会(CieCloud),世界软件大会(WOT)等担任主持人和培训讲师;
目前就职于美国某著名视频公司,从事 Hadoop 及 Spark 平台相关的研发工作。
七、培训费用:
1、培训费¥RMB:3900 元/人(含报名费、培训费、教材资料费、场地费、午餐费、会议注册费、
hadoop 版本选择建议。
第一天
3. Spark 生态系统概述
(大数据架
概要介绍 Spark 生态系统及其特点,并与 Hadoop 对比
构基础)
介绍如何使用 flume 和 sqoop 两个系统将外部流式数据
数据收集系统 (比如网站日志,用户行为数据等)、关系型数据库(比
Flume 与 Sqoop 如 MySQL、Oracle 等)中的数据导入 Hadoop 中进行分析
(分布式存
HDFS 与 HBase 2. HBase 原理,基本架构与案例分析
储和资源管
理论:介绍 HBase 应用场景、原理和架构,介绍几个 HBase
理)
典型应用案例,包括互联网应用案例和银行应用案例。
实践:如何使用 HBase
资源管理和调度系 理论:介绍 YARN 应用场景、基本架构与资源调度
和挖掘
Hadoop 环境搭 建(上机操作)
设计搭建搭建 HDFS, MapReduce 和 YARN 等系统的环境
1. HDFS 2.0 原理、特性与基本架构
理论:介绍 HDFS 2.0 原理与架构,并与 HDFS 1.0 进行对
比。介绍 HDFS 2.0 新特性,包括快照、缓存、异构存储
第二天
大数据存储系统 架构等
□会场交费
帐 号:110911913610801
另交费项目:
参会单位盖章:
是否需要住宿: 口是 口否
参会学员签名:
2015 年 月 日
感兴趣的内容:
3
4