大数据基础知识入门
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
大数据基础知识入门
大数据价值 03 大数据概念、特性、由来
01 大数据应用举例
04
02
Hadoop 技术介绍
大数据概念、特性、由来
Hadoop技术介绍
val spark = new SparkContext(master, appName, [sparkHome], [jars]) val file = sc.textFile("hdfs://...")
val word = file.flatMap(_.split(","))
val wordOne = word.map((_,1))
val wordCounts = wordOne.reduceByKey(_+_)
wordCounts.saveAsTextFile("hdfs://...")
大数据的价值
大数据的应用
谢谢观看