在线客服
微信扫码
返回顶部
客服

Hadoop大数据开发技术入门

乐在其中 乐在其中
来源:优课

课程下载

提取码:xb5t
检测百度分享链接是否有效: 检测报错
网盘转存下载
本课程供VIP会员免费学习。
下载途径:共1.15GB,网盘转存下载。

课程介绍

Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)和(Google MapReduce的开源实现)为核心的

Hadoop为用户提供了系统底层细节透明的分布式基础架构。HDFS的高容错性、高伸缩性等优点允许用户将Hadoop部署在低廉(low-cost)的硬件上,形成分布式系统;

MapReduce分布式编程模型允许用户在不了解分布式系统底层细节的情况下并发并行应用程序。所以用户可以利用集群的Hadoop轻松地组织计算机资源,

从而搭建自己的分布式计算平台,并且可以充分利用集群的计算和存储能力,完成海量数据的处理。

Hadoop是一个开源框架,可编写和运行分布式应用处理大规模数据。分布式计算是一个宽泛并且不断变化的领域。

方便:Hadoop运行在由一般商用机器构成的大型集群上,或者云计算服务上,比如EC2。

健壮:Hadoop致力于在一般商用硬件上运行,其架构假设硬件会频繁失效,Hadoop可以从容地处理大多数此类故障。

可扩展:Hadoop通过增加集群节点,可以线性地扩展以处理更大的数据集。

简单:Hadoop允许用户快速编写高效的并行代码。

Hadoop框架的核心是HDFS和MapReduce。其中 HDFS 是分布式文件系统,MapReduce 是分布式数据处理模型和执行环境。掌握了这两部分,也就掌握了Hadoop最核心的东西。

课程目录

课时1Hadoop起源介绍.mp4

课时2Hadoop生态圈介绍.mp4

课时3Hadoop基本组件介绍.mp4

课时4Hadoop组成框架介绍.mp4

课时5Hadoop安装.mp4

课时6Eclipse环境搭建.mp4

课时7HDFS组件及备份机制介绍以及读写文件流程介绍.mp4

课时8Shell命令介绍.mp4

课时9HDFS Java API介绍(一).mp4

课时10HDFS Java API介绍(二).mp4

课时11HDFS新特性介绍.mp4

课时12YARN组件介绍以及YARN框架上job执行流程介绍.mp4

课时13MR编程模型总体介绍.mp4

课时14Shuffle阶段Map端执行流程介绍.mp4

课时15Shuffle阶段Reduce端执行流程介绍.mp4

课时16WordCount案例总体介绍.mp4

课时17MapReduce中数据类型介绍.mp4

课时18MR中自定义数据类型编写.mp4

课时19案例介绍以及类的编写.mp4

课时20Shuffle组件Partitioner自定义介绍.mp4

课时21Shuffle组件Combiner以及Grouping自定义介绍.mp4

课时22二次排序实现.mp4

课时23顺序式MR组合任务介绍.mp4

课时24依赖关系组合式MR任务介绍.mp4

课时25链式MR任务介绍.mp4

课时26MapSideJoin介绍.mp4

课时27ReduceSideJoin介绍.mp4

课时28半连接介绍.mp4

课时29倒排索引实现.mp4

相邻课程

阅读 下载数 30
乐在其中
乐在其中
认证课程发布者
关注发布者
乐在其中
乐在其中
认证课程发布者
课程数
粉丝数
关注发布者
栏目专题
user-avatar
品牌营销
通过市场营销使客户形成对企业品牌和产品的认知过程。
user-avatar
高考语文
语文是基础教育课程体系中的一门重点教学科目,其教学的内容是语言文化,其运行的形式也是语言文化。
user-avatar
唱歌教学
唱歌是有节奏的音调发出美妙的声音,给人以享受。
user-avatar
无货源电商
无货源开店不用囤货、节省成本、只卖爆款专注店铺数据。
user-avatar
魔术
魔术是能够产生特殊幻影的戏法。
名人推荐
user-avatar
冯晓强
被称为营销奇才,华人NLP权威实战派导师。
user-avatar
陈安之
中国著名的成功学演讲大师。
user-avatar
李践
誉为中国“新赢利模式之父”。
user-avatar
林伟贤
著名成功学励志教育专家。
user-avatar
柳传志
中国联想控股、联想集团创始人。