在线客服
微信扫码
返回顶部
客服

2022数据湖架构开发Hudi 黑马程序员(涵盖HDFS+Spark+Flink+Hive等知识点结合)

饮马黄河 饮马黄河
来源:优课

课程下载

提取码:jwgc
检测百度分享链接是否有效: 检测报错
网盘转存下载
本课程供VIP会员免费学习。
下载途径:共18.4GB,网盘转存下载。

2022数据湖架构开发Hudi 黑马程序员(涵盖HDFS+Spark+Flink+Hive等知识点结合)

课程介绍

为了更好管理数据,出现数据湖DataLake:用来存储大量的原始数据。当下最流行数据湖框架Apache Hudi,使用HDFS存储数据,集成Spark、Flink、Hive等分析数据,逐步在大中型公司中使用,构建湖仓一体化架构。为了让大家更好学习使用Hudi,基于0.9.0版本,推出本套课程,从数据湖概念,到集成Spark和Flink,最后整合实际需求案例,由0到1深入浅出剖析Hudi使用

课程目录

1.Hudi 基础入门篇视频

00--Apache Hudi 课程内容提纲.mp4

01--Hudi 基础入门篇--课程内容大纲和学习目标.wmv

02--为什么要学习Apache Hudi--什么是数据湖DataLake.wmv

03--为什么要学习Apache Hudi--数据仓库和数据湖区别.wmv

04--为什么要学习Apache Hudi--三大流式数据湖框架.wmv

05--为什么要学习Apache Hudi--Hudi 框架基本介绍.wmv

06--为什么要学习Apache Hudi--Hudi 快速发展.wmv

07--Hudi 快速体验使用--编译Hudi 源码.wmv

08--Hudi 快速体验使用--大数据环境准备概述.wmv

09--Hudi 快速体验使用--HDFS 安装部署测试.wmv

10--Hudi 快速体验使用--Spark 安装部署测试.wmv

11--Hudi 快速体验使用--启动spark-shell添加jar包.wmv

12--Hudi 快速体验使用--模拟产生乘车Trip数据.wmv

13--Hudi 快速体验使用--保存数据到Hudi表.wmv

14--Hudi 快速体验使用--查询Hudi表数据.wmv

15--Hudi 快速体验使用--初识Hudi数据管理.wmv

16--基于IDEA编程使用Hudi--构建Maven模块环境.wmv

17--基于IDEA编程使用Hudi--模拟数据并插入insert.wmv

18--基于IDEA编程使用Hudi--快照查询及日期时间过滤查询.wmv

19--基于IDEA编程使用Hudi--更新数据update.wmv

20--基于IDEA编程使用Hudi--增量查询Incremental数据.wmv

21--基于IDEA编程使用Hudi--删除数据delete.wmv

22--Apache Hudi 核心概念剖析--三大基本概念.wmv

23--Apache Hudi 核心概念剖析--数据计算三种模型.wmv

24--Apache Hudi 核心概念剖析--Hudi数据三种查询类型.wmv

25--Apache Hudi 核心概念剖析--COW 类型表.wmv

26--Apache Hudi 核心概念剖析--MOR 类型表.wmv

27--Apache Hudi 核心概念剖析--数据写操作流程.wmv

28--Hudi 基础入门篇--课程内容内容总结和作业.mp4

2.Hudi 应用进阶篇(Spark 集成)视频

01--Hudi 应用进阶篇之集成Spark--课程内容大纲和学习目标.wmv

02--大数据环境准备--离线tar安装MySQL 5.7.wmv

03--大数据环境准备--安装部署Hive.wmv

04--大数据环境准备--安装部署Zookeeper.wmv

05--大数据环境准备--安装部署Kafka.wmv

06--滴滴运营数据分析--业务数据调研和需求分析.wmv

07--滴滴运营数据分析--构建开发环境.wmv

08--滴滴运营数据分析--工具类SparkUtils.wmv

09--滴滴运营数据分析--日期转换星期测试.wmv

10--滴滴运营数据分析--业务数据加载存储--思路分析.wmv

11--滴滴运营数据分析--业务数据加载存储--加载CSV数据.wmv

12--滴滴运营数据分析--业务数据加载存储--数据ETL转换.wmv

13--滴滴运营数据分析--业务数据加载存储--保存Hudi表.wmv

14--滴滴运营数据分析--指标查询分析--加载Hudi表数据.wmv

15--滴滴运营数据分析--指标查询分析--订单类型统计.wmv

16--滴滴运营数据分析--指标查询分析--订单时效性统计.wmv

17--滴滴运营数据分析--指标查询分析--订单交通类型统计.wmv

18--滴滴运营数据分析--指标查询分析--订单价格区间统计.wmv

19--滴滴运营数据分析--指标查询分析--订单距离区间统计.wmv

20--滴滴运营数据分析--指标查询分析--订单星期统计.wmv

21--滴滴运营数据分析--集成Hive查询--创建表和添加分区.wmv

22--滴滴运营数据分析--集成Hive查询--编写SQL指标分析.wmv

23--结构化流写入Hudi--模拟交易订单数据和流程分析.wmv

24--结构化流写入Hudi--流式程序开发.wmv

25--结构化流写入Hudi--订单数据查询分析.wmv

26--结构化流写入Hudi--工具类DeltaStreamer.wmv

27--集成 SparkSQL--快速体验数据CRUD.wmv

28--集成 SparkSQL--创建表方式.wmv

29--集成 SparkSQL--MergeInto语句.wmv

30--Hudi 应用进阶篇之集成Spark--课程内容内容总结和作业.wmv

3.Hudi 应用进阶篇(Flink 集成)视频

01--Hudi 应用进阶篇之集成Flink--课程内容大纲和学习目标.wmv

02--快速入门使用--Flink Standalone 集群安装部署.wmv

03--快速入门使用--集成方式及启动SQL Client.wmv

04--快速入门使用--创建表及数据插入更新查询.wmv

05--快速入门使用--流式查询StreamingQuery.wmv

06--Flink SQL Writer--Flink SQL集成Kafka.wmv

07--Flink SQL Writer--构建Maven开发环境.wmv

08--Flink SQL Writer--采用Flink SQL编程加载Kafka数据.wmv

09--Flink SQL Writer--编程实现数据实时增量存储Hudi表.wmv

10--Flink SQL Writer--编程实现流式增量读取Hudi表数据.wmv

11--Flink SQL Client 写入Hudi--整体思路流程及环境配置.wmv

12--Flink SQL Client 写入Hudi--编写DDL和DML语句数据实时入湖Hudi.wmv

13--Flink CDC Hudi--CDC 概念和类型.wmv

14--Flink CDC Hudi--重新编译Hudi源码集成Flink与Hive.wmv

15--Flink CDC Hudi--开启MySQL binlog和创建表.wmv

16--Flink CDC Hudi--使用Flink CDC创建表及测试.wmv

17--Flink CDC Hudi--创建视图View存储中间数据.wmv

18--Flink CDC Hudi--插入视图数据插入Hudi表.wmv

19--Flink CDC Hudi--使用Hive查询Hudi表数据.wmv

20--Flink CDC Hudi--Hudi管理命令hudi-cli使用.wmv

21--Hudi 应用进阶篇之集成Flink--课程内容内容总结和作业.wmv

资料-2022数据湖架构开发Hudi

HudiLinux.zip

第1部分、Hudi 基础入门篇-资料.rar

第2部分、Hudi 应用进阶篇(Spark 集成)-资料.rar

第3部分、Hudi 应用进阶篇(Flink 集成)-资料.rar

相邻课程

阅读 下载数 51
饮马黄河
饮马黄河
认证课程发布者
关注发布者
饮马黄河
饮马黄河
认证课程发布者
课程数
粉丝数
关注发布者
栏目专题
user-avatar
个人创业
创业者创造出更大经济或社会价值的过程。
user-avatar
股票
股票是资本市场的长期信用工具,可以转让,买卖。
user-avatar
物理同步
物理是当今最精密的一门自然科学学科。
user-avatar
媒体引流
新媒体玩法太多,有很多方法都可以实现引流。
user-avatar
品牌营销
通过市场营销使客户形成对企业品牌和产品的认知过程。
名人推荐
user-avatar
傅佩荣
著名国学研究大师。
user-avatar
余世维
余世维被称为“华人管理教育第一人”。
user-avatar
祝文欣
品牌管理机构首席培训讲师、管理顾问。
user-avatar
翟鸿燊
国学实践应用专家,经济与文化学者。
user-avatar
刘强东
京东集团董事局主席兼首席执行官。