黑马程序员Hive最新全套教程，大数据Hive数仓开发精讲到企业级实战应用-06--Hive表数据优化--小文件场景、ORC索引介绍、ORC矢量化查询（上）-网易公开课

已购课程

个人中心 

内容中心

 关注我们

进入关怀模式

APP下载

反馈

06--Hive表数据优化--小文件场景、ORC索引介绍、ORC矢量化查询（上）

867 播放

下载

手机看

登录后可发评论

评论沙发是我的～

选集(164)

自动播放

[1] 01--数据仓库基础理论--数仓概...

1638播放

05:21

01--数据仓库基础理论--数仓概念

[2] 02--数据仓库基础理论--场景互...

1525播放

05:41

02--数据仓库基础理论--场景互动：数仓为何而来（上）

[3] 02--数据仓库基础理论--场景互...

786播放

05:43

02--数据仓库基础理论--场景互动：数仓为何而来（下）

[4] 03--数据仓库基础理论--数仓主...

544播放

08:56

03--数据仓库基础理论--数仓主要特征

[5] 04--数据仓库基础理论--OLT...

1141播放

07:46

04--数据仓库基础理论--OLTP、OLAP系统

[6] 05--数据仓库基础理论--数据仓...

993播放

03:55

05--数据仓库基础理论--数据仓库、数据库区别

[7] 06--数据仓库基础理论--数据仓...

1020播放

03:52

06--数据仓库基础理论--数据仓库、数据集市区别

[8] 07--数据仓库基础理论--数仓分...

639播放

06:59

07--数据仓库基础理论--数仓分层思想与架构（ODS、DW、DA）（上）

[9] 07--数据仓库基础理论--数仓分...

787播放

07:09

07--数据仓库基础理论--数仓分层思想与架构（ODS、DW、DA）（下）

[10] 08--数据仓库基础理论--ETL...

750播放

06:24

08--数据仓库基础理论--ETL、ELT

[11] 09--场景分析案例--美团点评酒...

1439播放

09:49

09--场景分析案例--美团点评酒旅数仓建设实践

[12] 10--Apache Hive--...

740播放

09:43

10--Apache Hive--概述--是什么，做什么，和Hadoop关系

[13] 11--Apache Hive--...

1315播放

06:01

11--Apache Hive--场景案例--如何模拟实现Hive的功能（重要）（上）

[14] 11--Apache Hive--...

957播放

06:00

11--Apache Hive--场景案例--如何模拟实现Hive的功能（重要）（下）

[15] 12--Apache Hive--...

787播放

05:39

12--Apache Hive--架构、组件

[16] 13--Apache Hive--...

1303播放

05:12

13--Apache Hive--数据模型（库、表、分区、分桶）（上）

[17] 13--Apache Hive--...

975播放

05:17

13--Apache Hive--数据模型（库、表、分区、分桶）（下）

[18] 14--Apache Hive--...

925播放

05:33

14--Apache Hive--Hive和MySQL的对比

[19] 16--Apache Hive--...

775播放

06:28

16--Apache Hive--安装部署--metastore三种配置方式（内嵌、本地、远程）

[20] 17--Apache Hive--...

619播放

03:56

17--Apache Hive--安装部署--安装前准备工作

[21] 18--Apache Hive--...

1153播放

05:36

18--Apache Hive--安装部署--内嵌模式安装体验（上）

[22] 18--Apache Hive--...

1507播放

05:37

18--Apache Hive--安装部署--内嵌模式安装体验（下）

[23] 19--Apache Hive--...

1012播放

07:24

19--Apache Hive--安装部署--本地模式--MySQL安装

[24] 20--Apache Hive--...

1010播放

07:02

20--Apache Hive--安装部署--本地模式--Hive安装配置

[25] 21--Apache Hive--...

1492播放

06:30

21--Apache Hive--安装部署--远程模式安装与metastore服务启动（上）

[26] 21--Apache Hive--...

827播放

06:34

21--Apache Hive--安装部署--远程模式安装与metastore服务启动（下）

[27] 22--Apache Hive--...

1078播放

06:52

22--Apache Hive--安装部署--Hive、Beeline CLI客户端、HiveServer2服务

[28] 23--Apache Hive--...

998播放

07:04

23--Apache Hive--安装部署--Hive CLI客户端使用（old client）

[29] 24--Apache Hive--...

1089播放

06:32

24--Apache Hive--安装部署--Hive Beeline CLI客户端使用（new client）

[30] 25--Apache Hive--...

687播放

07:05

25--Apache Hive--初体验1--Hive使用起来和MySQL差不多吗？

[31] 26--Apache Hive--...

1018播放

07:16

26--Apache Hive--初体验2--Hive建表时如何才能成功映射文件数据（上）

[32] 26--Apache Hive--...

649播放

07:20

26--Apache Hive--初体验2--Hive建表时如何才能成功映射文件数据（下）

[33] 01--前置：常见的Hive开发方...

1406播放

07:58

01--前置：常见的Hive开发方式与Hive可视化工具IntelliJ IDEA（上）

[34] 01--前置：常见的Hive开发方...

954播放

08:06

01--前置：常见的Hive开发方式与Hive可视化工具IntelliJ IDEA（下）

[35] 02--数据定义语言DDL-概述

1044播放

04:13

02--数据定义语言DDL-概述

[36] 03--HiveSQL-DDL-建...

536播放

03:26

03--HiveSQL-DDL-建表语法树剖析

[37] 04--HiveSQL-DDL-H...

840播放

08:35

04--HiveSQL-DDL-Hive数据类型

[38] 05--HiveSQL-DDL-S...

611播放

06:24

05--HiveSQL-DDL-SerDe是什么、读写文件流程

[39] 06--HiveSQL-DDL-r...

547播放

04:15

06--HiveSQL-DDL-row format语法与lazySimpleSerDe功能

[40] 08--HiveSQL-DDL-L...

1362播放

02:52

08--HiveSQL-DDL-Location修改数据存储路径

[41] 09--HiveSQL-DDL-建...

1389播放

05:09

09--HiveSQL-DDL-建表语法练习1--基础数据类型使用（上）

[42] 09--HiveSQL-DDL-建...

1128播放

05:05

09--HiveSQL-DDL-建表语法练习1--基础数据类型使用（下）

[43] 10--HiveSQL-DDL-建...

1436播放

09:18

10--HiveSQL-DDL-建表语法练习2--复杂数据类型搭配分隔符指定语法使用

[44] 11--HiveSQL-DDL-建...

778播放

05:41

11--HiveSQL-DDL-建表语法练习3--默认分隔符的使用

[45] 12--HiveSQL-DDL-建...

1361播放

03:38

12--HiveSQL-DDL-建表语法练习4--location指定数据存储路径

[46] 13--HiveSQL-DDL-内...

1321播放

05:04

13--HiveSQL-DDL-内部表、外部表（上）

[47] 13--HiveSQL-DDL-内...

1268播放

05:07

13--HiveSQL-DDL-内部表、外部表（下）

[48] 14--HiveSQL-DDL-内...

940播放

03:22

14--HiveSQL-DDL-内部表、外部表之location再探究

[49] 15--HiveSQL-DDL-分...

1126播放

05:15

15--HiveSQL-DDL-分区表-产生背景、概念（上）

[50] 15--HiveSQL-DDL-分...

1436播放

05:24

15--HiveSQL-DDL-分区表-产生背景、概念（下）

[51] 16--HiveSQL-DDL-分...

1093播放

05:41

16--HiveSQL-DDL-分区表-建表语法规则

[52] 18--HiveSQL-DDL-分...

1346播放

07:38

18--HiveSQL-DDL-分区表-多重分区表

[53] 19--HiveSQL-DDL-分...

644播放

09:48

19--HiveSQL-DDL-分区表-动态分区插入

[54] 20--HiveSQL-DDL-分...

1085播放

05:51

20--HiveSQL-DDL-分区表-使用注意事项

[55] 21--HiveSQL-DDL-分...

765播放

07:11

21--HiveSQL-DDL-分桶表-概念、语法、分桶规则

[56] 22--HiveSQL-DDL-分...

995播放

09:26

22--HiveSQL-DDL-分桶表-创建、分桶数据加载

[57] 23--HiveSQL-DDL-分...

599播放

08:18

23--HiveSQL-DDL-分桶表-使用分桶表的好处

[58] 24--HiveSQL-事务表的创...

1200播放

06:59

24--HiveSQL-事务表的创建使用（上）

[59] 24--HiveSQL-事务表的创...

841播放

07:11

24--HiveSQL-事务表的创建使用（下）

[60] 25--HiveSQL-Views...

1191播放

05:45

25--HiveSQL-Views视图的创建使用（上）

[61] 25--HiveSQL-Views...

851播放

05:57

25--HiveSQL-Views视图的创建使用（下）

[62] 26--（Hive3新特性）Hiv...

837播放

09:12

26--（Hive3新特性）HiveSQL-Materialized Views物化视图概念、语法

[63] 27--（Hive3新特性）Hiv...

692播放

09:37

27--（Hive3新特性）HiveSQL-Materialized Views物化视图--查询重写加速机制

[64] 28--HiveSQL-DDL-数...

709播放

08:00

28--HiveSQL-DDL-数据库DDL相关操作

[65] 29--HiveSQL-DDL-表...

1260播放

08:32

29--HiveSQL-DDL-表DDL相关操作(不包括create table)

[66] 30--HiveSQL-DDL-分...

1204播放

05:21

30--HiveSQL-DDL-分区DDL相关操作(包括MSCK修复分区)（上）

[67] 30--HiveSQL-DDL-分...

1253播放

05:28

30--HiveSQL-DDL-分区DDL相关操作(包括MSCK修复分区)（下）

[68] 01--Hive SQL-DML-...

1349播放

05:29

01--Hive SQL-DML-load加载数据功能介绍与语法规则（上）

[69] 01--Hive SQL-DML-...

827播放

05:30

01--Hive SQL-DML-load加载数据功能介绍与语法规则（下）

[70] 02--Hive SQL-DML-...

788播放

05:51

02--Hive SQL-DML-练习：load加载数据（上）

[71] 02--Hive SQL-DML-...

593播放

06:01

02--Hive SQL-DML-练习：load加载数据（下）

[72] 03--(Hive3新特性)Hiv...

995播放

06:54

03--(Hive3新特性)Hive SQL-DML-Load加载数据时动态分区

[73] 04--Hive SQL-DML-...

904播放

05:16

04--Hive SQL-DML-insert+select使用方式（上）

[74] 04--Hive SQL-DML-...

580播放

05:14

04--Hive SQL-DML-insert+select使用方式（下）

[75] 05--Hive SQL-DML-...

945播放

04:28

05--Hive SQL-DML-insert-多重插入Multiple Inserts

[76] 06--Hive SQL-DML-...

693播放

09:21

06--Hive SQL-DML-insert-动态分区插入

[77] 07--Hive SQL-DML-...

1256播放

09:10

07--Hive SQL-DML-insert-导出数据操作

[78] 08--Hive SQL-事务表-...

1199播放

03:51

08--Hive SQL-事务表--事务背景知识

[79] 09--Hive SQL-事务表-...

1452播放

05:51

09--Hive SQL-事务表--实现原理与compact合并（上）

[80] 09--Hive SQL-事务表-...

963播放

06:03

09--Hive SQL-事务表--实现原理与compact合并（下）

[81] 10--Hive SQL-事务表-...

970播放

09:29

10--Hive SQL-事务表--参数设置与使用限制

[82] 11--Hive SQL-DML-...

1086播放

06:36

11--Hive SQL-DML-update和delete操作

[83] 12--Hive SQL-DQL-...

1235播放

07:27

12--Hive SQL-DQL-select语法树、美国Covid19案例数据环境准备

[84] 13--Hive SQL-DQL-...

646播放

07:35

13--Hive SQL-DQL-select-基础语法（上）

[85] 13--Hive SQL-DQL-...

632播放

07:32

13--Hive SQL-DQL-select-基础语法（下）

[86] 14--Hive SQL-DQL-...

1266播放

02:47

14--Hive SQL-DQL-select-查询语句执行顺序梳理

[87] 黑马程序员Hive最新全套教程，大...

1143播放

07:24

[88] 黑马程序员Hive最新全套教程，大...

1475播放

07:27

[89] 16--Hive SQL-DQL-...

665播放

05:58

16--Hive SQL-DQL-select-UNION联合查询

[90] 17--Hive SQL-DQL-...

1425播放

03:25

17--Hive SQL-DQL-select-子查询的使用

[91] 18--Hive SQL-DQL-...

602播放

07:03

18--Hive SQL-DQL-select-CTE表达式（with）

[92] 19--Hive SQL-DQL-...

1095播放

08:51

19--Hive SQL-DQL-join查询-语法规则与案例环境搭建

[93] 20--Hive SQL-DQL-...

589播放

06:09

20--Hive SQL-DQL-join查询-6种join方式（上）

[94] 20--Hive SQL-DQL-...

627播放

06:15

20--Hive SQL-DQL-join查询-6种join方式（下）

[95] 01--Hive CLIs and...

708播放

09:19

01--Hive CLIs and Commands--Hive CLI第一代客户端的使用

[96] 02--Hive CLIs and...

556播放

05:57

02--Hive CLIs and Commands--Beeline CLI第二代客户端的使用

[97] 03--Hive CLIs and...

835播放

05:56

03--Hive CLIs and Commands--属性配置的3种方式（上）

[98] 03--Hive CLIs and...

1043播放

06:09

03--Hive CLIs and Commands--属性配置的3种方式（下）

[99] 04--Hive内置运算符--概述...

653播放

07:47

04--Hive内置运算符--概述、dual空表创建

[100] 05--Hive内置运算符--关系...

758播放

05:22

05--Hive内置运算符--关系运算符

[101] 06--Hive内置运算符--算术...

725播放

05:11

06--Hive内置运算符--算术运算符

[102] 07--Hive内置运算符--逻辑...

1508播放

04:32

07--Hive内置运算符--逻辑运算符

[103] 10--Hive函数入门--内置函...

979播放

06:10

10--Hive函数入门--内置函数--字符串、时间类型函数（上）

[104] 10--Hive函数入门--内置函...

960播放

06:11

10--Hive函数入门--内置函数--字符串、时间类型函数（下）

[105] 11--Hive函数入门--内置函...

1131播放

04:46

11--Hive函数入门--内置函数--数字、集合函数

[106] 12--Hive函数入门--内置函...

1308播放

07:14

12--Hive函数入门--内置函数--条件、类型转换、数据脱敏、反射与加密函数（上）

[107] 12--Hive函数入门--内置函...

935播放

07:12

12--Hive函数入门--内置函数--条件、类型转换、数据脱敏、反射与加密函数（下）

[108] 13--Hive函数入门--用户定...

796播放

06:02

13--Hive函数入门--用户定义函数（UDF、UDAF、UDTF）

[109] 14--Hive函数入门--案例：...

1365播放

03:50

14--Hive函数入门--案例：UDF实现手机号加密--业务需求和开发步骤

[110] 15--Hive函数入门--案例：...

703播放

07:08

15--Hive函数入门--案例：UDF实现手机号加密--代码实现与效果演示（上）

[111] 15--Hive函数入门--案例：...

860播放

07:04

15--Hive函数入门--案例：UDF实现手机号加密--代码实现与效果演示（下）

[112] 16--Hive函数高阶--exp...

854播放

05:31

16--Hive函数高阶--explode函数--功能与使用方式

[113] 17--Hive函数高阶--exp...

989播放

05:13

17--Hive函数高阶--explode函数--UDTFs的语法限制与解决方式（上）

[114] 17--Hive函数高阶--exp...

598播放

05:16

17--Hive函数高阶--explode函数--UDTFs的语法限制与解决方式（下）

[115] 18--Hive函数高阶--lat...

1121播放

08:08

18--Hive函数高阶--lateral view侧视图-原理与使用

[116] 19--Hive函数高阶--UDA...

1448播放

05:52

19--Hive函数高阶--UDAF聚合函数--基础聚合函数使用及注意事项（上）

[117] 19--Hive函数高阶--UDA...

1356播放

06:01

19--Hive函数高阶--UDAF聚合函数--基础聚合函数使用及注意事项（下）

[118] 20--Hive函数高阶--UDA...

1260播放

07:25

20--Hive函数高阶--UDAF聚合函数--增强聚合函数（grouping_sets、cube、rollup）（上）

[119] 20--Hive函数高阶--UDA...

783播放

07:22

20--Hive函数高阶--UDAF聚合函数--增强聚合函数（grouping_sets、cube、rollup）（下）

[120] 21--Hive函数高阶--窗口函...

1406播放

09:30

21--Hive函数高阶--窗口函数--概念与语法规则

[121] 22--Hive函数高阶--窗口函...

544播放

05:31

22--Hive函数高阶--窗口函数--（1）窗口聚合函数（上）

[122] 22--Hive函数高阶--窗口函...

522播放

05:38

22--Hive函数高阶--窗口函数--（1）窗口聚合函数（下）

[123] 23--Hive函数高阶--窗口函...

572播放

04:34

23--Hive函数高阶--窗口函数--（2）窗口表达式

[124] 24--Hive函数高阶--窗口函...

841播放

05:58

24--Hive函数高阶--窗口函数--（3）窗口排序函数—row_number（上）

[125] 24--Hive函数高阶--窗口函...

1270播放

06:06

24--Hive函数高阶--窗口函数--（3）窗口排序函数—row_number（下）

[126] 25--Hive函数高阶--窗口函...

1200播放

04:43

25--Hive函数高阶--窗口函数--（4）窗口分析函数

[127] 01--Hive多字节分隔符处理-...

1361播放

06:42

01--Hive多字节分隔符处理--LazySimpleSerDe的使用弊端

[128] 02--Hive多字节分隔符处理-...

917播放

03:18

02--Hive多字节分隔符处理--方案1：替换分隔符

[129] 03--Hive多字节分隔符处理-...

790播放

06:46

03--Hive多字节分隔符处理--方案2：RegexSerDe正则解析

[130] 04--Hive多字节分隔符处理-...

1400播放

05:50

04--Hive多字节分隔符处理--方案3：自定义InputFormat类

[131] 06--Hive URL格式数据解...

534播放

06:19

06--Hive URL格式数据解析--parse_url、parse_url_tuple（上）

[132] 06--Hive URL格式数据解...

1158播放

06:22

06--Hive URL格式数据解析--parse_url、parse_url_tuple（下）

[133] 07--Hive URL格式数据解...

1046播放

07:54

07--Hive URL格式数据解析--parse_url_tuple+lateral view

[134] 08--Hive行列转换应用--（...

1294播放

09:43

08--Hive行列转换应用--（1）多行转多列

[135] 09--Hive行列转换应用--（...

1434播放

09:12

09--Hive行列转换应用--（2）多行转单列--concat_ws、collect

[136] 10--Hive行列转换应用--（...

1147播放

04:19

10--Hive行列转换应用--（3）多列转多行--union

[137] 11--Hive行列转换应用--（...

520播放

04:34

11--Hive行列转换应用--（4）单列转多行--explode+侧视图

[138] 12--Hive JSON数据处理...

1492播放

08:00

12--Hive JSON数据处理--（1）使用内置json解析函数

[139] 13--Hive JSON数据处理...

1278播放

03:58

13--Hive JSON数据处理--（2）使用JSONSerDe类解析

[140] 14--Hive窗口函数应用--案...

998播放

07:07

14--Hive窗口函数应用--案例1：连续登陆用户统计--自连接过滤实现

[141] 15--Hive窗口函数应用--案...

522播放

08:16

15--Hive窗口函数应用--案例1：连续登陆用户统计--窗口函数实现lead

[142] 16--Hive窗口函数应用--案...

615播放

05:41

16--Hive窗口函数应用--案例2：级联累加求和场景（上）

[143] 16--Hive窗口函数应用--案...

1068播放

05:47

16--Hive窗口函数应用--案例2：级联累加求和场景（下）

[144] 17--Hive窗口函数应用--案...

1446播放

05:07

17--Hive窗口函数应用--案例3：分组TopN问题

[145] 18--Hive拉链表--产生背景...

588播放

06:09

18--Hive拉链表--产生背景、拉链表概念与设计（上）

[146] 18--Hive拉链表--产生背景...

732播放

06:21

18--Hive拉链表--产生背景、拉链表概念与设计（下）

[147] 01--Hive表设计优化--分区...

977播放

05:37

01--Hive表设计优化--分区表的设计使用（减少全表扫描、分区裁剪）（上）

[148] 01--Hive表设计优化--分区...

1262播放

05:38

01--Hive表设计优化--分区表的设计使用（减少全表扫描、分区裁剪）（下）

[149] 02--Hive表设计优化--分桶...

1361播放

05:16

02--Hive表设计优化--分桶表的设计使用（SMB提高join效率）（上）

[150] 02--Hive表设计优化--分桶...

1283播放

05:15

02--Hive表设计优化--分桶表的设计使用（SMB提高join效率）（下）

[151] 03--Hive表设计优化--in...

937播放

08:47

03--Hive表设计优化--index索引的设计及注意事项

[152] 04--Hive表数据优化--文件...

938播放

07:59

04--Hive表数据优化--文件存储格式（text、orc、parquet）（上）

[153] 04--Hive表数据优化--文件...

1113播放

07:55

04--Hive表数据优化--文件存储格式（text、orc、parquet）（下）

[154] 06--Hive表数据优化--小文...

867播放

待播放

06--Hive表数据优化--小文件场景、ORC索引介绍、ORC矢量化查询（上）

[155] 06--Hive表数据优化--小文...

1042播放

05:20

06--Hive表数据优化--小文件场景、ORC索引介绍、ORC矢量化查询（下）

[156] 07--Hive Job任务执行优...

1488播放

08:18

07--Hive Job任务执行优化--explain执行计划查看

[157] 08--Hive Job任务执行优...

1134播放

09:36

08--Hive Job任务执行优化--MR属性优化（本地模式、jvm重用、并行机制）

[158] 09--Hive Job任务执行优...

1257播放

06:40

09--Hive Job任务执行优化--join查询优化（mapside、reduceside、bucket）

[159] 10--Hive Job任务执行优...

1503播放

02:52

10--Hive Job任务执行优化--优化器--关联优化

[160] 11--Hive Job任务执行优...

563播放

05:58

11--Hive Job任务执行优化--优化器--CBO优化与Analyze分析器

[161] 12--Hive Job任务执行优...

713播放

04:14

12--Hive Job任务执行优化--了解谓词下推（PPD）

[162] 13--Hive Job任务执行优...

1365播放

04:54

13--Hive Job任务执行优化--数据倾斜（group by倾斜优化）

[163] 14--Hive Job任务执行优...

1448播放

03:55

14--Hive Job任务执行优化--数据倾斜（join倾斜优化）

[164] 16--Hive3新特性--LLA...

612播放

06:27

16--Hive3新特性--LLAP特性更新