04-Hive

Hive安装 解压apache-hive-1.2.1-bin.tar.gz 修改/opt/module/hive/conf 目录下的hive-env.sh.template 名称为hive-env.sh 配置hive-env.sh 文件 配置HADOOP_HOME 路径 ： export ...
2020-07-03 Hive

Hive01-概述

什么是HiveHive：由Facebook 开源用于解决海量结构化日志的数据统计。 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。 本质是：将HQL 转化成MapReduce 程序 Hive 处理的数据存储在HDFS Hive 分析数据 ...
2020-07-03 Hive

Hive03-数据类型

基本数据类型 Hive 数据类型 Java 数据类型 长度 例子 TINYINT byte 1byte 有符号整数 20 SMALINT short 2byte 有符号整数 20 INT int 4byte 有符号整数 20 BIGINT long 8byte 有符号整数 ...
2020-07-03 Hive

Hive04-DDL

创建数据库hive> create database if not exists db_hive; -- 默认存储路径是/user/hive/warehouse/*.db。 hive> create database db_hive2 location '/db_hive2. ...
2020-07-03 Hive

Hive06-查询

相关指南：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Select SELECT [ALL | DISTINCT] select_expr, select_expr, ... FROM table_reference ...
2020-07-03 Hive

Hive07-函数

系统内置函数查看系统自带的函数：hive> show functions; 显示自带的函数的用法：hive> desc function upper; 详细显示自带的函数的用法：hive> desc function extended upper; 自定义函数 UDF（User-D ...
2020-07-03 Hive

Hive08-压缩和存储

Hadoop 源码编译支持Snappy 压缩 hadoop-2.7.2-src.tar.gz jdk-8u144-linux-x64.tar.gz snappy-1.1.3.tar.gz apache-maven-3.0.5-bin.tar.gz protobuf-2.5.0.tar.gz 准备 ...
2020-07-03 Hive

Hive05-DML

数据导入向表中装载数据（Load）hive> load data [local] inpath '/opt/module/datas/student.txt' [overwrite] | into table student [partition (partcol1=val1, ...
2020-07-03 Hive

Hive09-企业级调优

Fetch 抓取Fetch 抓取是指，Hive 中对某些情况的查询可以不必使用MapReduce 计算。例如：SELECT * FROM employees;在这种情况下，Hive 可以简单地读取employee 对应的存储目录下的文件，然后输出查询结果到控制台。 在hive-default.xml ...
2020-07-03 Hive

Hive02-安装

Hive安装 解压apache-hive-1.2.1-bin.tar.gz 修改/opt/module/hive/conf 目录下的hive-env.sh.template 名称为hive-env.sh 配置hive-env.sh 文件 配置HADOOP_HOME 路径 ： export ...
2020-07-03 Hive

Hive10-实战

需求描述统计硅谷影音视频网站的常规指标，各种TopN 指标： 统计视频观看数Top10 统计视频类别热度Top10 统计视频观看数Top20 所属类别以及类别包含的Top20 的视频个数 统计视频观看数Top50 所关联视频的所属类别Rank 统计每个类别中的视频热度Top10 统计每个类别中视频 ...
2020-07-03 Hive