hive分区——静态分区和动态分区

最新推荐文章于 2024-11-23 11:46:35 发布

树很懒～

最新推荐文章于 2024-11-23 11:46:35 发布

阅读量949

点赞数

CC 4.0 BY-SA版权

本文链接：https://blog.csdn.net/little_sloth/article/details/107292924

本文介绍了Hive的静态和动态分区概念。静态分区在建表时需手动指定，适合数据量小且分区固定的场景，而动态分区允许在SQL执行时动态设置，适用于数据量大、分区多的情况。在使用静态分区时，需注意避免数据覆盖问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

hive分区——静态分区和动态分区

文章目录

hive分区——静态分区和动态分区

一、 Hive以及分区简介

hive
hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。
hive分区
hive 为了避免全表查询，从而引进分区，将数据进行划分，减少不必要的查询，从而提高效率。
eg:

二、静态分区

建表语句：

create table users(
userid string,
username string,
sex string
)
partitioned by (year int,month int)
row format delimited fields terminated by ','
location '......';