hive数据库delete删除部分数据删除分区内的数据_hive 删除数据

最新推荐文章于 2025-06-10 14:03:42 发布

原创最新推荐文章于 2025-06-10 14:03:42 发布 · 950 阅读

13 ·

CC 4.0 BY-SA版权

文章标签：

#hive #数据库 #hadoop

2024年程序员学习专栏收录该内容

64 篇文章

订阅专栏

DROP TABLE  my_table;

这将删除名为my_table的表。请注意，这将删除表的元数据和数据。

1.2、删除表中的特定行

如果只需要删除表中的部分数据，可以使用DELETE语句。DELETE语句用于删除满足指定条件的行。下面是一个示例：

DELETE FROM my_table WHERE condition;

其中，my_table是要删除数据的表名，condition是一个表达式，用于指定哪些行应该被删除。例如，要删除my_table表中age大于30的所有行，可以使用以下语句：

DELETE FROM my_table WHERE age > 30;

这将删除所有age大于30的行。

1.3、删除表中的特定分区

如果表是分区的，可以使用DELETE语句删除特定的分区。分区是根据表中的某些列进行划分的，因此可以只删除特定的分区而不影响其他分区。下面是一个示例：

DELETE FROM my_table PARTITION (partition_column = partition_value);
或者
alter table my_table drop partition(partition_column = partition_value)

其中，my_table是要删除数据的表名，partition_column是分区列的名称，partition_value是要删除的分区的值。例如，要删除my_table表中date列为’2022-01-01’的分区，可以使用以下语句：

DELETE FROM my_table PARTITION (date = '2022-01-01');
或者
alter table my_table drop partition(date = '2022-01-01')

这将删除所有date列为’2022-01-01’的分区。

1.4、删除分区内的部分数据

若我们只是想删除分区中的指定数据，可以通过以下命令删除

DELETE FROM my_table PARTITION (partition_column = partition_value) where conditon

例如：删除出生年份为2020年的男生

DELETE FROM my_table PARTITION (year= '2020') where sex = '男'

1.5、清空表中的所有数据

如果只需要删除表中的所有数据而不删除表本身，可以使用TRUNCATE语句。TRUNCATE语句用于删除表中的所有行，但保留表的元数据。下面是一个示例：

TRUNCATE TABLE my_table;

二、扩展

2.1、dynamic partition on Crud si not disabled, please set hive.crud.dynamic.partition=true to enable it

在hive数据库中，用delete删除分区内的数据报错，sql及报错内容如下：

# user表根据year年份字段进行分区，删除2020年分区内的男生
sql:  delete from user where year = '2020' and sex = '男'

报错内容：dynamic partition on Crud si not disabled, please set hive.crud.dynamic.partition=true to enable it

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数大数据工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年大数据全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。