hive SQL 使用笔记

蔚落 2021-11-15 11:44 350阅读 0赞

## 建表 插入数据 删除分区 ##

-- 建表
    CREATE TABLE test_multiple_partition (
        id int,
        name STRING
    ) PARTITIONED BY (etl_tx_dt INT,createTime TIMESTAMP);
    -- 插入数据
    INSERT INTO test_multiple_partition PARTITION(etl_tx_dt=20190729, createtime="2019-07-29 12:00:00") VALUES(1, "t1");
    INSERT INTO test_multiple_partition PARTITION(etl_tx_dt=20190729, createtime="2019-07-29 13:00:00") VALUES(2, "t2");
    -- 查看分区信息
    SHOW PARTITIONS test_multiple_partition;
    -- 删除分区
    ALTER TABLE test_multiple_partition DROP PARTITION (etl_tx_dt=20190729);

## 统计分区表元数据 ##

ANALYZE TABLE tableName PARTITION(etl_tx_dt=20190729) COMPUTE STATISTICS;
    DESCRIBE EXTENDED tableName PARTITION(etl_tx_dt=20190729);

[参考][Link 1]

## 表属性（元数据） ##

-- 查看属性
    DESCRIBE FORMATTED sda01_mdm_data_object_data_size_info;
    -- 查看自定义属性
    DESCRIBE EXTENDED mdm_dev_data_source_size_info;
    -- 添加更改属性
    ALTER TABLE mdm_dev_data_source_size_info SET TBLPROPERTIES ("sync_way"="all");

[hive 元数据 mysql存储][hive _ mysql]

[Link 1]: https://blog.csdn.net/solzy/article/details/24739899
[hive _ mysql]: https://www.cnblogs.com/qingyunzong/p/8710356.html

发表评论取消回复

表情：

评论列表（有 0 条评论，350人围观）

还没有评论，来说两句吧...

相关阅读

相关 SQL/Hive应用笔记

SQL/Hive应用笔记 insert overwrite table XXX insert into table XXX overwrite会覆盖现有的数

冷不防/ 2024年04月03日 13:29/ 0 赞/ 62 阅读

相关 Hive SQL经典使用场景示例

1、HQL每天购课总额前三的用户原始数据 with tbl_order as ( select '2019-01-01'

太过爱你忘了你带给我的痛/ 2023年01月13日 08:52/ 0 赞/ 12 阅读

相关 hive笔记

1.hive: 在hadoop生态圈中属于数据仓库的角色，它能够管理hadoop中的数据，同时可以查询hadoop中的数据。本质上讲，hive是一个sql解析引擎，

ゞ浴缸里的玫瑰/ 2022年08月18日 05:59/ 0 赞/ 213 阅读

相关 spark sql on hive笔记一

spark sql on hive非常方便，通过共享读取hive的元数据，我们可以直接使用spark sql访问hive的库和表，做更快的OLAP的分析。 spark 如果想

淩亂°似流年/ 2022年07月14日 12:51/ 0 赞/ 234 阅读

相关 spark sql on hive笔记一

Spark sql on Hive非常方便，通过共享读取hive的元数据，我们可以直接使用spark sql访问hive的库和表，做更快的OLAP的分析。 spark

梦里梦外;/ 2022年04月11日 09:17/ 0 赞/ 655 阅读

相关 Hive SQL执行原理和优化技巧笔记

导语时间飞梭而过，眼看这2018新年伊始，转眼间128大促已经落下帷幕，回顾过去的两周，协助大促监控和业务分析捞数竟然暂用了我大量的工作时间，期间不断的在用Hive S

缺乏、安全感/ 2022年04月04日 11:22/ 0 赞/ 541 阅读

相关 Hive sql使用小结

1.首先，很多时我们需要在Hive中去重数据：（语法和Oracle中的去重很类似，子查询更名为 t 这个不能省略） select ID, CASE_ID_

忘是亡心i/ 2022年04月03日 03:38/ 0 赞/ 257 阅读

相关 hive SQL 使用笔记

建表插入数据删除分区 -- 建表 CREATE TABLE test_multiple_partition ( id int,

蔚落/ 2021年11月15日 11:44/ 0 赞/ 351 阅读

相关 Hive笔记

数据仓库特性面向主题性集成性非易失性时变性 OLTP/OLAP OLTP：面向事务处理注重的事务注重响应的时间

待我称王封你为后i/ 2021年10月30日 03:32/ 0 赞/ 434 阅读

相关 Hive SQL

拼接函数(行转列): collect\_set():把多个值去重拼接成一个数组 collect\_list():同上，不去重 concat\_ws():用指定分隔符

Bertha 。/ 2021年10月13日 02:02/ 0 赞/ 434 阅读