zoukankan      html  css  js  c++  java
  • hive parquet table 配置使用压缩

    创建parquet table :

    create table mytable(a int,b int) STORED AS PARQUET;


    创建带压缩的parquet table:

    create table mytable(a int,b int) STORED AS PARQUET TBLPROPERTIES('parquet.compression'='SNAPPY');


    如果原来创建表的时候没有指定压缩,后续可以通过修改表属性的方式添加压缩:

    ALTER TABLE mytable SET TBLPROPERTIES ('parquet.compression'='SNAPPY');

    或者在写入的时候set parquet.compression=SNAPPY;


    不过只会影响后续入库的数据,原来的数据不会被压缩,需要重跑原来的数据。


    采用压缩之后大概可以降低1/3的存储大小。
    ---------------------
    作者:xiao_jun_0820
    来源:CSDN
    原文:https://blog.csdn.net/xiao_jun_0820/article/details/76893331
    版权声明:本文为博主原创文章,转载请附上博文链接!

  • 相关阅读:
    ruby html解析器
    国外cdn
    ruby爬虫utf8编码相关
    Ruby 1.9 regex (named capture group)正则名组
    ruby爬虫综述
    ruby新加实例方法写法
    机房
    Net::HTTP Cheat Sheet
    ror一键安装包forwin
    病毒6655.la
  • 原文地址:https://www.cnblogs.com/cenglinjinran/p/10335220.html
Copyright © 2011-2022 走看看