Hive中如何选择输入格式
这篇文章主要介绍了Hive中如何选择输入格式,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。
公司主营业务:成都网站制作、成都做网站、外贸营销网站建设、移动网站开发等业务。帮助企业客户真正实现互联网宣传,提高企业的竞争能力。成都创新互联公司是一支青春激扬、勤奋敬业、活力青春激扬、勤奋敬业、活力澎湃、和谐高效的团队。公司秉承以“开放、自由、严谨、自律”为核心的企业文化,感谢他们对我们的高要求,感谢他们从不同领域给我们带来的挑战,让我们激情的团队有机会用头脑与智慧不断的给客户带来惊喜。成都创新互联公司推出巴青免费做网站回馈大家。
输入格式选择
Hive支持TEXTFILE, SEQUENCEFILE, AVRO, RCFILE, ORC,以及PARQUET文件格式,可以通过两种方式指定表的文件格式:
CREATE TABLE … STORE AS :即在建表时指定文件格式,默认是TEXTFILE ALTER TABLE … [PARTITION partition_spec] SET FILEFORMAT :修改具体表的文件格式
如果未指定文件存储格式,则默认使用的是参数hive.default.fileformat设定的格式。
如果数据存储在小于块大小的小文件中,则可以使用SEQUENCE文件格式。如果要以减少存储空间并提高性能的优化方式存储数据,则可以使用ORC文件格式,而当列中嵌套的数据过多时,Parquet格式会很有用。因此,需要根据拥有的数据确定输入文件格式。
感谢你能够认真阅读完这篇文章,希望小编分享的“Hive中如何选择输入格式”这篇文章对大家有帮助,同时也希望大家多多支持创新互联,关注创新互联行业资讯频道,更多相关知识等着你来学习!
分享文章:Hive中如何选择输入格式
本文来源:http://ybzwz.com/article/jejgio.html