如何查看hive或者spark做ETL的结果orc文件的表头

数据存储

2020-07-14

20

0

技术:hive orc文件格式

运行环境:hive + hdfs

demo功能:提供一个查看orc文件表头的方法

进入包含hive命令行的服务器执行

hive --orcfiledump /bigdata_dw/aaaa/20200708/000000_0

注意

hive和spark输出的orc文件表头不同。hive生成的orc文件是用_col0,_col1占位符表示每个字段类型;spark是用字段名

欢迎添加微信,互相学习↑↑↑ -_-

发表评论

全部评论:0条

白老虎

programming is not only to solve problems, ways to think