侧边栏壁纸
  • 累计撰写 26 篇文章
  • 累计创建 25 个标签
  • 累计收到 0 条评论

目 录CONTENT

文章目录

Hive默认分隔符介绍

iRay
2022-10-04 / 0 评论 / 0 点赞 / 516 阅读 / 2063 字

分隔符介绍

Hive建表时,默认使用的分隔符时候一个特殊的字符,查看表决结构时候是一个’\001’
这不是真正的’\001’,其实是使用八进制编码\001表示,以下为该分隔符使用和编辑的方法

分隔符使用

linux/Mac vi/vim 进入文本编辑
\001 用ctrl+v然后再ctrl+a
Java实现: 
byte[] bytes = new byte[] {1}; String splitString=new String(bytes ,"GBK");  或者 String splitString = ""+((char) ((int) 1));
\002 用ctrl+v然后再ctrl+b
Java实现: 
byte[] bytes = new byte[] {2}; String splitString=new String(bytes ,"GBK");  或者 String splitString = ""+((char) ((int) 2));

分隔符优点

1 保证数据完整性,在数据抽取存储中通过该分隔符进行分割,非常有效组织了和数据内容冲突的情况。ETL清洗中最为明显
2 很多导入导出工具,不支持多字符分隔符情况单字符满足不了数据切分时
##该分隔符缺点
1 作为key时候shell中不好进行拼接查询,比如hbase.redis等
2 临时操作时不好进行展示,对不知道该分隔符的人会认为没有进行切分。

0

评论区