Hive多字节分隔符处理_hive数据库中多字节分隔符怎么入库

作者：煮酒与君饮 | 2024-07-03 04:13:34

踩

hive数据库中多字节分隔符怎么入库

问题：
当我们存放在表目录下的数据，其分隔符是多字节分隔符，例如：“||”，“–”等，或者数据的字段中也包含了分隔符。则Hive在解析数据文件时就会出现错误。

解决方案1：替换分隔符

使用MR程序提前将分隔符替换成单字节分隔符

解决方案2：RegexSerDE正则加载.
在这里插入图片描述

建表加载示例：
在这里插入图片描述
解决方案3：自定义InputFormat类
不推荐使用

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/煮酒与君饮/article/detail/781944