sqoop处理换行符--包含clob字段情况


一、sqoop同步oracle数据非clob字段:

要处理换行符,在sqoop脚本中,参数使用下面任意一个即可

#替换为空 
--hive-delims-replacement "" 
#删除
--hive-drop-import-delims   

二、sqoop同步oracle数据clob字段
clob字段一般包含大量文本,必然包含换行符,使用上面参数没有作用,需要使用下面参数:

#指定clob列为String类型
--map-column-java CLOB列=String 

例子如下:
oracle这张表可以看到YIWU字段为clob字段,打开明显有换行符
Oracle
没有使用该参数,可以看到Hive这边从换行符位置开始全错位了。
Hive
使用该参数
在这里插入图片描述
可以看到结果已经正常
在这里插入图片描述


学习交流,有任何问题还请随时评论指出交流。


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM