sqoop中，如果數據中本身有換行符，會導致數據錯位

sqoop中，如果數據中本身有換行符，會導致數據錯位；

解決辦法：

在sqoop import時修改配置文件

sudo -u hive sqoop import  --connect jdbc:mysql://${miguanMysqlHost}/${miguanDatabaseName} --username ${miguanMysqlUser} --password ${miguanMysqlPwd} --table applibrary --hive-import --hive-table ${hiveDBName}.applibrary  --hive-drop-import-delims --fields-terminated-by '\001' --lines-terminated-by '\n' --hive-overwrite 

添加了：

 --hive-drop-import-delims --lines-terminated-by '\n'

 --hive-drop-import-delims 的意思是指：delims Drops \n, \r, and \01 from string fields when importing to Hive.

 

delims

Drops \n, \r, and \01 from string fields when importing to Hive.