精度丢失问题

• 异常信息

  WARN hive.TableDefWriter: Column your_column had to be cast to a less precise type in Hive

• 描述&＃xff1a;使用Sqoop&＃xff0c;从MySQL往Hive中import数据的时候出现该异常。MySQL表中&＃xff0c;对应的列的类型为decimal(10,2)。Sqoop会把它转为Hive的double类型&＃xff0c;导致精度丢失。

• 解决方案&＃xff1a;在Sqoop执行语句中&＃xff0c;添加下面的参数&＃xff1a;

  --map-column-hive your_column&＃61;&＃39;DECIMAL(10%2C2)&＃39;

• 解释&＃xff1a;

  • Jira 官方解释

  • 官方的解释&＃xff0c;还不完全正确&＃xff0c;还需要在 DECIMAL(10%2C2) 前后&＃xff0c;加上单引号 ’ ‘&＃xff0c;否则还是会提示语句有误。