【踩坑】double和BigDecimal的精度问题
创始人
2024-03-08 01:05:16
0

【踩坑】double和bigdecimal的精度问题

  • 背景
    • debug尝试
  • 测试代码
    • 结果
  • 总结

背景

今天生产报了个问题,在申报和预算相同的金额的时候,后台返回超出预算。一开始以为是判断逻辑的问题,找了个数据试了下发现重现不出来。又是改数据又是找前端传参最后发现是接受参数处理的问题。

double转Bigdecimal,调用compare方法没有返回预期结果

部分代码如下

balanceFee.compareTo(new BigDecimal(amt)) >= 0

debug尝试

下面两个图是分别对100和100.6
debug如图
在这里插入图片描述
在这里插入图片描述
debug看上去都好像相同, 但是结果是, 100相同, 100.6不相同

测试代码

 public static void main(String[] args) {double d1 = 6.66;double d2 = 666.0 / 100.0;double d3 = Double.parseDouble("6.66");String s1 = "6.66";testDoubleBigdecimal(d1, d2,d3, s1);}private static void testDoubleBigdecimal(double d1, double d2, double d3, String s1) {BigDecimal bg1 = new BigDecimal(d1);BigDecimal bg2 = new BigDecimal(d2);BigDecimal bg3 = new BigDecimal(d3);BigDecimal bg4 = new BigDecimal(s1);System.out.println("double = " + bg1);System.out.println("double / = " + bg2);System.out.println("str 2 double = " + bg3);System.out.println("str = " + bg4);System.out.println("bg1.compareTo(bg2) = " + bg1.compareTo(bg2));System.out.println("bg1.compareTo(bg3) = " + bg1.compareTo(bg3));System.out.println("bg1.compareTo(bg4) = " + bg1.compareTo(bg4));System.out.println("bg2.compareTo(bg3) = " + bg2.compareTo(bg3));System.out.println("bg2.compareTo(bg4) = " + bg2.compareTo(bg4));System.out.println("bg3.compareTo(bg4) = " + bg3.compareTo(bg4));}

结果

分别用666.6和66.66测试

  • 666.6结果:

double = 666.6000000000000227373675443232059478759765625
double / = 666.6000000000000227373675443232059478759765625
str 2 double = 666.6000000000000227373675443232059478759765625
str = 666.6
bg1.compareTo(bg2) = 0
bg1.compareTo(bg3) = 0
bg1.compareTo(bg4) = 1
bg2.compareTo(bg3) = 0
bg2.compareTo(bg4) = 1
bg3.compareTo(bg4) = 1

  • 66.66结果

double = 66.659999999999996589394868351519107818603515625
double / = 66.659999999999996589394868351519107818603515625
str 2 double = 66.659999999999996589394868351519107818603515625
str = 66.66
bg1.compareTo(bg2) = 0
bg1.compareTo(bg3) = 0
bg1.compareTo(bg4) = -1
bg2.compareTo(bg3) = 0
bg2.compareTo(bg4) = -1
bg3.compareTo(bg4) = -1

总结

其实double有精度问题,这个是大家都知道的. 解决精度问题用BigDecimal也是很常见的手段, 但是这里不知道为什么controller的接口使用了double来接收.

  1. double有精度问题
  2. 使用BigDecimal最好用string来转化

最坑是在debug的时候, 由于代码是balanceFee.compareTo(new BigDecimal(amt)) >= 0
第一个balanceFee是字符串转化计算而来的,是准确的, 第二个amt是double, 在debug模式下浮窗显示的值也是精准的, 然而最重要的new BigDecimal(amt)却没有浮窗显示出值.
这样也就不难理解为什么debug的时候图上看上去是一样的值, 比较的结果却不是0了

相关内容

热门资讯

保存时出现了1个错误,导致这篇... 当保存文章时出现错误时,可以通过以下步骤解决问题:查看错误信息:查看错误提示信息可以帮助我们了解具体...
汇川伺服电机位置控制模式参数配... 1. 基本控制参数设置 1)设置位置控制模式   2)绝对值位置线性模...
不能访问光猫的的管理页面 光猫是现代家庭宽带网络的重要组成部分,它可以提供高速稳定的网络连接。但是,有时候我们会遇到不能访问光...
表格中数据未显示 当表格中的数据未显示时,可能是由于以下几个原因导致的:HTML代码问题:检查表格的HTML代码是否正...
本地主机上的图像未显示 问题描述:在本地主机上显示图像时,图像未能正常显示。解决方法:以下是一些可能的解决方法,具体取决于问...
表格列调整大小出现问题 问题描述:表格列调整大小出现问题,无法正常调整列宽。解决方法:检查表格的布局方式是否正确。确保表格使...
不一致的条件格式 要解决不一致的条件格式问题,可以按照以下步骤进行:确定条件格式的规则:首先,需要明确条件格式的规则是...
Android|无法访问或保存... 这个问题可能是由于权限设置不正确导致的。您需要在应用程序清单文件中添加以下代码来请求适当的权限:此外...
【NI Multisim 14...   目录 序言 一、工具栏 🍊1.“标准”工具栏 🍊 2.视图工具...
银河麒麟V10SP1高级服务器... 银河麒麟高级服务器操作系统简介: 银河麒麟高级服务器操作系统V10是针对企业级关键业务...