文章来自我的 github 博客,包括技术输出和学习笔记,欢迎star。

一道题

0.1 + 0.2 = ?

在浏览器中测试下计算结果,得到的结果是 0.30000000000000004,并不是理想中的 0.3 结果值。为什么会存在这样的误差呢?

存在的问题

数值运算会存在精度丢失的问题

为什么

想要弄清这个问题,得先了解计算机是何如存储数值的。

  1. Number数值会被转换成对应的二进制数值,并用科学计数法表示
  2. 把数值通过 IEEE754 的格式表示成存储的计算机内存中的值

javascript 中的 Number 类型值可以是十进制,八进制以及十六进制的数值,在进行算数运算时,所有的八进制和十六进制的数值最终都将会被转换成十进制数值。而对于编程语言来说,所有的程序都会经过解释,编译等操作转换成 CPU 所能识别的语言才能运行,对于 CPU 来说只能识别二进制的数值,所以所有的数值都将会被转换成二进制数值存储的计算机内存中。所以,javascript 在算数运算过程中的顺序应该是这样的,如果存在八进制或者十六进制数值 -> 转换成十进制数值 -> 转换成二进制数值 -> 表示成 IEEE754形式的值存储的内存 中 -> 运算 -> 将结果转成十进制数值。

IEEE754 标准

IEEE754 标准规定了32位单精度浮点数在计算机存储中表示用1位表示数字的符号,用8位表示指数,用23位来表示尾数,而64位双精度浮点数则是用1位表示数字的符号,用11位表示指数,用52位表示尾数。

在 javascript 中,Number 类型的数值都是双精度64位浮点数,那么就符合 IEEE754 标准的双精度浮点数规则,结构如下:

从结构图中可以看出,存储的尾数的长度是52位有效数字,二进制的第一位有效数字必定是1,所以这个值不会被存储在64位中,节省了一个存储空间,所以尾数的最长长度应该是53位有效数字。

精度丢失

回到刚才的问题,按照正常的流程是会先将 0.1 和 0.2 转换成二进制数值。

十进制的 0.1 和 0.2 转换成二进制数值都会是无限循环的值

0.1 -> 0.0001100110011001...(无限)
0.2 -> 0.0011001100110011...(无限)

而根据 IEEE754 标准,尾数最多能存储53位有效数字,那么就必须在特定的位置进行四舍五入处理,得到的结果分别是:

0.1 -> 0.0001100110011001100110011001100110011001100110011001101
0.2 -> 0.001100110011001100110011001100110011001100110011001101

所以,相加得到的二进制结果为:

0.0001100110011001100110011001100110011001100110011001101 +
0.001100110011001100110011001100110011001100110011001101
= 0.0100110011001100110011001100110011001100110011001100111

二进制结果转换成十进制就是 0.30000000000000004。

小结

数值运算会存在精度丢失的问题的原因是,十进制的数值会先转成二进制数值存储在内存中,但是大多数十进制浮点数转换成二进制是一个无限循环的值,而计算机中存储的二进制值的尾数最多只能53位,那么就会进行四舍五入处理,这样处理的结果就会导致精度丢失。

解决方案

既然知道在运算过程中会存在精度丢失的情况导致计算不准确,那么应该如何处理这种问题?

可以在网上搜索一些成熟完善的插件,例如 mathjs。当然在简单的场景下,也可以自己来处理这类问题。

研究过 iview 和 element UI 的 InputNumber 计数器组件源码,大致的解决思路就是,两个数进行相加或者相减运算时,如果两个数中至少一个是小数值,那么就先将这两个数扩大10的n次方倍数进行运算,再将运算结果去除以扩大的倍数,得到最终的结果值,扩大的倍数由小数值的小数位数决定。如果只存在一个小数值,那么n的值就是小数的小数位长度,如果两个值都是小数,那么就先比较下哪个值的小数位长度较长,n的值就取较长的小数位长度。

用 Vue 来实现下这种解决方案。

<div id="app" class="demo">
<div class="add-main">
<input type="number" v-model="add_num1"></input> +
<input type="number" v-model="add_num2"></input>
<i-button type="primary" @click="getReault">计算结果</i-button>
= {{ result }}
</div>
</div>
new Vue({
el: '#app',
data: {
add_num1: 0,
add_num2: 0,
result: 0
},
methods: {
toPrecision: function(data, maxPrecision) {
if (maxPrecision === undefined) maxPrecision = 0;
return parseFloat(parseFloat(Number(data).toFixed(maxPrecision)));
},
getDecimalLen: function(val) {
return val.toString().split(".")[1] ? val.toString().split(".")[1].length : 0;
},
getReault: function() {
var vm = this;
var expandPrecision = null;
var decimal_num1 = vm.getDecimalLen(parseFloat(vm.add_num1));
var decimal_num2 = vm.getDecimalLen(parseFloat(vm.add_num2));
let maxPrecision = Math.max(decimal_num1, decimal_num2);
expandPrecision = Math.pow(10, maxPrecision);
//简单写法
// vm.result = (vm.add_num1 * expandPrecision + vm.add_num2 * expandPrecision) / expandPrecision; //严谨写法
vm.result = vm.toPrecision((vm.add_num1 * expandPrecision + vm.add_num2 * expandPrecision) / expandPrecision, maxPrecision);
}
}
})

这种方案只适用于简单的运用场景,在涉及金额等复杂的运算场景中,最好是选择第三方完善的插件。

参考资料

Number浮点数运算详解的更多相关文章

  1. Opencv中Mat矩阵相乘——点乘、dot、mul运算详解

    Opencv中Mat矩阵相乘——点乘.dot.mul运算详解 2016年09月02日 00:00:36 -牧野- 阅读数:59593 标签: Opencv矩阵相乘点乘dotmul 更多 个人分类: O ...

  2. C#中缓存的使用 ajax请求基于restFul的WebApi(post、get、delete、put) 让 .NET 更方便的导入导出 Excel .net core api +swagger(一个简单的入门demo 使用codefirst+mysql) C# 位运算详解 c# 交错数组 c# 数组协变 C# 添加Excel表单控件(Form Controls) C#串口通信程序

    C#中缓存的使用   缓存的概念及优缺点在这里就不多做介绍,主要介绍一下使用的方法. 1.在ASP.NET中页面缓存的使用方法简单,只需要在aspx页的顶部加上一句声明即可:  <%@ Outp ...

  3. <转>C++位运算详解

    原文转自:http://www.crazycpp.com/?p=82 前言 以前收藏过一篇讲C++位操作的文章,这次博客搬家,以前的数据都没有保留,整理谷歌网站管理后台的时候,发现不时的还有网友有在查 ...

  4. shell基本计算、逻辑运算、位运算详解

    转:http://blog.chinaunix.net/uid-8504518-id-3918531.html Shell 提供大量的基本运算操作,在脚本中非常有用.Shell 对您提供的算术表达式求 ...

  5. C语言位运算详解[转]

    作者:911 说明:本文参考了http://www2.tsu.edu.cn/www/cjc/online/cyuyan/,算是对其的修正,在此将本文列为原创,实有抄袭之嫌疑.甚是惭愧! 位运算是指按二 ...

  6. C语言位运算详解

    位运算是指按二进制进行的运算.在系统软件中,常常需要处理二进制位的问题.C语言提供了6个位操作运算符.这些运算符只能用于整形操作数,即只能用于带符号或无符号的char.short.int与long类型 ...

  7. C语言位运算详解(转载)

    转载自:http://www.cnblogs.com/911/archive/2008/05/20/1203477.html 位运算是指按二进制进行的运算.在系统软件中,常常需要处理二进制位的问题.C ...

  8. javascript的数值转换 number()详解

    ---恢复内容开始--- number() parseInt() parseFloat()这三个函都可以把数非数值转换为数值,我们看看他们的区别在哪里 一 Number() 转型函数Number()是 ...

  9. C# 位运算详解

    运算符 描述 &(位与) 当两个二进制操作位都为1时,结果就为1 |(位或) 当两个二进制操作位有1个为1时,结果就为1 ^(位异或) 当两个二进制操作位只有1个为1时,结果为1 ~(位非) ...

随机推荐

  1. SSM框架整合思路

    SSM框架整合思路 Spring在整合中起到的作用(面试时常问到) Spring管理持久层的mapper. Spring管理业务层的service,service可以调用mapper接口.Spring ...

  2. bzoj1036 树的统计 树链剖分模板

    题意:给出树上任意两点,求路径上的值的和与最大值,带单点修改操作 树链剖分思路: 1.对树进行dfs求出点的深度和父亲节点,然后求出轻重儿子(重儿子就是点最多的那个子树,其余都是轻儿子),用一个son ...

  3. swagger使用详解

    1:认识Swagger Swagger 是一个规范和完整的框架,用于生成.描述.调用和可视化 RESTful 风格的 Web 服务.总体目标是使客户端和文件系统作为服务器以同样的速度来更新.文件的方法 ...

  4. Javascript原型对象中的toString

    <script> //tostring function Person(name,age,gender){ this.name=name; this.age=age; this.gende ...

  5. python 基本输入输出

  6. springmvc3.2集成redis集群

    老项目需要集成redis集群 因为spring版本才从2.x升级上来,再升级可能改动较大,且并非maven项目升级麻烦,故直接集成. jar包准备: jedis-2.9.0.jar  -- 据说只有这 ...

  7. BeautifulSoup 爬虫

    一 安装BeautifulSoup 安装Python的包管理器pip 然后运行 $pip3 install beautifulsoup 在终端里导入它测试下是否安装成功 >>>fro ...

  8. 廖雪峰Java13网络编程-1Socket编程-2TCP编程

    1. Socket 在开发网络应用程序的时候,会遇到Socket这个概念. Socket是一个抽象概念,一个应用程序通过一个Socket来建立一个远程连接,而Socket内部通过TCP/IP协议把数据 ...

  9. R语言 基本语法

    R语言基本语法 我们将开始学习R语言编程,首先编写一个"你好,世界! 的程序. 根据需要,您可以在R语言命令提示符处编程,也可以使用R语言脚本文件编写程序. 让我们逐个体验不同之处. 命令提 ...

  10. NOIp2018集训test-9-18

    T1.Conjugate 只能选没选过的点,看成如果选了选过的堆的点就不管它继续选.如果第一次选到某一堆的点在第一次选到第一堆的点之前,这一堆对答案就会有1的贡献.那么a[i]有贡献的概率是a[i]和 ...