Number浮点数运算详解
文章来自我的 github 博客,包括技术输出和学习笔记,欢迎star。
一道题
0.1 + 0.2 = ?
在浏览器中测试下计算结果,得到的结果是 0.30000000000000004,并不是理想中的 0.3 结果值。为什么会存在这样的误差呢?
存在的问题
数值运算会存在精度丢失的问题
为什么
想要弄清这个问题,得先了解计算机是何如存储数值的。
- Number数值会被转换成对应的二进制数值,并用科学计数法表示
- 把数值通过 IEEE754 的格式表示成存储的计算机内存中的值
javascript 中的 Number 类型值可以是十进制,八进制以及十六进制的数值,在进行算数运算时,所有的八进制和十六进制的数值最终都将会被转换成十进制数值。而对于编程语言来说,所有的程序都会经过解释,编译等操作转换成 CPU 所能识别的语言才能运行,对于 CPU 来说只能识别二进制的数值,所以所有的数值都将会被转换成二进制数值存储的计算机内存中。所以,javascript 在算数运算过程中的顺序应该是这样的,如果存在八进制或者十六进制数值 -> 转换成十进制数值 -> 转换成二进制数值 -> 表示成 IEEE754形式的值存储的内存 中 -> 运算 -> 将结果转成十进制数值。
IEEE754 标准
IEEE754 标准规定了32位单精度浮点数在计算机存储中表示用1位表示数字的符号,用8位表示指数,用23位来表示尾数,而64位双精度浮点数则是用1位表示数字的符号,用11位表示指数,用52位表示尾数。
在 javascript 中,Number 类型的数值都是双精度64位浮点数,那么就符合 IEEE754 标准的双精度浮点数规则,结构如下:

从结构图中可以看出,存储的尾数的长度是52位有效数字,二进制的第一位有效数字必定是1,所以这个值不会被存储在64位中,节省了一个存储空间,所以尾数的最长长度应该是53位有效数字。
精度丢失
回到刚才的问题,按照正常的流程是会先将 0.1 和 0.2 转换成二进制数值。


十进制的 0.1 和 0.2 转换成二进制数值都会是无限循环的值
0.1 -> 0.0001100110011001...(无限)
0.2 -> 0.0011001100110011...(无限)
而根据 IEEE754 标准,尾数最多能存储53位有效数字,那么就必须在特定的位置进行四舍五入处理,得到的结果分别是:
0.1 -> 0.0001100110011001100110011001100110011001100110011001101
0.2 -> 0.001100110011001100110011001100110011001100110011001101
所以,相加得到的二进制结果为:
0.0001100110011001100110011001100110011001100110011001101 +
0.001100110011001100110011001100110011001100110011001101
= 0.0100110011001100110011001100110011001100110011001100111
二进制结果转换成十进制就是 0.30000000000000004。
小结
数值运算会存在精度丢失的问题的原因是,十进制的数值会先转成二进制数值存储在内存中,但是大多数十进制浮点数转换成二进制是一个无限循环的值,而计算机中存储的二进制值的尾数最多只能53位,那么就会进行四舍五入处理,这样处理的结果就会导致精度丢失。
解决方案
既然知道在运算过程中会存在精度丢失的情况导致计算不准确,那么应该如何处理这种问题?
可以在网上搜索一些成熟完善的插件,例如 mathjs。当然在简单的场景下,也可以自己来处理这类问题。
研究过 iview 和 element UI 的 InputNumber 计数器组件源码,大致的解决思路就是,两个数进行相加或者相减运算时,如果两个数中至少一个是小数值,那么就先将这两个数扩大10的n次方倍数进行运算,再将运算结果去除以扩大的倍数,得到最终的结果值,扩大的倍数由小数值的小数位数决定。如果只存在一个小数值,那么n的值就是小数的小数位长度,如果两个值都是小数,那么就先比较下哪个值的小数位长度较长,n的值就取较长的小数位长度。
用 Vue 来实现下这种解决方案。
<div id="app" class="demo">
<div class="add-main">
<input type="number" v-model="add_num1"></input> +
<input type="number" v-model="add_num2"></input>
<i-button type="primary" @click="getReault">计算结果</i-button>
= {{ result }}
</div>
</div>
new Vue({
el: '#app',
data: {
add_num1: 0,
add_num2: 0,
result: 0
},
methods: {
toPrecision: function(data, maxPrecision) {
if (maxPrecision === undefined) maxPrecision = 0;
return parseFloat(parseFloat(Number(data).toFixed(maxPrecision)));
},
getDecimalLen: function(val) {
return val.toString().split(".")[1] ? val.toString().split(".")[1].length : 0;
},
getReault: function() {
var vm = this;
var expandPrecision = null;
var decimal_num1 = vm.getDecimalLen(parseFloat(vm.add_num1));
var decimal_num2 = vm.getDecimalLen(parseFloat(vm.add_num2));
let maxPrecision = Math.max(decimal_num1, decimal_num2);
expandPrecision = Math.pow(10, maxPrecision);
//简单写法
// vm.result = (vm.add_num1 * expandPrecision + vm.add_num2 * expandPrecision) / expandPrecision;
//严谨写法
vm.result = vm.toPrecision((vm.add_num1 * expandPrecision + vm.add_num2 * expandPrecision) / expandPrecision, maxPrecision);
}
}
})
这种方案只适用于简单的运用场景,在涉及金额等复杂的运算场景中,最好是选择第三方完善的插件。
参考资料
Number浮点数运算详解的更多相关文章
- Opencv中Mat矩阵相乘——点乘、dot、mul运算详解
Opencv中Mat矩阵相乘——点乘.dot.mul运算详解 2016年09月02日 00:00:36 -牧野- 阅读数:59593 标签: Opencv矩阵相乘点乘dotmul 更多 个人分类: O ...
- C#中缓存的使用 ajax请求基于restFul的WebApi(post、get、delete、put) 让 .NET 更方便的导入导出 Excel .net core api +swagger(一个简单的入门demo 使用codefirst+mysql) C# 位运算详解 c# 交错数组 c# 数组协变 C# 添加Excel表单控件(Form Controls) C#串口通信程序
C#中缓存的使用 缓存的概念及优缺点在这里就不多做介绍,主要介绍一下使用的方法. 1.在ASP.NET中页面缓存的使用方法简单,只需要在aspx页的顶部加上一句声明即可: <%@ Outp ...
- <转>C++位运算详解
原文转自:http://www.crazycpp.com/?p=82 前言 以前收藏过一篇讲C++位操作的文章,这次博客搬家,以前的数据都没有保留,整理谷歌网站管理后台的时候,发现不时的还有网友有在查 ...
- shell基本计算、逻辑运算、位运算详解
转:http://blog.chinaunix.net/uid-8504518-id-3918531.html Shell 提供大量的基本运算操作,在脚本中非常有用.Shell 对您提供的算术表达式求 ...
- C语言位运算详解[转]
作者:911 说明:本文参考了http://www2.tsu.edu.cn/www/cjc/online/cyuyan/,算是对其的修正,在此将本文列为原创,实有抄袭之嫌疑.甚是惭愧! 位运算是指按二 ...
- C语言位运算详解
位运算是指按二进制进行的运算.在系统软件中,常常需要处理二进制位的问题.C语言提供了6个位操作运算符.这些运算符只能用于整形操作数,即只能用于带符号或无符号的char.short.int与long类型 ...
- C语言位运算详解(转载)
转载自:http://www.cnblogs.com/911/archive/2008/05/20/1203477.html 位运算是指按二进制进行的运算.在系统软件中,常常需要处理二进制位的问题.C ...
- javascript的数值转换 number()详解
---恢复内容开始--- number() parseInt() parseFloat()这三个函都可以把数非数值转换为数值,我们看看他们的区别在哪里 一 Number() 转型函数Number()是 ...
- C# 位运算详解
运算符 描述 &(位与) 当两个二进制操作位都为1时,结果就为1 |(位或) 当两个二进制操作位有1个为1时,结果就为1 ^(位异或) 当两个二进制操作位只有1个为1时,结果为1 ~(位非) ...
随机推荐
- Http协议中get和post的区别 转载https://www.cnblogs.com/lexiaofei/p/http.html
get(默认值)是通过URL传递表单值,数据追加在action属性后面. post传递的表单值是隐藏到http报文体中,url中看不到. get是通过url传递表单值,post通过url看不到表单域的 ...
- Unity5.2.1上Android真机调试环境配置
下载SDK,JDK安装,配置JAVA环境 1.下载SDK,下载adt-bundle-windows-x86_64-20131030.zip,下载地址:http://pan.baidu.com/shar ...
- 1. USB协议
1.1 Packets USB总线上数据传输以包为基本单位,一个包含不同的域,但都要从同步域开始,然后跟踪一个包标识符PID(Packet Identifier),最终以包结束符EOP(End of ...
- 20140513 matlab画图
1.matlab画图 x1=[1.00E-06,2.00E-06,4.00E-06,9.00E-06,2.00E-05,4.00E-05,8.00E-05,2.00E-04,4.00E-04,7.00 ...
- Unity中动态绘制圆柱体
问题背景 上次写了动态绘制立方体,这最近又来了新功能,绘制圆柱(风筒),要求是给了很多节点,根据节点去动态绘制风筒,风筒就是圆柱连接而成的,可以理解为管道,还有就是拐角处注意倒角,圆润过度过来. 实现 ...
- Web开发常规调试方法与常见问题分析
一.Web项目基本原理 现在的web项目大都已经前后端独立开发与部署. 前后端独立开发,一般是前端与后端通过web接口(常见的有RESTful与websocket)文档进行交流.前端开发人员先更具业务 ...
- C#实体类克隆
public static T Clone<T>(T source) { if (!typeof(T).IsSerializable) { throw new ArgumentExcept ...
- 2019-7-15-WPF-测试触摸设备发送触摸按下和抬起不成对
title author date CreateTime categories WPF 测试触摸设备发送触摸按下和抬起不成对 lindexi 2019-7-15 9:3:51 +0800 2019-0 ...
- wall -- 向所有人的终端发送消息
总览 (SYNOPSIS) wall [ message ] 描述 (DESCRIPTION) Wall 向 所有 登录的 并且 mesg(1) 权限 设为 yes 的 用户 发送 消息. 消息可以 ...
- 10_PAE_非PAE
前置知识: 在 windows 中 保护模式 有两种模式: 段保护 和 页保护 段保护 主要体现在 段选择子上:但是数据段.代码段.栈段等采用的都是4GB平坦模式,段的特征并没有那样展现.所以具体的保 ...