• JS中浮点数精度误差解决


    问题出现

    0.1 + 0.2 = 0.30000000000000004

     

    问题分析

      对于浮点数的四则运算,几乎所有的编程语言都会有类似精度误差的问题,只不过在 C++/C#/Java 这些语言中已经封装好了方法来避免精度的问题,而 JavaScript 是一门弱类型的语言,从设计思想上就没有对浮点数有个严格的数据类型,所以精度误差的问题就显得格外突出。

      我们知道,能被计算机读懂的是二进制,而不是十进制,所以我们先把 0.1 和 0.2 转换成二进制看看:  

     0.1==》0.1.toString(2)==》0.0001100110011(无限循环..)
     0.2==》0.2.toString(2)==》0.001100110011 (无限循环..)

      双精度浮点数的小数部分最多支持 52 位,所以两者相加之后得到这么一串 0.0100110011001100110011001100110011001100110011001100 因浮点数小数位的限制而截断的二进制数字,这时候,我们再把它转换为十进制,就成了 0.30000000000000004。

     

    解决方案

    方案一:如果有精度要求,可以用toFixed方法处理

    var num1 = 0.1; 
    var num2 = 0.2; 
    alert( parseFloat((num1 + num2).toFixed(2)) === 0.30 );

    方案二:通用处理方案:把需要计算的数字乘以 10 的 n 次幂,换算成计算机能够精确识别的整数,然后再除以 10 的 n 次幂

    formatNum = function(f, digit) { 
        var m = Math.pow(10, digit); 
        return parseInt(f * m, 10) / m; 
    } 
    var num1 = 0.1; 
    var num2 = 0.2;
    alert(Math.formatFloat(num1
    + num2, 1) === 0.3)

    参考链接:https://www.cnblogs.com/wymbk/p/6031442.html

  • 相关阅读:
    linux中内存使用,swap,cache,buffer的含义总结
    haproxy启动时提示失败
    pcs与crmsh命令比较
    用yum下载rpm包(不安装)到指定目录
    Openstack的镜像属性
    ceph 对接openstack liberty
    ceph 创建和删除osd
    linux之fstab文件详解
    OpenStack Swift集群部署流程与简单使用
    swift(Object Storage对象存储服务)(单节点)
  • 原文地址:https://www.cnblogs.com/lvmylife/p/9001256.html
Copyright © 2020-2023  润新知