设为首页收藏本站

EPS数据狗论坛

 找回密码
 立即注册

QQ登录

只需一步,快速开始

查看: 1879|回复: 0

[其他] 浮点数的性质

[复制链接]

30

主题

220

金钱

355

积分

入门用户

发表于 2019-6-12 09:40:51 | 显示全部楼层 |阅读模式

浮点数的性质
1、浮点产生原因与常见性质                                                
excel使用的是IEEE754(IEEE二进制浮点数算术标准)存储和计算数据,由于电脑计算时十进制与二进制转化与保留精度等等影响,结果可能出现异常。

常见影响:                                                
1)  计算结果出现大量小数或者变成科学计数法下的非0极小数                                                
例,  =4.1-4 结果在excel里为0.0999999999999996
1.jpg
2)  有些数值无法在excel里直接录入,不然你就试下32768.598                                
(这数字直接录入下会变为32768.5979999999 )  

2,浮点数的处理:                                                
新手容易犯的另一个错误是修改单元格格式的小数位数来处理浮点精度,但这操作只治标不是本,并没有处理数值精度,通常建议套嵌round函数解决浮点精度(excel选项里的将精度设置为所显示的精度 这个功能会处理全部数据且无法返回,尽量避免用这功能处理)      

3,高精度浮点数带来的函数问题                                                
rand函数结果的精度是高于15位的,因此用rand随机产生一个小数并对照手录2次,再配合其他函数结果对比,大家会发现一个问题部分函数能识别这种高于15位已经无法用调高小数位数发现的精度差异,例如rank,frequency,match,vlookup,mode,lookup等等,都是能识别这种精度差异的。
2.jpg
看到这里肯定有人会问,有没有什么函数能直接识别b2和b4为不同数值,答案是当然有,有个函数 delta 可以识别这种浮点精度  (注意识别超15位精度差异的性质只存在于excel,这函数在wps似乎只识别15位精度)   
3.jpg
借助这个函数,我们还可以发现,聚合函数与四则运算并不能修整这种浮点精度到15位精度

4,看不见的浮点                                       
在上面这个案例相信很多熟悉函数的人都相对清楚,在看到数值小数位数过高或者涉及时间的问题时都知道需要修正精度处理                                       
但是,excel里有一类更危险的性质,                                       
目前这类算式里找到的最简单的算式为 =0.1+0.2                                       
这个值无论使用F9,公式求值还是单元格格式调高,结果都是0.3                                       
但是,使用公式 =match(0.1+0.2,{0.2,0.3},0)                                       
结果是报错的
4.jpg
5.jpg
原因上述已经解释过了,但是这个浮点数很有意思,并没有产生大量小数位数使我们下意识规避,这点在检查数组公式时F9返回计算结果时尤其重要  
因此,在碰到涉及本文提及的函数,以及在确保公式本身无误的前提下公式结果异常,请考虑本文最后提到的这条性质。
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

客服中心
关闭
在线时间:
周一~周五
8:30-17:30
QQ群:
653541906
联系电话:
010-85786021-8017
在线咨询
客服中心

意见反馈|网站地图|手机版|小黑屋|EPS数据狗论坛 ( 京ICP备09019565号-3 )   

Powered by BFIT! X3.4

© 2008-2028 BFIT Inc.

快速回复 返回顶部 返回列表