博客首页 | 排行榜 |

csxcs366的博客--LABVIEW CVI

http://labview.weebly.com/ 群:80754347 群:78561268 群:37591940

个人档案
博文分类
labview的深入探索----双精度数精度问题  2008-09-11 20:53
日前帮朋友看一个程序,一个WHILE循环,退出条件是等于一个双精度数,结果程序未按照预想条件退出,由此想到了双精度数的精度问题。

计算机中的双精度数都存在精度损失的问题,因此一般不宜用相等进行判断。





可以看出,0.8+(0.42-0.5)!=0而下面(0.08+0.42)-0.5 =0
上面!=0但是+1后却等于1。

双精度浮点数的确不适合用相等来判断。
类别:LABVIEW的深入探索 |
上一篇:黑色幽默---中国的9.11 | 下一篇:黑色幽默-------“郭京毅案”:某些人为何鼓吹外资并购(转)
以下网友评论只代表其个人观点,不代表本网站的观点或立场