点精度 问答列表

在浮点数学中将数字除以除数时,如果结果不是积分浮点数

作者:peter duffy 提问时间:8/24/2020

当我在 python 中运行此代码时 def is_cool(n): if (n/7).is_integer(): return True else: return False for i...

MySQL 疯狂 (?) 浮点行为

作者:obe 提问时间:8/30/2020

在MySQL 8.0.21上,我有一个空表(),其中包含一列: ,类型为 。Tblnumfloat 我插入一行,值为:0.1 INSERT INTO Tbl(num) VALUES(0.1) ...

两种乘积之和和差的精确浮点计算

作者:njuffa 提问时间:8/31/2020

两个乘积的差值和两个乘积之和是在各种常见计算中发现的两个基元。diff_of_products (a,b,c,d) := ab - cd 和 sum_of_products(a,b,c,d) := a...

为什么 4*0.1 的浮点值在 Python 3 中看起来不错,但 3*0.1 却不然?

作者:Aivar 提问时间:9/21/2016

我知道大多数小数没有精确的浮点表示(浮点数学坏了吗? 但我不明白为什么打印得很好,但不是,当 这两个值实际上都有丑陋的十进制表示:4*0.10.43*0.1 >>> 3*0.1 0.3000000...

在 C 中添加两个大双数会得到不正确的结果

作者:TheDoctor Bombastic 提问时间:10/18/2020

我想问你一个问题,关于在 C 语言中将两个大数字相加。 假设有两个数字是双倍的:1.31E+42 和 1.399E+43。 如果我在Excel中进行添加,结果是153000000000000000...

数据类型浮点数的精度(IEEE 754 单精度)

作者:user9564464 提问时间:11/6/2020

我在 IEEE 754 的维基百科页面上找到了一张图表,显示了浮点精度与实际浮点值 (https://en.wikipedia.org/wiki/IEEE_754#Formats) 之间的关系: 将...

PHP 中的浮点数 -- 奇怪的行为 [重复]

作者:user1442439 提问时间:11/20/2020

这个问题在这里已经有答案了: php, var_export 失败并显示 float [duplicate] (1 个答案) 浮点数学坏了吗? (34 个答案) 浮点数 / 浮点数 = 奇怪的结果 (...

为什么 numeric_limits Machine Epsilon 不满足 1+e>1 条件?

作者:Edoren 提问时间:12/24/2020

如果我没记错的话,机器 Epsilon 的定义是满足条件的最小数字: 我试图利用 但该值不满足这一点,如果您尝试使用以下命令获取先前的浮点数:std::numeric_limits<float>::...

java-处理浮点舍入误差,如何保持弧度合理

作者:cubesareneat 提问时间:1/11/2021

我修改了这个 arcball 类,以便每次调用 arcball.rollforward(PI/180);将矩阵旋转 1 度。 我试图设置它,以便使用累积的浮点数 rotatebywithinclude...

计算的准确性

作者:Elizabeth Welz 提问时间:2/7/2021

如果 x 和 y 都可以(确切地)存储在系统中的浮点中,计算精度是多少。 x - (x/y) * y ...


共176条 当前第11页