浮点 问答列表

浮点数学坏了吗?

作者:Cato Johnston 提问时间:2/26/2009

请考虑以下代码: 0.1 + 0.2 == 0.3 -> false 0.1 + 0.2 -> 0.30000000000000004 为什么会出现这些不准确之处?...

浮点数学坏了吗?

作者:Cato Johnston 提问时间:2/26/2009

请考虑以下代码: 0.1 + 0.2 == 0.3 -> false 0.1 + 0.2 -> 0.30000000000000004 为什么会出现这些不准确之处?...

浮点数学坏了吗?

作者:Cato Johnston 提问时间:2/26/2009

请考虑以下代码: 0.1 + 0.2 == 0.3 -> false 0.1 + 0.2 -> 0.30000000000000004 为什么会出现这些不准确之处?...

浮点数学坏了吗?

作者:Cato Johnston 提问时间:2/26/2009

请考虑以下代码: 0.1 + 0.2 == 0.3 -> false 0.1 + 0.2 -> 0.30000000000000004 为什么会出现这些不准确之处?...

Python floor division 中的舍入错误

作者:0x539 提问时间:7/26/2016

我知道在浮点运算中会发生舍入错误,但有人可以解释一下原因吗: >>> 8.0 / 0.4 # as expected 20.0 >>> floor(8.0 / 0.4) # int works to...

float8、float16、float32、float64 和 float128 可以包含多少位数字?

作者:mathguy 提问时间:6/9/2019

Numpy 的 dtype 文档仅显示每个浮点数类型的“x 位指数,y 位尾数”,但我无法将其准确转换为小数点前后的数字。有没有简单的公式/表格可以查找?...

Java 中的 x86 80 位浮点类型

作者:box 提问时间:10/29/2015

我想模拟 x86 扩展精度类型,并在 Java 中对其他类型执行算术运算和强制转换。 我可以尝试使用 BigDecimal 实现它,但涵盖围绕 NaN、无穷大和强制转换的所有特殊情况可能是一项繁琐的...

JavaScript 中的 BigDecimal

作者:SnakeDoc 提问时间:5/25/2013

我对 JavaScript 非常陌生(我有 Java 背景),我正在尝试用少量资金进行一些财务计算。 我最初的想法是: <script type="text/javascript"> var n...

没有溢流和下溢,对于浮点数 x,x/4 是否总是等于 x/2/2(对于 x*4 == x*2*2)?

作者:wcminipgasker2023 提问时间:10/13/2023

例如,据我所知,一个浮点 x,其 x/n^2 可能不等于 x/n/n,因为在 x/n/n 中,这将首先创建一个中间 x/n。例如: document.write(1.23456789/49 == 1...

JavaScript 中错误地舍入了大数字

作者:Jaanus 提问时间:9/4/2009

请参阅此代码: var jsonString = '{"id":714341252076979033,"type":"FUZZY"}'; var jsonParsed = JSON.parse(js...


共635条 当前第2页