浮动精度 问答列表

如果美分和聪之间的差异太大,如何在法定货币和加密货币之间进行正确的计算?

作者:Eugene Shmorgun 提问时间:2/27/2023

我正在调查法定货币和加密货币之间的相互重新计算问题,我发现,在我看来,没有适当的方法来支持稳定的重新计算。让我用例子来解释问题。 我不确定是否可能提供指向另一个站点的链接,但这仅用于演示。 例如,我正...

javascript 中的货币转换和浮点精度

作者:fossmoat 提问时间:2/27/2023

由于 JavaScript 在浮点数方面有其怪癖(例如,0.1+0.2 是 0.3 > 以及类似的除法),如何处理货币转换?通常,货币兑换率从小数点后 6 位或更多位开始浮动。将它们从一种货币转换为另...

解决多项式乘法和除法“溢出”问题

作者:yupbank 提问时间:2/25/2022

我有一个 1 次多项式的系数列表,其中a[i][0]*x^1 + a[i][1] a = np.array([[ 1. , 77.48514702], [ 1. , 0. ], [ 1. , 2...

dplyr::filter 中 == 的替代项,以适应浮点数

作者:Nate 提问时间:4/12/2023

首先,我要说的是,我知道我们受到计算机算术和浮点数的限制,有时 0.8 不等于 0.8。我很好奇使用 in 或替代方法解决这个问题的方法。==dplyr::filter 我正在处理这段正常运行的代码...

程序给出不准确的值

作者:Udesh 提问时间:4/20/2023

下面的程序计算 262 + 261 + 260 + ... + 21 + 20。 使用类型存储:doublesum double sum = 0; for (int i = 0; i < 63;...

避免浮点数舍入不精确

作者: 提问时间:10/8/2022

在用浮点数进行除法时,我经常会遇到不精确的情况(例如,等)。5.000000001 有没有办法在使用浮点数时不出现浮点不精确问题? 也许有更好的选择可以避免它? 提前感谢您的所有回答!...

大数python的乘法

作者: 提问时间:5/12/2023

我决定将两个数字相乘: 1.0 17299991019999108999910899991119999 结果,我收到了回复: 1.729999101999911e+34 法典: print(1.0...

OpenGL 图形中放大/缩小范围较大的渲染精度问题

作者:DavidH 提问时间:5/25/2023

我有一个简单的基于相机的“现代”OpenGL 3D 图形显示器,用于渲染由指定点、线和曲线(例如立方体、圆柱体等)的集合构建的相对简单的对象。绘制了三条不同颜色的固定长度线,它们在世界空间的中心相互相...

C 和 Matlab 的指数限制

作者:Leo 提问时间:6/2/2023

在计算机中,浮点数的数学运算实际上是分别使用基数和指数数进行处理的,然后将它们组合在一起。我们在计算基础教科书中学到了这一点。但是,我发现 C 程序和 MATLAB 中的限制完全不同。下面是一个示例:...

Lua 浮点精度搞砸了?

作者:Riccardo Di Michele 提问时间:5/9/2023

免责声明:我在桌面模拟器游戏中使用 lua,我不知道这是否以任何方式干扰了 lua 的“正常工作” 我已经预先计算了一堆向量: grey_res = {55.00, 3, -10.80}, c...


共110条 当前第10页