精度 问答列表

如何避免具有多列的 numpy 数组的精确求和

作者:ead 提问时间:4/4/2019

我一直认为,numpy 使用一种成对求和,这也确保了 - 操作的高精度:float32 import numpy as np N=17*10**6 # float32-precision no lo...

将双精度值四舍五入到(有点)较低的精度的好方法是什么?

作者:MuldeR 提问时间:1/4/2013

我的问题是我必须使用第三方函数/算法,该函数/算法将双精度值数组作为输入,但显然对输入数据中的非常小的变化很敏感。但是,对于我的应用程序,我必须为(几乎)相同的输入获得相同的结果!特别是,我有两个测试...

如何防止点多边形滑动碰撞检测中的浮点误差

作者:ARutherford 提问时间:5/11/2019

我正在尝试编写一个函数来处理我正在编程的游戏中的移动。我所拥有的几乎有效,但有几种情况会崩溃。 我编写了一个最小的演示示例,如下所示。在此示例中,我尝试计算由点和移动矢量表示的对象的行程。根据多边形...

在完全使用 javascript 的 Web 堆栈中,从十进制货币源转换时如何避免浮点错误?

作者:Kzqai 提问时间:5/23/2019

我最近不得不设计一个完全使用javascript,express.js,REST apis,完整节点/浏览器js堆栈的资金处理应用程序。不幸的是,该应用程序处理了各种自定义计算,例如平均结果。当然,在...

在 R 中处理 IEEE 754 浮点不精确问题的最佳方法是什么?

作者:Bear Bile Farming is Torture 提问时间:6/17/2019

所以问题是 .1 + .2 =/= .3 语言是 R。 我有一堆分数,最终总和应该为 1。我有一个失败的断言语句,因为由于这个问题,这种不变性并不总是成立。 最好的解决方案是什么?...

修复 R 中的浮点错误 - MDMR 包显示近似不等式而不是精确答案的错误

作者:AldehydeDeva 提问时间:7/4/2019

我正在使用 R 中最新版本的 MDMR 包来分析一组自变量和因变量之间是否存在显着关系。但是,当我执行如下操作时: library(MDMR) results<-mdmr(X=predictor_v...

从 Oracle 到 Teradata 的数字类型

作者:mozas 提问时间:7/12/2019

我需要在 Teradata 中复制一些 Oracle 表。 我有一个脚本可以为 Teradata 的表创建 sql,到目前为止一切正常,但我有一个小问题。 我在表“all_tab_columns”中...

我试图将浮点数四舍五入到小数点后两位,但这是不正确的。如何修复 C++ 中的这个舍入错误?

作者:Hinko Pih Pih 提问时间:7/14/2019

我在四舍五入浮点数时遇到了问题。我正在解决一项任务,您需要将结果四舍五入到小数点后两位。但是当小数点后第三个点是 5 时,我不能这样做,因为它存储不正确。 例如:我的结果等于 1.005,应该四舍五...

在 Java 中使用 double 计算视锥体的侧面时如何处理浮点精度

作者:bunting 提问时间:7/14/2019

我正在尝试使用下面的代码计算视锥体的侧表面。 输入:2 个节点,包含 x、y、z 值(绝对位置)和半径(位置半径)均为双精度 到目前为止我正在做什么: 1. 计算视锥体的长度 2.计算视锥体的侧表...

为什么我们渐近地接近值 0 比值 1 “更多”?

作者:Alecos Papadopoulos 提问时间:7/29/2019

对于这里的人来说,这可能是基本的。我只是一个计算机用户。 我在标准正态累积分布函数 (CDF) 的极值(0 和 1)附近徘徊,我注意到我们可以得到变量的大负值的非常小的概率值,但对于大的正值,我们在...


共694条 当前第47页