VBA round(var,1) 导致浮点错误
作者:Jacob Shaw 提问时间:5/11/2023
我正在使用VBA计算值并将其打印到工作表中。计算值是“单个”,我想将其四舍五入到小数点后一位。出于某种原因,“round”函数四舍五入到最接近的小数点,但它仍然有看起来像浮点误差的东西。我可以手动修复...
浮 问答列表
作者:Jacob Shaw 提问时间:5/11/2023
我正在使用VBA计算值并将其打印到工作表中。计算值是“单个”,我想将其四舍五入到小数点后一位。出于某种原因,“round”函数四舍五入到最接近的小数点,但它仍然有看起来像浮点误差的东西。我可以手动修复...
作者: 提问时间:5/12/2023
我决定将两个数字相乘: 1.0 17299991019999108999910899991119999 结果,我收到了回复: 1.729999101999911e+34 法典: print(1.0...
作者:waldol1 提问时间:5/11/2023
我需要在区间内显示和检查浮点数的大型 numpy 矩阵,并试图避免换行,因此每个打印值都应尽可能短。我已经在使用它,它会产生类似的东西[0,1]np.set_printoptions(precisio...
作者:God I Am Clown 提问时间:5/14/2023
我必须编写代码来打印浮点数位(十六进制)。对于 C++,首先想到的是 x 是存储原始数字的浮点变量。std::cout << std::hex << *reinterpret_cast<uint32_...
作者:pts 提问时间:5/16/2023
我可以在以下 80387 指令之间进行选择: fdiv dword ptr a 和 fdiv qword ptr b 数字 和 是等价的,它们都是 100% 准确的。ab 我应该选择版本...
作者:EarthAndMoon 提问时间:5/18/2023
我制作了这个正则表达式,它应该匹配正整数和负整数 (3, -7)、浮点数 (-6.3, 3.14)、科学记数法 (-17e3, 10e-10, 53e7) 和“不完整”数字 (.1, -.7e+10)...
作者:Zaratruta 提问时间:5/18/2023
让我们考虑以下一段代码: #include <stdio.h> int main() { float x = 0.33; printf("%.100f",x); return 0; } ...
作者:ZeunO8 提问时间:4/26/2023
我正在开发一个允许创建大数(整数和浮点数)的库。您可以在此处找到公共存储库BigNumber 我已经为 和 实现了加法和减法,但是只为BigFloatingBigIntegerBigInteger ...
作者:Roman 提问时间:5/17/2023
有一个合适的.我将其应用于新数据,并看到对应于不同输入的连续相同值。pt = PowerTransformer(method='yeo-johnson', standardize=False) (la...
作者:Zaratruta 提问时间:5/18/2023
我开始学习 c 编程语言。 我知道浮动用以下方式表示: 1 位符号 指数为 8 位 尾数为 23 位 这是否意味着我只能精确地表示精度为 23 位的实数? 也就是说,如果我想表示一个大于 2^23...