precision相关内容

PHP - 浮点数精度

$a = '35';$b = '-34.99';回声 ($a + $b); 结果为 0.009999999999998 这是怎么回事?我想知道为什么我的程序总是报告奇怪的结果. 为什么 PHP 不返回预期的 0.01? 解决方案 因为浮点运算 != 实数运算.由于不精确而导致的差异的一个例子是,对于某些浮点数 a 和 b,(a+b)-b != a.这适用于任何使用浮动的语言. ..
发布时间:2021-12-01 10:45:40 PHP

十进制对双!- 我应该在什么时候使用哪一个?

我一直看到人们在 C# 中使用双精度.我知道我在某处读到双打有时会失去精度.我的问题是什么时候应该使用双精度型,什么时候应该使用十进制类型?哪种类型适合货币计算?(即超过 1 亿美元) 解决方案 对于金钱,总是十进制.这就是它被创建的原因. 如果数字必须正确相加或平衡,请使用小数.这包括人们可能手动完成的任何财务存储或计算、分数或其他数字. 如果数字的确切值不重要,请使用 do ..
发布时间:2021-12-01 09:07:38 C#/.NET

将浮点数限制为两位小数

我希望 a 被四舍五入为 13.95. >>>一种13.949999999999999>>>回合(a, 2)13.949999999999999 round 函数没有按照我预期的方式工作. 解决方案 您遇到了老问题 带有浮点数,并非所有数字都可以精确表示.命令行只是从内存中向您显示完整的浮点形式. 使用浮点表示,您的四舍五入版本是相同的数字.由于计算机是二进制的,它们将浮点数 ..
发布时间:2021-11-30 23:17:15 Python

在 Java 中使用 double 保持精度

public class doublePrecision {公共静态无效主(字符串 [] args){双倍总数 = 0;总计 += 5.6;总计 += 5.8;System.out.println(总);}} 上面的代码打印: 11.399999999999 我如何才能将其打印(或能够用作)11.4? 解决方案 正如其他人提到的,您可能想要使用 BigDecimal 类,如果您想精确 ..
发布时间:2021-11-25 10:35:00 Java开发

iOS 7.1 CommonCrypto 库抱怨:隐式转换失去整数精度:'NSUInteger' (unsigned long) to CC_LONG (unsigned int)

我在从文件中执行 MD5 时收到上述错误(在标题中).. 我通常可以处理这些类型的 32->64 位转换问题..但在这种情况下,我不知道我应该做什么CC_MD5 是 CommonCrypto->CommonDigest 的一部分,后者是 iOS7.1 附带的库.我假设 [inputData length] 正在返回 NSUInteger,这就是问题所在,但是我可以简单地从 UL 转换为 UI 吗? ..
发布时间:2021-11-25 07:13:10 移动开发

JavaScript 64 位数字精度

有没有办法在 JavaScript 中表示一个高于 53 位精度的数字?换句话说,有没有办法表示 64 位精度数? 我正在尝试实现一些逻辑,其中 64 位数字的每一位都代表某些内容.当我尝试将位设置为高于 2^53 时,我会丢失较低的有效位. Math.pow(2,53) + Math.pow(2,0) == Math.pow(2,53) 有没有办法实现自定义库或其他东西来实现这一点? ..
发布时间:2021-11-25 05:36:38 前端开发

.net 4.5.2 中 Math.Exp 或双重实现的更改

如果我运行语句 Math.Exp(113.62826122038274).ToString("R") 在安装了 .net 4.5.1 的机器上,我得到了答案 2.2290860617259248E+49 但是,如果我在安装了 .net framework 4.5.2 的机器上运行相同的命令,我就会得到答案 2.2290860617259246E+49 (即最后一位数字改变) 我意 ..
发布时间:2021-11-24 09:34:03 C#/.NET

在 Java 中使用 double 保持精度

public class doublePrecision {公共静态无效主(字符串 [] args){双倍总数 = 0;总计 += 5.6;总计 += 5.8;System.out.println(总);}} 上面的代码打印: 11.399999999999 我如何才能将其打印(或能够用作)11.4? 解决方案 正如其他人提到的,您可能想要使用 BigDecimal 类,如果您想精确 ..
发布时间:2021-11-19 22:32:10 Java开发

使用浮点 NumPy 数组进行比较和相关操作

我有一组随机浮点数,我需要将它与另一个以不同顺序具有相同值的数组进行比较.就此而言,我使用总和、乘积(以及其他组合,具体取决于表格的维度以及所需的方程数量). 尽管如此,我在根据值的顺序对数组执行总和(或乘积)时遇到了精度问题. 这是一个简单的独立示例来说明这个问题: 将 numpy 导入为 npn = 10米 = 4标签 = np.random.rand(n, m)s1 = np. ..
发布时间:2021-11-18 04:38:03 Python

ARM 是否支持 64 位浮点数的 SIMD 操作?

NEON 可以对 32 位浮点数进行 SIMD 操作.但不对 64 位浮点数进行 SIMD 操作.VFU 不是 SIMD.它只能对一个元素进行 32 位或 64 位浮点运算. ARM 是否支持 64 位浮点数的 SIMD 运算? 解决方案 这仅适用于支持 ARMv8 的处理器,并且仅适用于运行 Aarch64 指令集的情况.这在 Aarch32 指令集中是不可能的. 然而,大多 ..
发布时间:2021-11-17 22:27:59 其他开发

ARM 是否支持 64 位浮点数的 SIMD 操作?

NEON 可以对 32 位浮点数进行 SIMD 操作.但不对 64 位浮点数进行 SIMD 操作.VFU 不是 SIMD.它只能对一个元素进行 32 位或 64 位浮点运算. ARM 是否支持 64 位浮点数的 SIMD 运算? 解决方案 这仅适用于支持 ARMv8 的处理器,并且仅适用于运行 Aarch64 指令集的情况.这在 Aarch32 指令集中是不可能的. 然而,大多 ..
发布时间:2021-11-17 22:27:15 其他开发

比较一个 32 位浮点数和一个 32 位整数而不转换为双精度,当任一值可能太大而无法完全适合另一种类型时

我有一个 32 位浮点 f 数(已知为正数),我需要将其转换为 32 位无符号整数.它的量级可能太大而无法容纳.此外,下游计算需要一些空间.我可以将最大可接受值 m 计算为 32 位整数.如果 f 在数学上,我如何在 C++11 中有效地确定受限的 32 位机器(ARM M4F).请注意,这两个值的类型不匹配.以下三种方法各有各的问题: static_cast(f) :我认为如果 f 不适合 ..
发布时间:2021-11-17 21:58:59 C/C++开发

BBP 算法所需的工作精度?

我希望在低内存环境中计算 Pi 的 n 位数.由于我没有可用的小数,这个 Python 中的仅整数 BBP 算法 是一个很好的起点.我一次只需要计算一位 Pi.如何确定我可以设置的最低值 D,即“工作精度的位数"? D=4 给了我很多正确的数字,但有几个数字会差一位.例如,计算精度为 4 的数字 393 给我 0xafda,我从中提取数字 0xa.但是,正确的数字是 0xb. 无论我设 ..
发布时间:2021-10-26 18:40:55 Python

向量双双浮点运算

存在双精度浮点不够用的工作负载,因此需要四精度.这很少在硬件中提供,因此解决方法是使用 double-double,其中 128 位数字由一对 64 位数字表示.这不是真正的 IEEE-754 四精度 - 一方面,您不会获得任何额外的指数位 - 但在许多用途上已经足够接近,并且比纯软件实现快得多. 许多计算机提供向量浮点运算,最好将它们用于双双运算.这可能吗?特别是,在 https 中查看 ..

iOS 中 UITouch 时间戳的精度是多少?

iOS 中 UITouch 类的时间戳属性有多精确?毫秒?几十毫秒?我正在将 iPad 的内部测量值与贴在屏幕上的自定义触摸检测电路进行比较,两者之间存在相当大的差异(标准偏差 ~ 15 毫秒). 我已经看到它表明时间戳是根据帧刷新间隔离散化的,但我得到的分布看起来是连续的. 解决方案 在 iPad Air 2 之前,iDevices 的触摸检测轮询是 60 Hz.iPad Air ..
发布时间:2021-09-09 18:57:28 移动开发

以微秒为单位的日期时间

是否将微秒的日期时间值转换为具有精确精度的双精度值? 例如.我的日期为 2017 年 7 月 3 日 10:00:00 00 Ticks 636346728000000050.当我得到 42919.4166666667 时,它转换为双倍.同样,我已将 50 个滴答添加到当前日期,即.2017 年 7 月 3 日 10:00:00 00 Ticks 636346728000000100 转换为 ..
发布时间:2021-09-07 19:48:30 C#/.NET