性能 问答列表

Scala SQL - 读取 id 文件,并在查询的 WHERE 子句中包含 id

作者:Teodorico Levoff 提问时间:3/15/2023

我有一个 ids 的 txt 文件,.txt文件中每行一个 id。我想使用 Scala 编写一个简单的 SQL 查询,该查询读取这些 id 并将这些 id 包含在 where 子句中,因为我只对查询这...

Okio 与 java.io 性能

作者:唐子玄 提问时间:4/5/2022

我阅读了以下博客: https://medium.com/@jerzy.chalupski/a-closer-look-at-the-okio-library-90336e37261 据说” 汇和源...

在内存映射或读取文件之间动态决策

作者:Juergen 提问时间:2/24/2023

文件的内存映射可保存数据副本,因此对于大文件速度更快。 读取文件可以节省对 MMU 的操作,因此对于小文件来说速度更快。 读取大量文件时,为每个文件选择最佳方法可能会有所不同。 我是否需要对文件大小...

处理大量小文件的 AWS Managed Service

作者:gunsnroseshk 提问时间:8/10/2022

预计每天将从本地系统(不去互联网)生成大约 1,000,000 个 json 文件,并预计将汇总以进行分析。每个文本文件小于 4 kb。 我目前的想法是使用 AWS DataSync 将文件上传到 ...

我可以使用 protobuf-net 将 ConcurrentDictionaries 序列化和反序列化为同一个文件,然后读取它吗?

作者:MrBott_a 提问时间:1/13/2023

因此,我正在开发一个海军模拟器的通信管理器,该模拟器管理通信并存储所有数据,我需要序列化以快速且每秒最多 10 次提交大型并发字典,我需要这样做的次数是可变的,因为这是我们实现重放功能的尝试,序列化的...

文件写入顺序对将来的顺序读取有多大影响?

作者:Kdesert 提问时间:2/12/2023

我正在预处理大量原始文件,以便将来进行分析,并按顺序读回它们。原始文件位于网络文件服务器上,处理后的文件将写入本地外部 USB 驱动器(12TB HDD,带 4k 群集的 ReFS)。处理的文件每个为...

EC2 上的 Docker:已安装受磁盘 docker 本身限制的磁盘性能

作者:Marcos Vinícius da Silva 提问时间:6/26/2023

在具有实例存储的 EC2 上运行 docker 容器时,我们注意到,尽管在实例存储上挂载了卷,但容器无法使用本地磁盘的全部容量。我们甚至可以使用 fio 基准测试应用程序重现该行为。以下是更多细节: ...

IO 大小与块大小?

作者:whatisit 提问时间:11/8/2020

我一直对IO大小是否与块大小相同感到困惑。人们在谈论存储性能时可以互换使用它。有人可以帮我定义差异吗?...

Python Vaex 联接数据帧,其中两列的值不匹配

作者:Kristina 提问时间:3/18/2023

嗨,我想知道是否有与以下 pandas python join 语法等效的 Vaex。从本质上讲,我正在尝试将数据帧连接到自身,其中第 1 列中的值与第 1 列中的值匹配,而第 2 列中的值与第 2 ...

EC2 t3.medium 实例 CPU 峰值 +90% 有时 [已关闭]

作者:john 提问时间:10/7/2023

闭。这个问题与编程或软件开发无关。它目前不接受答案。 这个问题似乎不是关于特定的编程问题、软件算法或程序员主要使用的软件工具。如果您认为该问题在另一个 Stack Exchange 站点上是主题,您...


共457条 当前第5页