如何让“concurrent.futures”处理流式处理任务?
作者:SupernoobBran 提问时间:6/21/2023
concurrent.futures是一个专为异步执行任务而设计的 Python 包。 它的典型用法如下(从链接复制): # SuperFastPython.com # example of wai...
并行处理 问答列表
作者:SupernoobBran 提问时间:6/21/2023
concurrent.futures是一个专为异步执行任务而设计的 Python 包。 它的典型用法如下(从链接复制): # SuperFastPython.com # example of wai...
作者:Will 提问时间:10/27/2020
首次启动 MATLAB 并行池时,通常需要几秒钟的时间。因此,在用户交互式应用程序中,有一种动机是确保在计算任务的第一个需求到来之前有一个并行池在运行,因此启动并行池的过程不会添加到响应请求的总时间中...
作者:Bahram Gozalov 提问时间:10/18/2023
我最近一直在做一个项目,我遇到了一个问题,我不想在小向量上使用 std::execution::p ar,因为这会产生开销。 好吧,从理论上讲,这可以通过返回 std::execution::p a...
作者:ahmad hajyahia 提问时间:8/8/2023
我正在尝试在 c 中使用 OMP 并行化嵌套的 for 循环,在某些时候我想中断两个循环并停止所有线程并退出函数。我尝试使用,但我收到此错误:#pragma omp cancel#pragma omp...
作者:Caleb Sytsma 提问时间:8/15/2023
我正在编写一个代码,用于计算与每个人口像素单元格的给定距离内的公园面积。这两个数据集都是 30m 栅格,我从中提取类和 xy 坐标(以米为单位)以创建数据帧。由于数据集非常庞大,我正在尝试逐个县进行计...
作者:Sergio Bolívar 提问时间:8/15/2023
我正在尝试并行化放置在各个子文件夹中的多个 bash 文件():script.sh ├── subfolder1 │ ├── subfolder1_script.sh ├── subfolder...
作者:Michael 提问时间:8/29/2023
使用 MOSEK、CVXPY 和 joblib 出现一些奇怪的行为。尝试在 Python 中并行化某些作业(甚至没有调用 Mosek)并得到类似 terminate called after thr...
作者:YoussefMabrouk 提问时间:8/19/2023
我正在尝试对总大小为 3 Tb 的数据运行 Python 脚本来计算非常简单的统计数据。数据分为 3000 个目录,每个目录包含一个大小为 1Gb(“.trr”格式)的压缩文件。 为了加载数据,我使...
作者:velenos14 提问时间:9/4/2023
我正在尝试使用 MPI-IO 从 C++ 中的缓冲区将数据写入磁盘。 为了简洁和 MWE,每个等级在其缓冲区中保留 2 个整数。 我希望排名 0 首先将其 2 个元素写入文件中,占据 2 个整数,然...
作者:Anton Rydahl 提问时间:9/6/2023
我认为 C++ 标准中没有 std::accumulate 的并行版本令人困惑。在我看来,并行实现它是微不足道的,例如,基于 OpenMP 或 SIMD 指令。有没有人很好地解释为什么标准委员会选择引...