hdfs 问答列表

包含内容的 Hadoop 复制目录

作者:angeliquelinde 提问时间:1/4/2023

我是Hadoop的新手,正在为大学做一个项目。我有一个名为“docs”的文件夹,里面有几个文本文件。当我在本地查看它时,我可以看到那里有各种文本文件。当我将其复制到 Hadoop 时,目录为空。 下...

使用 Vaex 导入 HDFS 数据

作者:Beavis Luckyano 提问时间:8/3/2023

因此,我正在寻找替代方案来从 Spark 旁边的 HDFS 访问大量数据,我找到了 vaex。无论如何都可以使用 vaex 直接从 HDFS 访问数据吗?我能有一些你们找到的示例行吗?谢谢...

通过python读取hadoop序列文件

作者:vot3tada 提问时间:11/4/2023

我需要使用 python 3.8 读取序列文件。我该怎么做?我正在使用 pyarrow 库连接到 hdfs。 我也刚刚尝试解码文件,但它解码时出错了。它不能被 utf-8 解码。CP1251 无法全...

我们如何在AWK中添加日期比较的条件

作者:Anshuman Madhav 提问时间:4/6/2022

我给以下命令 hdfs dfs -ls "+hdfsdir" | awk '{$6 == '2022-03-07' ; {print $8}' 6 美元包含格式为 2022-03-07 的日期。...


共4条 当前第1页