尝试将表从容器传递到 pyspark 变量中,并在 select 语句中使用其列
作者:Rchee 提问时间:11/10/2023
我在 ADLS 容器中有多个增量表,对于每个表,我想生成一个脚本,将它们转换为 parquet 文件并显式列出每个表中的列。这是我目前所拥有的,但它并没有创建不同的 select 语句,只是将所有表中...
azure-databricks 问答列表
作者:Rchee 提问时间:11/10/2023
我在 ADLS 容器中有多个增量表,对于每个表,我想生成一个脚本,将它们转换为 parquet 文件并显式列出每个表中的列。这是我目前所拥有的,但它并没有创建不同的 select 语句,只是将所有表中...
作者:Patterson 提问时间:11/17/2023
我为我的 Azure 存储帐户创建了 SAS 密钥,请参见下图。 有人可以告诉我如何使用下面列出的密钥之一通过 Databricks 连接到存储帐户吗: 我尝试了建议的答案,但是出现以下错误 [...
作者:jdhao 提问时间:11/17/2023
我的 databricks 运行时版本是 10.4 LTS。我正在尝试使用 python 中的方法访问工作区文件。我尝试了多种不同的方法,但它们都失败了。 假设我的工作区文件路径是 ,我尝试了以下路径...
作者:LordRofticus 提问时间:11/16/2023
我在名为“暂存”的容器中有有关 Azure 存储帐户的数据。 使用 SourceSystem/Dataset 层次结构,我每月还有基于日期的文件夹。在文件夹内,数据以增量格式存储。 在数据块中,我...
作者:RunTheGauntlet 提问时间:11/16/2023
在具有运行时 12.2 LTS ML(包括 Apache Spark 3.3.2、Scala 2.12)的 Azure DataBricks 中,我正在尝试运行以下脚本: import pandas...
作者:LearneR 提问时间:11/16/2023
我们从数据工厂管道调用 Azure Databricks 笔记本,该管道将引入到 Azure Synapse 中。但是,每当笔记本运行失败时,它只会显示以下错误消息: com.databricks....
作者:John Bryan 提问时间:11/16/2023
我有一个表,其中包含以下值 ID Date FinalDate 1 20120101 NULL 1 20120201 20120201 1 20120301 NULL 1 20120401 2012...
作者:geds133 提问时间:11/15/2023
我正在尝试遵循本教程:https://learn.microsoft.com/en-us/azure/databricks/getting-started/connect-to-azure-stora...
作者:Eugene Goldberg 提问时间:11/14/2023
我们正在尝试在 C# .NET 控制台应用和 Azure Databricks 仓库之间建立连接。 我们按照以下说明设置和配置 ODBC 驱动程序: https://docs.databricks....
作者:Guillermo Colom 提问时间:11/20/2022
我实现了 DataFrame 的 DataFrame,其中包含 Databricks 数据库中所有表的所有列及其类型。 数据库 桌子 列 列类型 违约 表1 列 1 字符串 违约 表1 列 2 布尔...