Azure-Databricks 问答列表

尝试将表从容器传递到 pyspark 变量中,并在 select 语句中使用其列

作者:Rchee 提问时间:11/10/2023

我在 ADLS 容器中有多个增量表,对于每个表,我想生成一个脚本,将它们转换为 parquet 文件并显式列出每个表中的列。这是我目前所拥有的,但它并没有创建不同的 select 语句,只是将所有表中...

如何使用 Databricks 的共享访问签名连接和读取/写入 Azure ADLS Gen2 或 Blob 存储

作者:Patterson 提问时间:11/17/2023

我为我的 Azure 存储帐户创建了 SAS 密钥,请参见下图。 有人可以告诉我如何使用下面列出的密钥之一通过 Databricks 连接到存储帐户吗: 我尝试了建议的答案,但是出现以下错误 [...

在 Databricks 中访问工作区文件的正确方法是什么

作者:jdhao 提问时间:11/17/2023

我的 databricks 运行时版本是 10.4 LTS。我正在尝试使用 python 中的方法访问工作区文件。我尝试了多种不同的方法,但它们都失败了。 假设我的工作区文件路径是 ,我尝试了以下路径...

具有分区文件夹的 Datalake 中的 Databricks 增量表

作者:LordRofticus 提问时间:11/16/2023

我在名为“暂存”的容器中有有关 Azure 存储帐户的数据。 使用 SourceSystem/Dataset 层次结构,我每月还有基于日期的文件夹。在文件夹内,数据以增量格式存储。 在数据块中,我...

UserWarning:createDataFrame 尝试在 pyspark createDataFrame 中进行箭头优化

作者:RunTheGauntlet 提问时间:11/16/2023

在具有运行时 12.2 LTS ML(包括 Apache Spark 3.3.2、Scala 2.12)的 Azure DataBricks 中,我正在尝试运行以下脚本: import pandas...

如何从 Azure Databricks 输出“基础 SQLException”而不是一般异常消息?

作者:LearneR 提问时间:11/16/2023

我们从数据工厂管道调用 Azure Databricks 笔记本,该管道将引入到 Azure Synapse 中。但是,每当笔记本运行失败时,它只会显示以下错误消息: com.databricks....

如果当前值为 null,则获取上一个非 null 值 - Azure Databricks

作者:John Bryan 提问时间:11/16/2023

我有一个表,其中包含以下值 ID Date FinalDate 1 20120101 NULL 1 20120201 20120201 1 20120301 NULL 1 20120401 2012...

Azure Databricks 不会从 RBAC 访问密钥保管库权限错误

作者:geds133 提问时间:11/15/2023

我正在尝试遵循本教程:https://learn.microsoft.com/en-us/azure/databricks/getting-started/connect-to-azure-stora...

如何使用 JDBC/ODBC 驱动程序从 C# .NET 正确连接到 Azure Databricks 仓库

作者:Eugene Goldberg 提问时间:11/14/2023

我们正在尝试在 C# .NET 控制台应用和 Azure Databricks 仓库之间建立连接。 我们按照以下说明设置和配置 ODBC 驱动程序: https://docs.databricks....

数据库中的表列表

作者:Guillermo Colom 提问时间:11/20/2022

我实现了 DataFrame 的 DataFrame,其中包含 Databricks 数据库中所有表的所有列及其类型。 数据库 桌子 列 列类型 违约 表1 列 1 字符串 违约 表1 列 2 布尔...


共17条 当前第1页