Delta-Lake 问答列表

增量实时表中的 skipChangeCommits

作者:Anil Panda 提问时间:9/3/2023

我正在尝试创建一个 DLT 管道来实现 SCD 类型 1。但是,在我最初的完全刷新之后,当我尝试进行增量刷新时,它失败并出现以下错误: “发生错误,因为我们检测到对源表中的一行或多行进行了更新或删除...

有没有办法访问增量表旧列名?

作者:Roland R. 提问时间:9/7/2023

我有一个表格,上面有客户 ID、creditcard_number和creditcard_type(美国运通卡、万事达卡等) 我正在努力找到一种方法: 使用增量湖函数将列名 creditcard_t...

增量表:时间旅行与时间戳截至和版本是否返回相同的结果?

作者:drama 提问时间:11/16/2023

在对增量文件进行时间旅行时,“截至时间戳”和“截至版本”是否返回相同的结果?或者他们中的任何一个更受欢迎、更准确或更出色?...

具有分区文件夹的 Datalake 中的 Databricks 增量表

作者:LordRofticus 提问时间:11/16/2023

我在名为“暂存”的容器中有有关 Azure 存储帐户的数据。 使用 SourceSystem/Dataset 层次结构,我每月还有基于日期的文件夹。在文件夹内,数据以增量格式存储。 在数据块中,我...

在 Azure 数据工厂或 Azure 逻辑应用中将 Delta 表转换为 JSON

作者:Toyesh Gupta 提问时间:11/16/2023

因此,我的表包含超过 5000 万条记录,因此以增量格式而不是 CSV 存储,并存储在 Azure Data Lake Storage Gen2 中。我想在 Azure 数据工厂或 Azure 逻辑应...


共5条 当前第1页