通过在 Unity 目录之上创建的 Delta 共享读取多个架构,该共享以流式处理方式涉及 400+ 并发更新

read multiple schemas through a Delta share made on top of Unity catalog that involves 400+ concurrent updates in a streaming way

提问人:Newbie 提问时间:11/16/2023 更新时间:11/16/2023 访问量:9

问:

如何通过涉及 400+ 并发更新的增量共享以流式处理方式读取多个架构。

DLT 似乎对管道上的 100 个并发更新有限制。最初,我想在单个管道中创建多个独立的流。kafka 还是 Kinesis 更好?

apache-kafka databricks 流式处理 amazon-kinesis delta-live-tables

评论


答: 暂无答案