提问人:MaiTruongSon 提问时间:10/30/2023 更新时间:10/30/2023 访问量:24
S3 存储的开源 Kafka Sink 连接器
Open-source Kafka Sink Connector to S3 storage
问:
我正在构建一个从 Kafka 集群到 S3 存储的自适应数据流管道系统。使用所有使用 S3 协议传输数据的对象存储(Ceph、MinIO、Hitachi Storage 等)应该是灵活的,而不仅仅是 AWS S3。
然后,我需要找到一个开源的 Kafka Sink Connector,将数据从 Kafka 代理流式传输到 S3 存储。
我搜索了几天,我发现的只是许多特定类型存储的接收器连接器,而不是所有 S3 协议服务。
因此,我真的很想问一下,是否有人已经找到或开发了任何符合我要求的 Sink 连接器:是否开源(在 Apache 2.0 许可下)并流式传输到所有 S3 协议对象存储?
非常感谢!
答: 暂无答案
评论