属性级别数据流映射的工具建议

Tool recommendation for data flow mapping on attribute level

提问人:dudedev 提问时间:11/16/2023 更新时间:11/16/2023 访问量:9

问:

我正在寻找一种好方法来记录我们项目中的数据流/映射。

基本上,我们有许多输入源,我们从中获取数据,无论是第三方服务还是我们自己的 Web 前端,用户在其中输入信息。

我们将这些数据汇总并存储在我们自己的数据库数据模型中,然后需要将其发送到许多其他服务进行进一步处理,例如执行资格检查、打印一些文档、将信息反馈给初始系统等

当然,每个第三方服务都定义了自己的数据结构,我正在寻找一种方法来记录它们如何对齐。

简化示例 初始系统将名称发送给我们,在我们的数据结构中,我们将其存储为资格检查将获取它作为存档系统,将其作为属性“名称”发送。customer.personalData.firstNamecustomerData.firstNamecustomer.firstName

我们总共有大约 300 个属性,我们接收、处理和转发,没有人知道数据的来源和去向。

所以,我们经常被问到这样的事情。您发送到文档生成的数据来自哪里,或者我们从初始系统获得的属性是否在任何地方使用。

对工具或模板有什么建议吗?

属性 google-cloud-dataflow

评论


答: 暂无答案