捕获 SQL 流量的 Apache Spark 指标？（字节读取/字节写入）

Apache Spark metrics that capture SQL traffic? (bytesRead/bytesWritten)

提问人：Riccardo 提问时间：11/16/2023 最后编辑：AswinRiccardo 更新时间：11/16/2023 访问量：18

问：

我正在使用 spark-monitoring 来捕获 Spark 的指标并将其传输到 LogAnalytics。一些默认指标包括 Executor 任务指标，并且是 Executor 任务指标的一部分。但是，它们有一个限制，即仅在 HDFS 中读取/写入时捕获流量，如果我在 SQL 数据库中执行操作，它不会报告此数据。bytesReadbytesWritten

我的问题是：是否有任何指标可以捕获来自/流向 SQL 源/接收器的流量？或者是否有任何自定义方法可以使用侦听器捕获此内容？

apache-spark 监视 指标 azure-log-analytics

评论

答： 暂无答案

上一个：通过 AppDynamics APM 进行已删除/非活动用户监控

下一个：面临错误：-101 IBM DB2 SQL Run 中的语句太长或太复杂