metrics spark receiver 自定义Apache Spark Streaming接收器配置指南
metrics-spark-receiver用于metrics-spark-reporter的Apache Spark Streaming接收器,可以帮助你轻松获取应用程序中的指标流。要在您的Spark应用程序中接收这些指标,首先需要添加依赖项:
<dependency>
<groupid>fr.ippon.spark.metricsgroupid>
<artifactid>metrics-spark-receiverartifactid>
<version>1.1version>
dependency>
添加好依赖后,您可以使用JavaStreamingContext.receiverStream()方法来读取通过自定义接收器传入的指标流:
ssc.receive
这样,metrics-spark-receiver将帮助您监控并收集Apache Spark Streaming中的重要指标。
下载地址
用户评论