使用 stackdriver 对 gcloud spark-submit 进行性能分析

使用 stackdriver 对 gcloud spark-submit 进行性能分析

我正在尝试检查在使用 gcloud spark-submit 时是否可以使用 google stackdriver profiler 来分析我的 spark-scala 应用程序。

我已阅读了 Google Cloud 文档上的用户指南/手册,但仍然不清楚。根据他们的文档,我可以分析 JAVA 应用程序,但没有提及如何在 gcloud 上为 spark-scala 应用程序设置此分析器。

您对此了解多少?欢迎提出您的意见和建议!

答案1

不幸的是,不支持对用 Scala 编写的应用程序进行性能分析,编写时支持的语言是 Java、Python、Go、Node.js。您还可以根据官方分析应用程序

我认为更好的解决方案是查看此 StackOverflow 线程中讨论的可能性分析 Scala Spark 应用程序

相关内容