本文介绍了Dataproc Cluster上是否提供Spark UI?的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

希望与Dataproc中默认集群上的传统Spark Web GUI进行交互.

Looking to interact with the traditional Spark Web GUI on default clusters in Dataproc.

推荐答案

这可以通过创建到Dataproc主节点的SSH隧道来完成.通过使用SOCKS代理,您可以访问YARN上运行的所有应用程序,包括您的Spark会话.

This can be done by creating a SSH tunnel to the Dataproc master node. By using a SOCKS proxy you can then access all the applications running on YARN including your Spark sessions.

本指南将详细指导您: Dataproc Cluster网络界面

This guide will walk you through in detail:Dataproc Cluster web interfaces

这篇关于Dataproc Cluster上是否提供Spark UI?的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持!

10-22 13:49