Как получить доступ к моему браузеру на локальном компьютере с удаленной машины

Question

, потому что я запускаю искровое приложение на своей удаленной машине, и я хочу видеть прогресс, поэтому мне нужно получить доступ к искровому веб-интерфейсу из браузера.

Что делать, чтобы иметь возможность запускать мой браузер firefox на моем локальном компьютере с удаленного компьютера, в котором я запускаю свое искровое приложение?

Если дальний (дистанционный) один имеет IP-адрес:

192.yy.yy.yy 

зная, что я использую для доступа к удаленной машине из моего локального один

ssh name@xx.xx.xx.xx 

пса: Я могу взаимодействовать с удаленный компьютер только с использованием команд.

Answer 1

Каждый SparkContext запускает веб-интерфейс по умолчанию на порту 4040, который отображает полезную информацию о приложении. Это включает в себя:

• список этапов планировщика задач и
• Резюме размеров RDD и использование памяти
• экологической информации.
• Информация о бегущих исполнителях

Вы можете получить доступ к этому интерфейсу, просто открыв http://192.yy.yy.yy:4040 в веб-браузере. Если на одном и том же хосте работает несколько SparkContext, они будут привязываться к последовательным портам, начиная с 4040 (4041, 4042 и т. Д.).

Источник: Monitoring Spark

Теперь, когда у вас есть сервер управления между ними, вам нужно создать туннель для доступа искровой UI, чтобы создать использование туннеля ssh -L 4041:192.yy.yy.yy:4041 name@xx.xx.xx.xx, а затем получить доступ к искровой UI через localhost:4041

Answer 2

Вам нужно только направить порт интерфейса с сервера на локальный

ssh -L 4040:localhost:4040 name@xx.xx.xx.xx 

в локальной машине просто зайдите на адрес Localhost: 4040, чтобы увидеть прогресс.

исй: https://unix.stackexchange.com/questions/115897/whats-ssh-port-forwarding-and-whats-the-difference-between-ssh-local-and-remot