Я wondring, какой протокол Apache Zeppelin использует для подключения к Apache Spark?Какой протокол Apache Zeppelin используется для подключения к Apache Spark? (IPython/ZeroMQ)?
Является ли это также протоколом iPython на ZeroMQ?
Большое спасибо!
наилучшими пожеланиями
Romeo
Спарк Переводчик для Apache Цеппелин (инкубирования) фактически использует ни один из них.
Он просто содержит драйвер искрового водителя внутри процесса искрового интерпретатора и отправляет задание на каждый абзац, хотя SparkIMain, так же, как и искровая оболочка.
Я считаю, что внутренняя низкоуровневая связь между драйвером и мастером основана на Akka, но представляет собой детальную реализацию реализации Spark.
Только что нашел эту ссылку здесь, где кто-то создал библиотеку Scala для скрытия сложности Akka, также имеет приятную диаграмму архитектуры: http://www.spark.tc/overview-of-the-spark-kernel-client- библиотека/ –