Я думаю, что из схемы системы следует, что газированная вода осуществляла прямую связь между рабочими (без возврата к мастеру). Может кто-нибудь указать, где находится код этой функции?
общение между рабочими в Sparkling Water
comment
Насколько я понимаю, ваш вопрос. вам нужно поделиться своим кодом со всеми узлами кластера, не отправляя банку, верно?
- person Uttam Kasundara schedule 25.07.2016
Ответы (1)
Sparkling Water использует тот же шаблон коммуникации, что и Spark. Драйвер запускает вычисления и организует работу между несколькими рабочими узлами. Sparkling Water - это просто приложение Spark с узлом H2O, работающим в каждой JVM Spark (для всех исполнителей и драйверов).
person
Jakub Háva
schedule
15.01.2017
