apache-spark-standalone
Jaki typ klastra wybrać dla Spark?
Jestem nowy w Apache Spark i właśnie dowiedziałem się, że Spark obsługuje trzy typy klastrów:
Standalone-czyli Spark będzi ... cany. Powiedzmy, że w przyszłości muszę zbudować duży klaster (setki instancji), do którego typu klastra powinienem się udać?
Jaka jest relacja między pracownikami, instancjami pracowniczymi i wykonawcami?
W trybie Spark Standalone istnieją węzły master i worker.
Oto kilka pytań:
czy 2 instancje robocze oznaczają jeden węzeł ... ker posiada jeden executor?
czy istnieje schemat blokowy wyjaśniający, w jaki sposób Spark runtime, taki jak liczba słów?
Zrozumieć Spark: Menedżera klastrów, węzłów Master I Driver
Po przeczytaniu tego Pytania, chciałbym zadać dodatkowe pytania:
Menedżer klastra jest usługą długo działającą, na który ... ednie pytanie: w przypadku awarii węzła głównego, co dokładnie się stanie i kto jest odpowiedzialny za odzyskanie po awarii?