spark-submit
Dodaj słoiki do Spark Job-spark-submit
Prawda ... to było omawiane dość dużo.
Jest jednak wiele niejasności i niektóre z udzielonych odpowiedzi ... w tym duplikowa ... a różnicę między lokalnym sterownikiem (yarn-client) a zdalnym sterownikiem (yarn-cluster). Zdecydowanie ważne, aby pamiętać.
Jak zatrzymać wyświetlanie wiadomości informacyjnych na konsoli spark?
Chciałbym zatrzymać różne wiadomości, które przychodzą na Spark shell.
Próbowałem edytować plik log4j.properties, aby zatrzy ... 5:11:45 INFO HttpServer: Starting HTTP Server
15/01/05 15:11:45 INFO HttpBroadcast: Broadcast server star
Jak je zatrzymać?