spark-submit- все статьи тега

Как остановить отображение информационных сообщений на консоли spark?

Я хотел бы остановить различные сообщения, которые приходят на spark shell. Я пытался изменить log4j.properties файл для остановки этих сообщений. вот содержание log4j.properties # Define the root logger with appender file log4j.rootCategory=WARN, console log4j.appender.console=org.apache.log4j.ConsoleAppender log4j.appender.console.target=System.err log4j.appender.console.layout=org.apache.log4j.PatternLayout log4j.appender.console.layout.ConversionPattern=%d{yy/MM/dd HH:mm:ss} %p %c{1}: %m% ...