Запитання з тегом «spark-submit»

Я хотів би зупинити різні повідомлення, які надходять на іскрову оболонку. Я намагався редагувати log4j.propertiesфайл, щоб зупинити це повідомлення. Ось зміст log4j.properties # Define the root logger with appender file log4j.rootCategory=WARN, console log4j.appender.console=org.apache.log4j.ConsoleAppender log4j.appender.console.target=System.err log4j.appender.console.layout=org.apache.log4j.PatternLayout log4j.appender.console.layout.ConversionPattern=%d{yy/MM/dd HH:mm:ss} %p %c{1}: %m%n # Settings to quiet third party logs that are too …

181 apache-spark  log4j  spark-submit 

Правда ... це обговорювалося досить багато. Однак існує багато неоднозначностей і деякі відповіді, що надаються ..., включаючи дублювання посилань jar в конфігурації або параметрах jar / виконавця / драйвера. Неоднозначні та / або пропущені деталі Після неоднозначності, незрозумілих та / або пропущених деталей слід уточнити для кожного варіанта: Як впливає …

158 java  scala  apache-spark  jar  spark-submit