12
Іскровий java.lang.OutOfMemoryError: Куповий простір Java
Мій кластер: 1 майстер, 11 рабів, кожен вузол має 6 ГБ пам'яті. Мої налаштування: spark.executor.memory=4g, Dspark.akka.frameSize=512 Ось проблема: По-перше , я прочитав деякі дані (2,19 ГБ) від HDFS до RDD: val imageBundleRDD = sc.newAPIHadoopFile(...) По-друге , зробіть щось на цьому RDD: val res = imageBundleRDD.map(data => { val desPoints = …