스파크 #Spark1 [Spark] RDD에서 DataFrame 변환 시 NullPointerException 문제 RDD를 DataFrame으로 변환하여 뭔가를 하는 과정에서 NPE 예기치 않은 오류가 발생했다. StackTrace를 보니 흔하디 흔한 NPE 가 발생했는데 아무리 봐도 정확한 원인을 찾을 수가 없었다. 내가 짠 코드에서 발생한 NPE라면 해당 클래스와 라인이 찍혔을텐데, 전혀 그런 흔적은 보이지 않았다. r1.map(_._2.toString).map(xml => RawParser.parse(Jsoup.parse(xml))).toDF.show [Stage 1:> (0 + 1) / 1]21/01/25 20:39:44 WARN scheduler.TaskSetManager: Lost task 0.0 in stage 1.0 (TID 1, xx, executor 52): java.lang.NullPointerE.. 2021. 1. 26. 이전 1 다음
