https://spark.apache.org/releases/spark-release-2-4-3.html
2.4.3이 얼마전에 출시되었는데. 달랑 지라 처리 하나인줄 알았더니. 이제 스칼라 2.12 버전으로 사용할 수 있는 버전이다.

문서 보면 2.11, 2.12 사용 가능하다고 한다. (하도 많이 바뀌어서 아예 지원 안할 줄 알았는데.)

그외 추가된 내용은 kafka key/value 에 null 처리를 반영했다.
https://issues.apache.org/jira/browse/SPARK-27494
https://github.com/apache/spark/pull/24441/files

Posted by 김용환 '김용환'

댓글을 달아 주세요