Spark Release 2.4.3

Spark 2.4.3 は、安定性修正を含むメンテナンスリリースです。このリリースは、Spark の branch-2.4 メンテナンスブランチに基づいています。すべての 2.4 ユーザーに、この安定版リリースへのアップグレードを強く推奨します。

なお、2.4.3 ではデフォルトの Scala バージョンが Scala 2.12 から Scala 2.11 に変更されました。これは、2.4.2 を除く、それ以前のすべての 2.x リリースでデフォルトであったものです。つまり、プリビルドされた便利なバイナリは Scala 2.11 用にコンパイルされています。Spark は Maven Central で 2.11 と 2.12 の両方でクロス公開されており、ソースから 2.12 用にビルドすることも可能です。

主な変更点

  • [SPARK-27494]: キーと値の NULL を処理する際の Kafka source v2 の正確性バグを修正します。

JIRA で 詳細な変更点 を確認できます。

このリリースにパッチを提供してくださったすべてのコミュニティメンバーに感謝いたします。


Spark ニュースアーカイブ