Spark 4.0 プレビューリリース

次期 Spark 4.0 リリースの広範なコミュニティテストを可能にするため、Apache Spark コミュニティは Spark 4.0.0 preview2 リリースを投稿しました。このプレビューは API または機能のいずれの面でも安定版リリースではありませんが、コミュニティが Spark 4.0 となるコードを早期に試せるようにすることを目的としています。リリースをテストしたい場合は、ダウンロードして、メーリングリストまたは JIRA を使用してフィードバックをお送りください。ドキュメントはリンクで入手できます。

Spark 4.0 には、デフォルトでの ANSI モード、Python データソース、ポリモーフィック Python UDTF、文字列照合サポート、新しい VARIANT データ型、ストリーミングステートストアデータソース、構造化ロギング、Java 21 サポート、デフォルトでの Java 17 など、多くのエキサイティングな新機能が追加されています。

このリリースへの貢献と早期フィードバックをいただいた貢献者およびユーザーの皆様に感謝いたします。皆様なしではこのリリースは実現しませんでした。

Spark ニュースアーカイブ