Spark Release 1.2.2

Spark 1.2.2 は、安定性修正を含むメンテナンスリリースです。このリリースは、Spark の branch-1.2 メンテナンスブランチに基づいています。すべての 1.2.1 ユーザーに、この安定版リリースへのアップグレードを推奨します。このリリースには 39 名の開発者が貢献しました。

Spark 1.2.2 をダウンロードするには、ダウンロードページをご覧ください。

修正点

Spark 1.2.2 には、いくつかのコンポーネントにおけるバグ修正が含まれています。より重要な修正の一部を以下に示します。修正の全リストについては、Spark issue tracker を参照してください。

Spark Core

  • Netty シャッフルにおけるスレッドセーフ性の問題 (SPARK-6578)
  • JobProgressListener におけるメモリリーク (SPARK-5967)
  • YARN 2.5.0 以降での起動不可 (SPARK-4267)
  • セキュアモードでの YARN 補助シャッフル問題 (SPARK-5655)

PySpark

  • collect 操作中のジョブハング (SPARK-6667)
  • シリアライザーエラーによる Zip 失敗 (SPARK-5973)
  • PySpark と Spark SQL を使用した際のメモリリーク (SPARK-6055)
  • 大規模なブロードキャスト変数使用時のハング (SPARK-5363)

貢献者

このリリースには以下の開発者が貢献しました

  • Andrew Or – Core および YARN におけるバグ修正
  • Andrew Rowson – YARN におけるバグ修正
  • Anselme Vignon – SQL におけるバグ修正
  • Brennon York – GraphX におけるバグ修正
  • Cheng Hao – Core におけるバグ修正
  • Cheolsoo Park – YARN におけるバグ修正
  • Davies Liu – PySpark における改善; Streaming, Core, SQL, および PySpark におけるバグ修正; Core および PySpark におけるドキュメント
  • Emre Sevinc – Core および MLlib におけるドキュメント; Core における改善
  • Gen TANG – EC2 におけるバグ修正
  • Hari Shreedharan – Streaming におけるバグ修正
  • Hung Lin – スケジューラにおけるバグ修正
  • Iulian Dragos – Streaming におけるテスト
  • Jacek Lewandowski – Core におけるバグ修正
  • Jesper Lundgren – Streaming におけるバグ修正
  • Josh Rosen – Java API, Streaming, テスト, および Core におけるバグ修正
  • Kashish Jain – YARN におけるバグ修正
  • Kay Ousterhout – Core および SQL におけるバグ修正
  • Kousuke Saruta – Streaming およびテストにおける改善
  • Li Zhihui – Core におけるドキュメント
  • Manoj Kumar – MLlib における改善
  • Matt Cheah – Core におけるバグ修正
  • Michael Nazario – PySpark におけるバグ修正
  • Mingyu Kim – Core におけるバグ修正
  • Nathan McCarthy – Core におけるバグ修正
  • Nicholas Chammas – EC2 におけるバグ修正
  • Peng Xu – Core におけるドキュメント
  • Reynold Xin – Core におけるバグ修正
  • Ryan Williams – Core における改善
  • Sean Owen – EC2 における改善; Core, テスト, YARN, Streaming, スケジューラ, および Web UI におけるバグ修正
  • Shixiong Zhu – Shuffle における改善
  • Tathagata Das – Streaming および Web UI におけるバグ修正
  • Venkata Ramana Gollamudi – Core における改善
  • Vladimir Grigor – EC2 におけるバグ修正
  • Wang Tao – Core におけるバグ修正
  • Winston Chen – PySpark におけるバグ修正
  • Yin Huai – SQL におけるバグ修正
  • Yuhao Yang – MLlib におけるバグ修正
  • Zhan Zhang – Core におけるバグ修正
  • Zhang, Liye – Core におけるバグ修正

貢献してくださった皆様、ありがとうございました！


Spark ニュースアーカイブ

最新ニュース

アーカイブ