次の機能と Azure Databricks プラットフォームの機能強化が 2018 年 12 月にリリースされました。
注
リリースは段階的に行われます。 お使いの Azure Databricks アカウントは、リリースの初日から最大 1 週間後まで更新されない可能性があります。
Databricks Runtime 5.1 for Machine Learning (ベータ版) リリース
2018 年 12 月 18 日
Databricks Runtime 5.1 ML は Databricks Runtime 5.1 の上に構築されており、次の新機能が含まれています。
- ディープ ラーニング ネットワークを構築するための PyTorch。
Databricks Runtime 5.1 リリース
2018 年 12 月 18 日
Databricks Runtime 5.1 が利用可能になりました。 Databricks Runtime 5.1 には、Apache Spark 2.4.0、新しい Delta Lake および Structured Streaming の機能とアップグレード、アップグレードされた Python、R、Java および Scala ライブラリが含まれています。
図書館のUI
バージョン 2.85 で最初にリリースされたライブラリ UI の更新プログラムは、2018 年 12 月 7 日に元に戻されました。
Microsoft Entra ID の資格情報を使って Azure Data Lake Storage Gen1 に自動的にアクセスする
2018 年 12 月 5 - 11 日: バージョン 2.86
Azure Databricks へのログインに使用するのと同じ Microsoft Entra ID の ID を使用して、Azure Databricks クラスターから Azure Data Lake Storage Gen1 に対して自動的に認証できるようになりました。
Microsoft Entra ID 資格情報パススルーに対してクラスターを有効にするだけで、そのクラスターで実行するコマンドによって、ストレージにアクセスするためのサービス プリンシパルの資格情報を構成しなくても、Azure Data Lake Storage Gen1 でデータの読み取りと書き込みを行うことができます。
重要
Microsoft Entra ID の資格情報を使用して Azure Data Lake Storage Gen1 にアクセスする機能は、パブリック プレビュー段階です。 Databricks Runtime 5.1 が必要です。これは現在ベータ版ですが、間もなく一般公開されます。