2023 年 3 月

これらの機能とAzure Databricksプラットフォームの機能強化は、2023 年 3 月にリリースされました。

注意

リリースは段階的に行われます。 Azure Databricks アカウントは、最初のリリース日から 1 週間以上経過するまで更新されない場合があります。

Databricks Terraform プロバイダーがバージョン 1.14.0 に更新されました

2023 年 3 月 31 日

バージョン 1.14.0 では、アクセス トークン、run_if 条件、ファイル受信トリガーなどを databricks_job リソースに自動的にローテーションする例が追加されました。 詳細については、バージョン 1.14.0 の変更ログを参照してください。

Databricks Runtime 7.3 LTS ML のサポート終了

2023 年 3 月 31 日

Machine Learningの Databricks Runtime 7.3 LTS のサポートは、3 月 31 日に終了しました。 Databricks support lifecyclesをご覧ください。

TorchDistributor を使用した分散トレーニング

2023 年 3 月 27 日

Databricks Runtime 13.0 ML 以降では、TorchDistributor を使用する PyTorch ML モデルで分散トレーニングを実行できます。 「TorchDistributor を使用した分散トレーニング」を参照してください。

TorchDistributor は、ユーザーが自分の Spark クラスターで PyTorch を使用して分散トレーニングを行うのに役立つ PySpark のオープンソース モジュールであるため、Spark ジョブとして PyTorch トレーニング ジョブを起動できます。

Databricks Runtime 13.0 (ベータ版)

2023 年 3 月 24 日

Databricks Runtime 13.0 と Databricks Runtime 13.0 ML をベータ版リリースとして使用できるようになりました。

Databricks Runtime 13.0 (EoS) および Databricks Runtime 13.0 for Machine Learning (EoS) を参照してください。

ファイル エディターの強化

2023 年 3 月 24 日

ファイル エディターが更新され、多くのノートブック機能がファイル編集エクスペリエンスに導入されました。 さらに、ファイル エディターから Python、SQL、R、Scala ファイルを直接実行できるようになりました。 「Databricks ノートブックとファイル エディターを使用する」を参照してください。

既存の Azure Databricks ワークスペースの DBFS ルート ストレージ冗長性を変更する

2023 年 3 月 23 日

これで、ユーザーは DBFS ルート ストレージ アカウントの冗長性を変更できるようになりました。 「ワークスペース ストレージの冗長性オプションを変更する」を参照してください。

Repos (プレビュー) での .ipynb (Jupyter) ノートブックのサポート

2023 年 3 月 22 日

jupyter Notebook (.ipynb ファイル) のサポートは、Reposで利用できます。 .ipynb ノートブックを使用してリポジトリを複製し、Databricks UI で作業し、.ipynb ノートブックとしてコミットしてプッシュすることができます。 ノートブック ダッシュボードなどのメタデータは保持されます。 管理者は、出力をコミットできるかどうかを制御できます。

さらに、以下を実行できます。

  • 新しい .ipynb ノートブックを作成します。
  • ノートブックを .ipynb ファイル形式に変換します。
  • 差分をコード差分 (セル内のコード変更) または未処理の差分 (メタデータなどの JSON でのコード変更) として表示します。

ノートブック出力.ipynbコミットを許可するを参照してください。

reload4j のサポート

2023 年 3 月 21 日

Reload4j 1.2.19 は、Databricks Runtime バージョン 10.4 以前の log4j を置き換えています。

東アジア リージョンの新しい IP アドレス

2023 年 3 月 15 日

Azure Databricksは、eastasia 領域用の新しい専用コントロール プレーンを追加しました。 東アジア リージョンの独自の VNet (VNet インジェクションとも呼ばれます) で Azure Databricks ワークスペースをホストする場合は、カスタム ルート (UDR) を使用してワークスペースのネットワーク トラフィックを管理する可能性があります。 その場合は、Azure Databricks サービスと資産の IP アドレスとドメイン>を使用して、これらのルートを更新する必要があります。

ノートブック内の SQL セルを並列で実行

2023 年 3 月 15 日

対話型クラスターにアタッチされている間、Azure Databricksノートブックで SQL セルを並列に実行できるようになりました。 「SQL セルを並列で実行する」を参照してください。

Git リポジトリに格納されているPythonコードを使用してジョブ タスクを作成する

2023 年 3 月 14 日

Python タスクを Azure Databricks ジョブに追加するときに、Git プロバイダーからPython コードを取得できるようになりました。これにより、ジョブと CI/CD ワークフローの統合が簡略化されます。 「Lakeflow ジョブで Git を使用する」を参照してください。

Databricks Terraform プロバイダーがバージョン 1.13.0 に更新されました

2023 年 3 月 14 日

バージョン 1.13.0 では、databricks_sql_alert リソースなどが追加されます。 詳細については、バージョン 1.13.0 の変更ログを参照してください。

Databricks Terraform プロバイダーがバージョン 1.12.0 に更新されました

2023 年 3 月 9 日

バージョン 1.12.0 では、databricks_model_serving リソースが追加され、schedule リソース内の databricks_sql_query ブロックが非推奨になります。 詳細については、バージョン 1.12.0 の変更ログを参照してください。

SQL 管理コンソールとワークスペース管理コンソールの統合

2023 年 3 月 9 日

SQL 管理コンソールと一般的な管理設定を組み合わせて、管理者ユーザー向けの統合エクスペリエンスが作成されました。 すべての SQL 管理者設定に管理コンソールからアクセスできるようになりました。

モデルサービングが一般公開されました

2023 年 3 月 7 日

Model Serving (旧称サーバーレス リアルタイム推論) が一般公開されました。

Model Serving では、モデルをデプロイするための高可用性と低遅延が提供されます。 選択したコンカレンシー範囲内の需要の変化に合わせて、サービスが自動的に拡大/縮小されます。 モザイク AI モデル サービングを使用してモデルをデプロイするを参照してください。

GA における特徴の自動検索

2023 年 3 月 7 日

Model Serving を使用した特徴の自動検索が一般公開されました。 詳細については、「 自動機能検索を使用したモデル サービス」を参照してください。

UDR を使用する新しいワークスペースの場合、Azureストレージ IP には追加の UDR が必要です

2023 年 3 月 6 日

新しいワークスペースにおける DBFS ルートストレージの変更に伴い、VNet インジェクションを使用し、おすすめのサービスタグの代わりに IP アドレスを使用してユーザー定義ルート (UDR) を設定する新しいワークスペースは、各 VNet に対して追加の Azure UDR を追加する必要があります。 2 つの UDR を構成するには、「DBFS ルート ストレージ IP アドレス」を参照してください。 この変更は、既存のワークスペースには影響しません。

Azure Databricks DBFS ルート ストレージが新しいワークスペースにAzure Data Lake Storageを使用する

2023 年 3 月 6 日

新しいAzure Databricks ワークスペースでは、DBFS ルートAzure Data Lake Storageストレージ アカウントが使用されます。 既存の Azure Databricks ワークスペースでは、引き続き DBFS ルートに BLOB ストレージが使用されます。 Azure Data Lake Storage への導入を参照。

新しいカタログ エクスプローラーの可用性

2023 年 3 月 6 日

サポートされているバージョンの Databricks Runtime 7.3 以降を使用するすべてのワークスペースで、新しいバージョンのカタログ エクスプローラーを使用できるようになりました。

[分析情報] タブを使用してテーブルの頻繁なクエリとユーザーを表示する

2023 年 3 月 6 日

カタログ エクスプローラーの [分析情報] タブを使用して、Unity カタログに登録されているテーブルの最も頻繁なクエリとユーザーを表示できるようになりました。 このデータを表示するには、テーブルに対する SELECT 権限が必要であり、表示するアクセス許可を持つクエリのみが表示されます。 テーブルの 頻繁なクエリとユーザーの表示を参照してください。

2023 年 3 月 3 日

グローバル検索で引用符を使用して正確な語句を検索できるようになりました。 「ワークスペース オブジェクトを検索する」を参照してください。

Azure Databricks ジョブの系列情報を表示する

2023 年 3 月 3 日

ワークスペースで Unity カタログが有効になっている場合は、ジョブの系列情報を Azure Databricks ジョブ UI で表示できます。これには、ジョブが読み取るアップストリーム テーブルや、ジョブが書き込むダウンストリーム テーブルが含まれます。 「ジョブの系列情報を表示する」を参照してください。

Databricks Runtime 12.2 LTSおよびDatabricks Runtime 12.2 LTS MLが一般提供されています。

2023 年 3 月 2 日

Databricks Runtime 12.2 LTS と Databricks Runtime 12.2 LTS ML が一般提供されるようになりました。

Databricks Runtime 12.2 LTS (EoS) および Databricks Runtime 12.2 LTS for Machine Learning (EoS) を参照してください。

ワークスペース ファイルがパブリック プレビューになりました

2023 年 3 月 6 日

Azure Databricksでノートブック以外のファイルを操作できるようになりました。 ワークスペース ファイルは、すべてのワークスペースで既定で有効になっています。 「ワークスペース ファイルとは」を参照してください。

  • Last updated on