これらの機能とAzure Databricksプラットフォームの機能強化は、2025 年 2 月にリリースされました。
Note
リリースは段階的に行われます。 Azure Databricks アカウントは、最初のリリース日から 1 週間以上経過するまで更新されない場合があります。
Databricks ODBC ドライバー 2.9.1
2025 年 2 月 28 日
Databricks ODBC ドライバー バージョン 2.9.1 は、ODBC ドライバーのダウンロード ページからダウンロードできるようになりました。
このリリースには、次の機能強化と新機能が含まれています。
- トークンパススルー OAuth フローのトークン更新サポートを追加しました。
- アイドル状態のSQLステートメントに対するドライバー側のタイムアウトオプションを追加しました。 タイムアウトは、アプリケーションがクエリ実行の途中で結果のフェッチやハングを中断しないように構成できます。
このリリースでは、次の問題が解決されます。
- 初期カタログが設定されていない場合、ドライバーは既定で
hive_metastoreカタログを使用するようになります。 - ドライバーは、HTTP User-Agent を
thrift/0.9.0からthrift/0.17.0に更新します。
このリリースには、いくつかのサード パーティ製ライブラリへのアップグレードが含まれています。
- OpenSSL 3.0.15 (以前の 3.0.13)
- libcURL 8.10.1 (以前の 8.7.1)
- ICU 74.2 (以前の 71.1)
- Arrow 15.0.0 (以前は 9.0.0) for OSX および Linux (Windows は 15.0.0)
- lz4 1.10.0 (以前は 1.9.4)
- Expat 2.6.3 (以前は 2.6.2)
- Kerberos 1.21.3 (以前の 1.21.2)
完全な構成情報については、ドライバー ダウンロード パッケージと共にインストールされている Databricks ODBC ドライバー ガイド を参照してください。
パイプライン イベント ログを Unity カタログ テーブルとして発行する
2025 年 2 月 28 日
これで、DLT パイプラインのイベント ログを Unity カタログのテーブルとして発行できるようになりました。 イベント ログのクエリを参照してください。
モザイク AI モデル サービスが、東日本、英国南部、および米国中南部Azureで利用できるようになりました
2025 年 2 月 28 日
Mosaic AI Model Serving は、次のリージョンでサポートされるようになりました。
japaneastuksouthsouthcentralus
「利用可能なリージョンに制限がある機能」を参照してください。
Databricks Assistant は、テーブルの分析情報と系列を提供します
2025 年 2 月 27 日
Unity カタログ対応のAzure Databricks ワークスペースでは、Databricks Assistant は、単純なプロンプトを使用するときにテーブルの系列と分析情報を提供できます。
Genie Code を使用したテーブル系列の取得を参照してください。
[プロバイダーのインポート] ダイアログを使用して、オープンなDelta Sharing共有をAzure Databricksに直接インポートする
2025 年 2 月 26 日
Unity カタログ対応のAzure Databricks ワークスペースには、Databricks 以外のDelta Sharingサーバーから、Open-to-Databricks (O2D) 共有を使用してUnity カタログに共有をインポートするための Import プロバイダー ダイアログが含まれています。 この機能は 2024 年 7 月にリリースされましたが、当時は発表されませんでした。 プロバイダーをインポートする場合、ユーザーは Databricks から Databricks への共有と基本的に同じ受信者エクスペリエンスを持ちます。[ カタログの作成 ] をクリックして共有カタログを作成し、Unity カタログのアクセス制御を使用して共有テーブルへのアクセスを許可し、標準の Unity カタログ構文を使用して共有テーブルに対してクエリを実行します。資格情報ファイルを格納したり、共有データを照会するときに指定したりする必要はありません。 「Azure Databricks: オープン共有コネクタを使用して共有データを読み取るを参照してください。
Delta Sharing を使用したオープン共有プロバイダーからAzure Databricksへのデータ共有（OAuth利用）
2025 年 2 月 26 日
Azure Databricksは、Open-to-Databricks (O2D) 共有のためにOAuthクライアント資格情報をサポートするようになりました。これは、Databricks以外のDelta Sharingサーバーから、Unity Catalogが有効なAzure Databricksワークスペースへの共有を意味します。 これにより、OAuth クライアント資格情報を使用する Oracle Delta Share のような Delta Sharing プロバイダーネットワークからの共有インポートが簡単になります。 このサポートにより、O2D モデルの受信者として Unity カタログを使用する利点が既に大きなものになります。これには、共有をインポートするためのインポート プロバイダー UI や、共有を照会するために標準の Unity カタログ構文を使用する機能が含まれており、共有データのクエリを実行するときに資格情報ファイルを格納したり、指定したりする必要はありません。 「Azure Databricks: オープン共有コネクタを使用して共有データを読み取るを参照してください。
Unity Catalog ビューでのストリーミング読み取りが GA となりました
2025 年 2 月 25 日
Delta テーブルに対して登録された Unity カタログ ビューからのストリーミング読み取りが一般公開されました。 「 Unity カタログ ビューをストリームとして読み取る」を参照してください。
初期スナップショット ストリーム処理のイベント時間の順序付けは GA です
2025 年 2 月 25 日
デルタ テーブル ソースから構造化ストリーミング クエリを処理するための withEventTimeOrder オプションが一般公開されました。
「データを削除せずに初期スナップショットを処理する」を参照してください。
非同期の進行状況の追跡は GA です
2025 年 2 月 25 日
構造化ストリーミングの非同期進行状況の追跡が一般公開されました。 非同期進行状況の追跡を参照してください。
課金対象の使用状況システム テーブルで、プライベート エンドポイントのネットワーク コストが属性化されるようになりました
2025 年 2 月 25 日
課金対象の使用状況システム テーブルには、プライベート エンドポイントを使用してサーバーレス コンピューティングをリソースに接続した場合に発生するコストを監視するのに役立つフィールドが含まれるようになりました。 「課金対象の使用状況システム テーブル リファレンス」を参照してください。
MLflow トレースは GA です
2025 年 2 月 25 日
MLflow トレースが一般公開されました。 トレースを使用すると、モデルまたはエージェント要求の各ステップに関連付けられている入力、出力、およびその他のメタデータを追跡できます。
トレースを使用すると、バグや予期しない動作の原因を特定し、モデルまたはエージェント間でパフォーマンスを比較し、新しいデータセットを構築して品質を向上させることができます。 「MLflow トレース - GenAI の可観測性」を参照してください。
Databricks Marketplace の新しいフィルター パネル
2025 年 2 月 25 日
Databricks Marketplace に、検索と閲覧を効率化するように設計されたフィルター パネルが強化されました。 この更新プログラムは、検出可能性を高め、製品、プロバイダー、価格などを簡単に検索できるようにします。 Databricks Marketplace の一覧を参照するを参照してください。
OAuth シークレットの有効期間が構成可能になりました
2025 年 2 月 24 日
サービス プリンシパルの OAuth シークレットの有効期間が構成できるようになりました。 新しく作成された OAuth シークレットの既定の有効期間は 2 年です。以前は有効期限が切れませんでした。 OAuth を使用した Azure Databricks へのサービス プリンシパル アクセスの認証を参照してください。
ボリューム内のファイルをプレビューする
2025 年 2 月 18 日
イメージ、テキスト ファイル、JSON、yaml、CSV など、カタログ エクスプローラーで一般的なファイル形式のプレビューがボリュームに表示されるようになりました。 ボリューム内のファイルのプレビューを参照してください。
課金レコードを処理するモデルが 5 分間隔でログに記録されるようになりました
2025 年 2 月 18 日
コストの監視性を向上させるために、課金レコードは、モデルの提供とプロビジョニングされたスループット使用量の 5 分ごとにログに記録されるようになりました。 以前は、レコードは 1 時間間隔でログに記録されていました。 「課金対象の使用状況システム テーブル リファレンス」を参照してください。 Foundation Model Api Pay-Per-Token の使用状況は、引き続き時間単位で集計されることに注意してください。
自動液体クラスタリング (パブリック プレビュー)
2025 年 2 月 18 日
Unity カタログのマネージド テーブルで自動液体クラスタリングを有効にできるようになりました。 自動液体クラスタリングでは、クラスタリング キーをインテリジェントに選択して、クエリのデータ レイアウトを最適化します。 自動液体クラスタリングを参照してください。
Azure カナダ東部リージョン専用コントロール プレーン
2025 年 2 月 14 日
Databricks では、以前はカナダ中部コントロール プレーンによって管理されていた、Azure カナダ東部リージョン用の専用コントロール プレーンが提供されるようになりました。 Azure Databricks サービスと資産のIP アドレスとドメインを参照してください。
Databricks Runtime 14.1 シリーズのサポート終了
2025 年 2 月 12 日
Machine Learningの Databricks Runtime 14.1 と Databricks Runtime 14.1 のサポートは、11 月 5 日に終了しました。 Databricks のサポート ライフサイクルを参照してください。
サーバーレス SQL ウェアハウスを追加のリージョンで使用できるようになりました
2025 年 2 月 12 日
サーバーレス SQL ウェアハウスは、東アジア、韓国中部、スイス北部、米国中西部、米国西部 3 のAzureリージョンで利用できるようになりました。 Azure Databricksリージョンを参照してください。
Databricks Runtime 16.2 は GA です
2025 年 2 月 10 日
Databricks Runtime 16.2 と Databricks Runtime 16.2 ML が一般公開されました。
Databricks Runtime 16.2 (EoS) および Databricks Runtime 16.2 for Machine Learning (EoS) を参照してください。
標準アクセス モード コンピューティング (以前の共有アクセス モード) での Scala ストリーミング foreach、 foreachBatch、および flatMapGroupsWithState のサポート
2025 年 2 月 7 日
標準アクセス モード コンピューティングで、Databricks Runtime 16.1 以降の Scala ストリーミング関数 DataStreamWriter.foreach がサポートされるようになりました。 Databricks Runtime 16.2 以降では、関数の DataStreamWriter.foreachBatch と KeyValueGroupedDataset.flatMapGroupsWithState がサポートされています。
サービス資格情報を使用した外部クラウド サービスへの Unity カタログ管理アクセスが GA になりました
2025 年 2 月 7 日
サービス資格情報を使用すると、Azure Databricksからクラウド テナントのサービスを使用して、シンプルで安全な認証を行うことができます。 サービス資格情報が一般公開され、パブリック プレビューでサポートされている Python SDK に加えて Scala SDK がサポートされるようになりました。 完全 GA 機能には、Databricks Runtime 16.2 以降のコンピューティングが必要です。 「サービス資格情報の作成」を参照してください。
SQL ウェアハウスに接続されているノートブックでExcelとしてダウンロードがサポートされるようになりました
2025 年 2 月 6 日
SQL ウェアハウスに接続されているノートブックの場合、表形式データを含むセルの結果をExcel ファイルとしてダウンロードできるようになりました。 「結果をダウンロードする」をご覧ください。
DLT シンクを使用してパイプラインから外部サービスにデータを書き込む (パブリック プレビュー)
2025 年 2 月 5 日
DLT sink API はパブリック プレビュー段階です。 DLT シンクを使用すると、パイプラインによって変換されたデータを、Apache Kafka や Azure Event Hubs などのイベント ストリーミング サービス、Unity カタログまたは Hive メタストアによって管理される外部テーブルなどのターゲットに書き込むことができます。
「Lakeflow Spark 宣言パイプラインのシンク」を参照してください。
自動 ID 管理 (パブリック プレビュー)
2025 年 2 月 5 日
自動 ID 管理を使用してMicrosoft Entra IDでアプリケーションを構成することなく、Microsoft Entra IDからAzure Databricksにユーザー、サービス プリンシパル、およびグループを追加できるようになりました。 自動 ID 管理が有効になっている場合は、ID フェデレーション ワークスペースでMicrosoft Entra IDユーザー、サービス プリンシパル、グループを直接検索し、ワークスペースに追加できます。 Databricks はレコードのソースとしてMicrosoft Entra IDを使用するため、グループ メンバーシップに対する変更はAzure Databricksで考慮されます。 自動 ID 管理では、入れ子になったグループもサポートされます。
Microsoft Entra ID から自動的にユーザーとグループを同期するを参照してください。
新しいリージョン: メキシコ中部
2025 年 2 月 4 日
Azure Databricksはメキシコ中部で利用できるようになりました。 Azure Databricksリージョンを参照してください。