Juli 2022

Diese Features und Azure Databricks Plattformverbesserungen wurden im Juli 2022 veröffentlicht.

Databricks Runtime 11.1 und 11.1 ML sind allgemein verfügbar

27. Juli 2022

Databricks Runtime 11.1 und Databricks Runtime 11.1 ML sind jetzt allgemein verfügbar.

Siehe Databricks Runtime 11.1 (EoS) und Databricks Runtime 11.1 für Machine Learning (EoS).

Photon ist allgemein verfügbar

27. Juli 2022

Photon ist ab Databricks Runtime 11.1 allgemein verfügbar.

Photon ist das systemeigene vektorisierte Abfragemodul auf Azure Databricks, das geschrieben wurde, um direkt mit Apache Spark-APIs kompatibel zu sein, damit es mit Ihrem vorhandenen Code funktioniert. Photon wurde in C++ entwickelt, sodass sie die Vorteile moderner Hardware nutzen kann, und verwendet die neuesten Techniken der vektorisierten Abfrageverarbeitung, um die Parallelität auf Daten- und Anweisungsebene in CPUs zu nutzen und die Leistung bei echten Daten und Anwendungen zu verbessern – alles nativ in Ihrem Data Lake.

Photon ist Teil einer High-Performance-Runtime, mit der Ihre vorhandenen SQL- und DataFrame-API-Aufrufe schneller ausgeführt und die Gesamtkosten pro Workload reduziert werden. Photon wird standardmäßig in Databricks SQL-Warehouses verwendet.

Weitere Informationen finden Sie unter Photon ist GA in den Versionshinweisen zu Databricks Runtime 11.1.

Benachrichtigung nach Abschluss des Notebooks

27. Juli – 15. August 2022

Wenn Sie während der Ausführung von einem Notizbuch weg navigieren, wird jetzt eine Benachrichtigung angezeigt, wenn sie abgeschlossen ist. Sie können diese Benachrichtigungen in Ihrem Browser aktivieren oder deaktivieren.

Erhöhte Grenze für die Anzahl von Aufträgen in Ihren Azure Databricks Arbeitsbereichen

19.–22. Juli 2022

Sie können jetzt bis zu 10.000 Aufträge in einem Azure Databricks-Arbeitsbereich erstellen, wenn Sie die Anzahl der Aufträge erhöhen in der Azure Databricks-Administratorkonsole aktivieren. Mit diesem Feature können Sie außerdem eine paginierte Auftragsliste einsehen, wenn Sie Aufträge auf der Benutzeroberfläche „Aufträge“ anzeigen, wodurch die Zeit verringert wird, die zum Laden der Auftragslistenansicht erforderlich ist.

Databricks empfiehlt die Verwendung der Jobs API 2.1, wenn Sie den erhöhten Grenzwert für Aufträge aktivieren. Die Verwendung der Jobs-API 2.0 führt zu einer verringerten Leistung bei der Rückgabe einer großen Anzahl von Aufträgen.

Jetzt werden ausführliche Überwachungsprotokolle aufgezeichnet, wenn Databricks SQL-Abfragen ausgeführt werden.

14. Juli 2022

Sie können jetzt Überwachungsprotokolle so konfigurieren, dass sie die Ausführung von Databricks SQL-Abfragen aufzeichnen. Um dies zu tun, verwenden Sie die Einstellung Ausführliche Überwachungsprotokolle der Arbeitsbereichskonfiguration. Weitere Informationen finden Sie unter Ausführliche Überwachungsprotokolle aktivieren. Es gibt einen Prüfprotokoll-Eintrag für die Übermittlung einer Abfrage und einen weiteren Eintrag für den Abfrageabschluss (einschließlich Abbruch).

Wenn für Ihren Arbeitsbereich bereits ausführliche Überwachungsprotokolle zum Protokollieren von Notebookbefehlen aktiviert wurden, enthalten Ihre ausführlichen Überwachungsprotokolle jetzt automatisch Databricks SQL-Abfragen für den Arbeitsbereich.

Databricks-JDBC-Treiber 2.6.27

11. Juli 2022

Wir haben Version 2.6.27 des Databricks-JDBC-Treibers veröffentlicht (Download). Mit dieser Version werden die Bibliotheken von Drittanbietern wie Apache Arrow 7.0.0 aktualisiert. Diese Version enthält außerdem Aktualisierungen der Lizenzdatei und der Anleitung zur Konfiguration der Installation.

Darüber hinaus behebt diese Version die folgenden Probleme:

• In einigen Fällen, wenn eine HTTP-Verbindung über einen längeren Zeitraum aktiv war, gibt der Connector einen NoHttpResponseException Fehler zurück.
• In einigen Fällen treten in der Konnektor-JAR-Datei ungeschatte Log4j Klassen mit Dateien in Konflikt, die in der Umgebung des Endbenutzers bereitgestellt wurden. Die nicht schattierten Klassen wurden aus der Connector-JAR-Datei entfernt.
• Wenn Sie eine DataSource-Klasse verwenden, sind die Namen der Unterprotokolle falsch.

Databricks-ODBC-Treiber 2.6.25

11. Juli 2022

Wir haben die Version 2.6.25 des Databricks-ODBC-Treibers veröffentlicht (Download). Diese Version fügt Unterstützung hinzu, um den Konnektor so zu konfigurieren, dass verzögerte Ergebnisdatei-Download-Operationen gemindert werden.

Databricks Runtime 11.1 (Betaversion)

8. Juli 2022

Databricks Runtime 11.1, 11.1 Photon und 11.1 ML sind jetzt als Betaversionen verfügbar.

Die vollständigen Versionshinweise finden Sie unter Databricks Runtime 11.1 (EoS) und Databricks Runtime 11.1 für Machine Learning (EoS).

Verbesserte Notebook-Visualisierungen

5. bis 11. Juli 2022: Version 3.75

Die integrierte Unterstützung für Diagramme und Visualisierungen in Notebooks unterstützt jetzt mehrere Diagramme und Datenprofile. Wenn Sie eine SQL-Zelle in einem Notebook ausführen oder die Funktion display auf einen DataFrame anwenden, zeigt das Notebook die Ergebnisse in Registerkarten an, ähnlich wie die Ergebnisanzeige in Databricks SQL. Sie können jetzt in einem Notebook dieselben umfangreichen Visualisierungen erstellen, die Sie auch in Databricks SQL erstellen können. Ausführliche Informationen finden Sie unter Visualisierungen in Databricks-Notizbüchern und SQL-Editor.