April 2023

Diese Features und Azure Databricks-Plattformverbesserungen wurden im April 2023 veröffentlicht.

Databricks Marketplace (Public Preview): ein offener Marketplace für Daten, Analysen und KI

27. April 2023

Sie können jetzt den Databricks Marketplace verwenden, um Hunderte von Datenprodukten in Ihren KI- und Analyseworkflows zu ermitteln, darauf zuzugreifen und diese bereitzustellen. Databricks Marketplace nutzt Delta Sharing, um eine sichere und nahtlose Freigabe von kostenlosen und kommerziellen Datenprodukten in jeder Cloud oder Region zu ermöglichen. Weitere Informationen finden Sie unter Was ist Databricks-Marketplace?.

Konfigurieren des Python-Formatierers

25. April 2023

Für Dateien und Notebooks in Databricks-Repos können Sie jetzt den Python-Formatierer basierend auf einer Black-Spezifikation konfigurieren. Weitere Informationen finden Sie unter der Python-Bibliothek für den Black-Formatierer.

Arbeitsbereichsdateien sind allgemein verfügbar

24. April 2023

Sie können jetzt mit Nicht-Notebook-Dateien in Azure Databricks arbeiten. Arbeitsbereichsdateien sind standardmäßig in allen Arbeitsbereichen aktiviert. Weitere Informationen finden Sie unter Was sind Arbeitsbereichsdateien?.

Clusterbezogene Initialisierungsskripts können jetzt in Arbeitsbereichsdateien gespeichert werden.

24. April 2023

Sie können jetzt clusterbezogene Initskripts in Arbeitsbereichsdateien speichern, unabhängig von der Databricks Runtime-Version, die von Ihrem Compute verwendet wird. Databricks empfiehlt, alle clusterspezifischen Initialisierungsskripts in Arbeitsbereichsdateien zu speichern. Weitere Informationen finden Sie unter Speichern von Initialisierungsskripts in Arbeitsbereichsdateien.

Erstellen eines von Azure Key Vault unterstützten Geheimnisbereichs mit einem Dienstprinzipal

19. April 2023

Sie können jetzt mithilfe eines Dienstprinzipals einen mit Azure Key Vault gesicherten Geheimnisbereich erstellen. Weitere Informationen dazu finden Sie unter Erstellen eines von Azure Key Vault unterstützten Geheimnisbereichs

Neue Delta Sharing-Berechtigungen ermöglichen die Delegierung von Verwaltungsaufgaben für Freigaben, Empfänger und Anbieter

18. April 2023

Die neuen Berechtigungen USE SHARE, USE RECIPIENT, USE PROVIDER und SET SHARE PERMISSION aktivieren die Delegierung von Freigabe-, Empfänger- und Anbieterverwaltungsaufgaben, die andernfalls die Metastore-Administratorrolle oder den Objektbesitz erfordern würden. Mit diesen Rechten können Sie die Anzahl der Benutzer begrenzen, die über die leistungsstarke Metastore-Administratorrolle verfügen. Weitere Informationen dazu finden Sie unter Berechtigungstypen, die nur für Delta Sharing (Deltafreigabe) oder Databricks Marketplace gelten.

Databricks Connect V2 (Public Preview)

17. April 2023

Ab Databricks Runtime 13.0 baut Databricks Connect auf Spark Connect auf, sodass Entwickler die Leistungsfähigkeit von Databricks und das IDE ihrer Wahl nutzen können, um ihren Code interaktiv in jedem beliebigen Azure Databricks-Arbeitsbereich zu entwickeln und zu debuggen.

Neue Benutzeroberfläche für Clustermetriken

14. April 2023

Cluster, die Databricks Runtime 13.0 und höher verwenden, haben Zugriff auf die neue Benutzeroberfläche für Clustermetriken. Dieses Feature ersetzt Ganglia als Tool zur Überwachung von Clustermetriken. Die neue Benutzeroberfläche für Clustermetriken enthält eine Liveansicht der Clusterleistung und benutzerdefinierte minutenweise Verlaufsansichten. Weitere Informationen finden Sie unter Anzeigen von Computemetriken.

Databricks Runtime 13.0 allgemein verfügbar

14. April 2023

Databricks Runtime 13.0 und Databricks Runtime 13.0 ML sind jetzt allgemein verfügbar.

Weitere Informationen finden Sie unter Databricks Runtime 13.0 (EoS) sowie unter Databricks Runtime 13.0 für Machine Learning (EoS).

Steuern des Zugriffs auf die Kontokonsole nach IP-Adressbereichen (Public Preview)

17. April 2023

Die Azure Databricks-Kontokonsole unterstützt jetzt IP-Zugriffslisten, um den Zugriff auf die Kontokonsole nach IP-Adressbereichen zu steuern, ähnlich wie die vorhandene Unterstützung für IP-Zugriffslisten für Arbeitsbereiche. Verwenden Sie entweder eine Kontokonsolen-Benutzeroberfläche oder eine REST-API, um den Zugriff zu verwalten. Siehe Konfigurieren von IP-Zugriffslisten für die Kontokonsole.

Wenn Azure Databricks eine Anforderung blockiert, generiert Azure Databricks ein neues Ereignis in den Überwachungsprotokollen auf Kontoebene mit Dienst-accounts und Ereignis-accountIpAclsValidationFailed. Weitere Informationen finden Sie unter Referenz zu Diagnoseprotokollen.

Databricks Terraform-Anbieter auf Version 1.14.3 aktualisiert

14. April 2023

Version 1.14.3 fügt Exporterunterstützung für databricks_sql_alert hinzu, Unterstützung für Benachrichtigungen in databricks_pipeline und mehr. Weitere Details finden Sie im Änderungsprotokoll für die Version 1.14.3.

Diagnoseprotokolleinträge für geänderte Administratoreinstellungen des Arbeitsbereichs

14. April 2023

Es gibt jetzt Überwachungsprotokollereignisse für Änderungen an einigen Administratoreinstellungen in den Arbeitsbereichsdiagnoseprotokollen. Innerhalb des Diensts accounts sind die neuen Ereignisaktionsnamen deleteSetting und setSetting. Weitere Informationen finden Sie unter Referenz zu Diagnoseprotokollen. Nicht alle Einstellungen generieren überprüfbare Ereignisse.

Für den ersten kundenseitig verwalteten Schlüssel für verwaltete Datenträger beendet Azure Databricks jetzt Computeressourcen.

10. April 2023

Zuvor wurden beim Hinzufügen eines kundenseitig verwalteten Schlüssels für verwaltete Datenträger zunächst alle ausgeführten Computeressourcen (Cluster, Pools) neu gestartet. Computeressourcen werden jetzt beendet und nicht neu gestartet, was bedeutet, dass Sie sie manuell starten müssen, nachdem das Update abgeschlossen ist. Azure Databricks verhindert, dass Cluster beim Hinzufügen eines Schlüssels ausgeführt oder gestartet werden. Planen Sie Ausfallzeiten ein und beenden Sie alle Computeressourcen, bevor Sie den Schlüssel hinzufügen, um die automatische Beendigung zu verhindern, da dies zu Problemen bei einigen Arten von Workloads führen kann.

Für einen Arbeitsbereich, der bereits über einen kundenseitig verwalteten Schlüssel für verwaltete Datenträger verfügt, müssen Sie die Computeressourcen nicht beenden, wenn Sie den Schlüssel rotieren.

Databricks Terraform-Anbieter auf die Versionen 1.14.1 und 1.14.2 aktualisiert

4.-6. April 2023

Version 1.14.1 schließt Rollen in SCIM-API-Listenaufrufen aus, um die Auslastung des Databricks SCIM-Diensts zu reduzieren, und mehr. Version 1.14.2 fügt der databricks_job-Ressource einen SQL-Dateitask hinzu, behebt mehrere Fehler und vieles mehr. Weitere Details finden Sie im Änderungsprotokoll für die Versionen 1.14.1 und 1.14.2.

Kombinierte SQL-Benutzereinstellungen und allgemeine Benutzereinstellungen

3.-5. April 2023

Die SQL-Benutzereinstellungen wurden mit den allgemeinen Benutzereinstellungen des Arbeitsbereichs kombiniert, um eine einheitliche Benutzeroberfläche für Arbeitsbereichsbenutzer zu schaffen. Auf alle SQL-Benutzereinstellungen kann jetzt über die Einstellungen zugegriffen werden:

• Die Registerkarte Kennwort heißt jetzt Konto und Kennwort.
• Die Registerkarte Abfrageausschnitte ist für Benutzer*innen mit der SQL-Berechtigung sichtbar.

Einstellung der Unterstützung von Legacy-Notebookvisualisierungen

4. April 2023

Das Erstellen und Bearbeiten von Legacy-Notebookvisualisierungen ist veraltet und wird demnächst aus dem Produkt entfernt. Vorhandene Legacyvisualisierungen werden weiterhin gerendert. Details werden in Benachrichtigungen innerhalb des Produkts angezeigt.

Die Seite Tabelle aus Dateiupload erstellen oder ändern unterstützt jetzt JSON-Dateiuploads

3. April 2023

Die Seite Tabelle aus Dateiupload erstellen oder ändern unterstützt jetzt JSON-Dateiuploads. Weitere Informationen finden Sie unter Erstellen oder Ändern einer Tabelle mithilfe von Dateiupload.