Juli 2023

Diese Features und Azure Databricks-Plattformverbesserungen wurden im Juli 2023 veröffentlicht.

Arbeitsbereichsadministratoren können jetzt Kontogruppen erstellen.

31. Juli 2023

Arbeitsbereichsadministrator*innen können ab sofort Kontogruppen aus ihren Arbeitsbereichen mit Identitätsverbund erstellen. Zuvor konnten Arbeitsbereichsadministrator*innen nur arbeitsbereichslokale Gruppen erstellen. Kontogruppen kann Zugriff auf Daten in einem Unity Catalog-Metastore und Zugriff auf Arbeitsbereiche mit Identitätsverbund gewährt werden. Databricks empfiehlt die Verwendung von Kontogruppen anstelle von arbeitsbereichslokalen Gruppen, um die Vorteile von Unity Catalog und einer zentralen Stelle für die Identitätsverwaltung zu nutzen.

Weitere Informationen finden Sie unter Verwalten von Kontogruppen mithilfe der Seite „Administratoreinstellungen“ für Arbeitsbereiche.

Rolle „Gruppen-Manager“ in der Public Preview

31. Juli 2023

Sie können Databricks-Benutzer*innen, Dienstprinzipalen und Gruppen ab sofort Berechtigungen zum Verwalten von Gruppen erteilen. Gruppen-Manager können die Gruppenmitgliedschaft verwalten. Sie können auch anderen Benutzern die Rolle „Gruppenmanager“ zuweisen. Kontoadministratoren haben die Rolle „Gruppenmanager“ für alle Gruppen im Konto. Arbeitsbereichsadministratoren verfügen über die Rolle „Gruppenmanager“ für Kontogruppen, die sie erstellen.

Siehe Wer kann Kontogruppen verwalten?.

Databricks CLI auf Version 0.202.0 (Public Preview) aktualisiert

27. Juli 2023

Die Databricks-Befehlszeilenschnittstelle (Databricks CLI) wurde auf Version 0.202.0 aktualisiert. Details finden Sie im Änderungsprotokoll für die Version 0.202.0.

Databricks SDK für Python auf Version 0.3.0 (Betaversion) aktualisiert

27. Juli 2023

Version 0.3.0 des Databricks SDK für Python bietet folgende Funktionen: Unterstützung des Diensts für Kontonetzwerkrichtlinien; Verarbeitung geschachtelter Abfrageparameter; Hinzufügen, Entfernen und Erstellen verschiedener Methoden, Felder, Datenklassen und Dienste und mehr. Details finden Sie im Änderungsprotokoll für die Version 0.3.0.

Databricks SDK für Go auf Version 0.14.1 (Betaversion) aktualisiert

27. Juli 2023

Version 0.14.1 des Databricks SDK für Go unterstützt die ordnungsgemäße Verarbeitung geschachtelter Abfrageparameter und korrigiert die Filterung in QueryHistory-Auflistungen. Details finden Sie im Änderungsprotokoll für die Version 0.14.1.

Databricks SDK für Go auf Version 0.14.0 (Beta) aktualisiert

26. Juli 2023

Mit Version 0.14.0 des Databricks SDK für Go wird Unterstützung für den Dienst für Kontonetzwerkrichtlinien eingeführt, und es werden verschiedene Methoden, Felder und Typen hinzugefügt, entfernt und geändert. Details finden Sie im Änderungsprotokoll für die Version 0.14.0.

Ausführen eines weiteren Auftrags als Aufgabe in einem Azure Databricks-Auftrag

25. Juli 2023

Mit der neuen Aufgabe Run Job können Sie einen weiteren Auftrag als Aufgabe in Ihren Azure Databricks-Auftrag einfügen. Auf diese Weise können Sie einen großen Verarbeitungsworkflow in mehrere Komponentenaufträge unterteilen oder wiederverwendbare Komponenten zur Nutzung in mehreren Aufträgen erstellen. Informationen zur Verwendung der Aufgabe in der Benutzeroberfläche für Aufträge finden Sie unter Planen und Orchestrieren von Workflows. Informationen zur Verwendung der Aufgabe mit der REST-API für Aufträge finden Sie unter Aufträge in der Referenz zur REST-API 2.1 oder in der Referenz zur Auftrags-API 2.0.

Aktualisierung des Arbeitsbereichsnetzwerks erhält UI-Unterstützung (GA)

24. Juli 2023

Bisher konnten Sie mithilfe einer ARM-Vorlage über die Befehlszeile oder im Azure-Portal sichere Clusterkonnektivität oder Azure Private Link aktivieren.

Ab sofort können Sie die Benutzeroberfläche des Azure-Portals für Netzwerkaktualisierungen (ohne Vorlage) auch direkt in Ihrer Azure Databricks-Arbeitsbereichsinstanz nutzen. Beide Formen der Netzwerkaktualisierung sind jetzt allgemein verfügbar.

Standardmäßiger Zugriff auf Datenprodukte im Databricks Marketplace für alle Benutzer

24. Juli 2023

Ab dem 24. Juli wird es allen Benutzer*innen über einen stufenweisen Rollout für alle berechtigten Arbeitsbereiche ermöglicht, kostenlose oder zuvor erworbene Datasets über den Databricks Marketplace zu installieren. Dies wird ermöglicht, indem allen Benutzern in sämtlichen Unity Catalog-Metastores die Berechtigung USE MARKETPLACE ASSETS gewährt wird. Diese neue Berechtigung hat keine Auswirkungen auf die Kosten, da alle Marketplace-Transaktionen außerhalb von Databricks stattfinden. Wenn Sie den Zugriff deaktivieren möchten, finden Sie weitere Informationen unter Deaktivieren des Marketplace-Zugriffs.

Klassischer Tastenkombinationsmodus

21. Juli 2023

Eine neue Einstellung ermöglicht es Ihnen, die Features des neuen Editors zu nutzen (z. B. automatische Vervollständigung während der Eingabe, Syntaxhervorhebung, Codeformatierung und mehr), während Sie die vertrauten Tastenkombinationen des vorherigen Editors beibehalten. Um auf diese Einstellung zuzugreifen, öffnen Sie die Editorkonfiguration, und schalten Sie Editor-Verknüpfungsmodus für Notebook-Editor auf Klassisch (Codespiegel) um.

Lakehouse Federation ermöglicht das Ausführen von Abfragen für externe Datenbankanbieter (Public Preview)

21. Juli 2023

Lakehouse Federation ist die Abfrageverbundplattform für Azure Databricks. Sie nutzt die Vorteile von Unity Catalog, um Benutzer*innen und Systeme in die Lage zu versetzen, Abfragen in verschiedenen externen Datenquellen durchzuführen, ohne alle Daten in ein einheitliches System migrieren zu müssen.

Lakehouse Federation ist für Anwendungsfälle wie die folgenden vorgesehen:

• Ad-hoc-Berichterstellung.
• Proof of Concept-Arbeiten.
• Die explorative Phase neuer ETL-Pipelines oder -Berichte.
• Unterstützung von Workloads während der inkrementellen Migration.

In jedem dieser Szenarien erhalten Sie durch den Abfrageverbund schneller Erkenntnisse, da Sie die Daten an ihrem Aufbewahrungsort abfragen und eine komplexe und zeitaufwendige ETL-Verarbeitung vermeiden können. Darüber hinaus profitieren Sie von den Vorteilen der Unity Catalog-Schnittstellen und der Datengovernance, einschließlich differenzierter Zugriffssteuerung, Datenherkunft und Suche.

Weitere Informationen finden Sie unter Was ist Lakehouse Federation?.

Repositorys können in den Papierkorb verschoben werden.

19. Juli 2023

Das Löschen von Repositorys funktioniert jetzt auf die gleiche Weise wie das Löschen anderer Arbeitsbereichsressourcen. Klicken Sie in der Repositoryliste mit der rechten Maustaste auf den Namen des Repositorys, und wählen Sie In den Papierkorb verschieben aus. Nach 30 Tagen wird der Papierkorb automatisch endgültig gelöscht.

Weitere Informationen finden Sie unter Löschen eines Objekts

Erstellen von Warnungen für langsam ausgeführte oder hängen gebliebene Aufträge

18. Juli 2023

Sie können ab sofort eine erwartete Dauer für einen Azure Databricks-Auftrag oder eine Aufgabe konfigurieren und Benachrichtigungen hinzufügen, wenn ein Auftrag oder eine Aufgabe die erwartete Dauer überschreitet. Mit diesem Feature können Sie sich über langsam ausgeführte Aufträge benachrichtigen lassen, ohne dass die Ausführung abgebrochen wird. Informationen zum Konfigurieren einer erwarteten Dauer in der Azure Databricks-Benutzeroberfläche für Aufträge finden Sie unter Konfigurieren einer erwarteten Abschlusszeit oder eines Timeouts für einen Auftrag. Informationen zum Konfigurieren der erwarteten Dauer mit der Auftrags-API 2.1 finden Sie unter Aufträge in der REST-API-Referenz.

Databricks SDK für Go auf Version 0.13.0 (Beta) aktualisiert

18. Juli 2023

Mit Version 0.13.0 des Databricks SDK für Go wird Unterstützung für die Authentifizierung mit von Azure verwalteten Identitäten für Vorgänge auf Kontoebene eingeführt, es werden verschiedene Methoden und Felder hinzugefügt, geändert und entfernt und mehr. Details finden Sie im Änderungsprotokoll für die Version 0.13.0.

Databricks SDK für Python auf Version 0.2.0 (Beta) aktualisiert

18. Juli 2023

Version 0.2.0 des Databricks SDK für Python fügt eine lokale Implementierung von dbutils.widgets hinzu, es werden verschiedene Methoden, Felder und Datenklassen hinzugefügt, geändert und entfernt und mehr. Details finden Sie im Änderungsprotokoll für die Version 0.2.0.

Databricks CLI auf Version 0.201.0 (Public Preview) aktualisiert

18. Juli 2023

Version 0.201.0 der Databricks-Befehlszeilenschnittstelle (Databricks CLI) verbessert die auth login-Erfahrung, unterstützt die Vervollständigung per TAB-TASTE für das Aufrufen von Azure Databricks-Authentifizierungskonfigurationsprofilen, ermöglicht das Hinzufügen, Ändern und Entfernen mehrerer Befehlsgruppen und Befehle und mehr. Details finden Sie im Änderungsprotokoll für die Version 0.201.0.

Databricks SDK für Python auf Version 0.2.1 (Beta) aktualisiert

18. Juli 2023

Version 0.2.1 des Databricks SDK für Python unterstützt ältere Versionen von urllib. Details finden Sie im Änderungsprotokoll für die Version 0.2.1.

Databricks-Assistent in der Public Preview

18. Juli 2023

Der Databricks-Assistent funktioniert als KI-basierter begleitender Paarprogrammierer, mit dem Sie die Effizienz beim Erstellen von Notebooks, Abfragen und Dateien steigern können. Mit seiner Hilfe können Sie Fragen schnell beantworten, indem Code und Abfragen generiert, optimiert, vervollständigt, erläutert und korrigiert werden. Weitere Informationen und Anweisungen zum Aktivieren des Assistenten finden Sie unter Häufig gestellte Fragen zum Databricks-Assistenten.

Deaktivieren von Benutzern und Dienstprinzipalen aus Ihrem Konto

13. Juli 2023

Sie können jetzt Benutzer*innen und Dienstprinzipale in Ihrem Azure Databricks-Konto deaktivieren. Deaktivierte Benutzer*innen können sich nicht beim Azure Databricks-Konto oder bei Arbeitsbereichen mit Identitätsverbund anmelden. Alle Berechtigungen und Arbeitsbereichsobjekte des Benutzers bleiben jedoch unverändert. Weitere Informationen finden Sie unter Deaktivieren von Benutzer*innen in Ihrem Azure Databricks-Konto und Deaktivieren eines Dienstprinzipals in Ihrem Azure Databricks-Konto.

Die SCIM-Bereitstellung auf Kontoebene deaktiviert jetzt Benutzer, wenn sie im Identitätsanbieter deaktiviert werden.

13. Juli 2023

Bei der SCIM-Bereitstellung auf Kontoebene werden Benutzer*innen jetzt deaktiviert, wenn sie in Ihrem Identitätsanbieter deaktiviert sind. Bisher wurden Benutzer*innen, die in einem Identitätsanbieter deaktiviert waren, bei der SCIM-Bereitstellung auf Kontoebene aus dem Azure Databricks-Konto gelöscht. Weitere Informationen finden Sie unter Synchronisieren von Benutzer*innen und Gruppen über Microsoft Entra ID und Deaktivieren von Benutzer*innen in Ihrem Azure Databricks-Konto.

Administratorzugriff für Papierkorbverzeichnisse

13. Juli 2023

Arbeitsbereichsadministrator*innen können jetzt auf die Papierkorbverzeichnisse anderer Benutzer*innen zugreifen.

Verhinderung von MIME-Typermittlung und XSS-Angriffsseitenrendering sind jetzt immer aktiviert

12. Juli 2023

Azure Databricks verringert das Risiko von MIME-Typermittlung und XSS-Angriffsseitenrendering durch das Hinzufügen geeigneter HTTP-Header. Diese Features waren bisher standardmäßig aktiviert und konnten deaktiviert werden. Zur Verbesserung der Sicherheit werden beide Features in Azure Databricks jetzt immer aktiviert, und es sind keine Einstellungen für Arbeitsbereichsadministrator*innen mehr vorhanden, um sie zu deaktivieren. Für Arbeitsbereiche, bei denen bisher eines oder beide dieser Features deaktiviert waren, sind nun beide Features aktiviert.

Unity Catalog-Volumes in der Public Preview

12. Juli 2023

Ab Databricks Runtime 13.2 können Sie jetzt Volumes in Unity Catalog verwenden, um den Zugriff auf Speicherorte für Cloudobjekte zu verwalten. Volumes bieten Funktionen zum Zugreifen auf sowie Speichern, Verwalten und Organisieren von Dateien. Weitere Informationen finden Sie unter Was sind Unity Catalog-Volumes?.

Vereinfachtes Einreichen von Produktfeedback über den Arbeitsbereich

11. Juli 2023

Es ist ab sofort einfacher, Produktfeedback über Ihren Arbeitsbereich zu senden. Sie können mit weniger Schritten und ohne Verlassen der Benutzeroberfläche des Arbeitsbereichs Feedback einreichen und Screenshots anfügen. Weitere Informationen finden Sie unter Übermitteln von Produktfeedback.

Databricks-Erweiterung für Visual Studio Code auf Version 1.1.0 aktualisiert

10. Juli 2023

Version 1.1.0 der Databricks-Erweiterung für Visual Studio Code ermöglicht standardmäßig die Integration von Databricks Connect, fügt experimentelle Features für Jupyter-Notebooks hinzu und mehr. Details finden Sie im Änderungsprotokoll für die Version 1.1.0.

Funktionen werden jetzt im Katalog-Explorer angezeigt (Public Preview)

10. Juli 2023

Benutzerdefinierte SQL- und Python-Funktionen sind jetzt im Katalog-Explorer sichtbar. Über diese neue Benutzeroberfläche können Sie Funktionsdetails anzeigen und Berechtigungen verwalten.

Databricks Terraform-Anbieter auf Version 1.21.0 aktualisiert

7. Juli 2023

Version 1.21.0 des Databricks Terraform-Anbieters bietet Unterstützung für Abonnements in Dashboards und SQL-Warnungsaufgaben in databricks_job, definiert generische Azure Databricks-Hilfsprogramme zum Definieren von Datenquellen auf Arbeitsbereichs- und Kontoebene und mehr. Details finden Sie im Änderungsprotokoll für die Version 1.21.0.

Maximaler Offset für List all jobs- und List job runs-API-Anforderungen jetzt begrenzt

6. Juli 2023

Der maximale Offset, den Sie in den List all jobs- und List job runs-Anforderungen in der Auftrags-API angeben können, ist ab sofort begrenzt. Verwenden Sie zur Umgehung dieses Grenzwerts bei der Nutzung dieser Anforderungen die tokenbasierte Paginierung, für die dieser Grenzwert nicht gilt. Weitere Informationen finden Sie unter GET /api/2.1/jobs/list und GET /api/2.1/jobs/runs/list in der REST-API-Referenz.

Databricks Runtime 13.2 ist allgemein verfügbar

6. Juli 2023

Databricks Runtime 13.2 und Databricks Runtime 13.2 ML sind jetzt allgemein verfügbar.

Siehe Databricks Runtime 13.2 (EoS) und Databricks Runtime 13.2 für Machine Learning (EoS).

Delta Sharing und Databricks Marketplace unterstützen die Freigabe von Ansichten (Public Preview)

6. Juli 2023

Sie können ab sofort Ansichten in Delta Sharing und Databricks Marketplace freigeben. Siehe Hinzufügen von Ansichten zu einer Freigabe.

Lebensdauer für Initskripts auf DBFS endet am 1. September 2023

5. Juli 2023

Am 1. September 2023 endet die Unterstützung für Initialisierungsskripts in DBFS, und das Feature wird nicht mehr funktionieren. Speichern Sie Initialisierungsskripts in den Arbeitsbereichsdateien, um sicherzustellen, dass sie auch nach dem 1. September 2023 noch funktionieren.