Juni 2024

Diese Features und Azure Databricks-Plattformverbesserungen wurden im Juni 2024 veröffentlicht.

Notebooks: Hervorhebung der Fehlordnungssyntax

16. Juni 2024

Der Python-Syntaxfehler, der in Notebooks hervorgehoben wird, warnt Benutzer jetzt, wenn Variablen verwendet werden, bevor sie deklariert werden, und schlägt eine Lösung vor.

Automatische Fehlerdiagnose durch Notebooks-Assistent

16. Juni 2024

Der Databricks-Assistent diagnostiziert jetzt automatisch Codefehler in Notebooks. Er verwendet generative KI, um Ihren Code und die Fehlermeldung zu analysieren und einen Fix direkt in Ihrem Notebook vorzuschlagen. Weitere Informationen finden Sie unter Verwenden des Databricks-Assistenten.

Verbesserungen für den Katalog-Explorer

28. Juni 2024

Der Katalog-Explorer wurde wie folgt verbessert:

• Es wurde ein Abschnitt für Schnellzugriff hinzugefügt, in dem zuletzt verwendete und bevorzugte Unity Catalog-Objekte sowie Kataloge und Schemas durchsucht werden können.

• Die obere Leiste und die Akkordeonstruktur wurden entfernt, und die Einstiegspunkte für Folgendes wurden in ein Zahnradsymbolmenü auf der Randleiste mit dem Schemabrowser verschoben, um die Navigation zu vereinfachen:

  • Computeauswahl
  • Delta Sharing
  • Speicheranmeldeinformationen
  • Externe Speicherorte
  • Verbindungen
  • DBFS durchsuchen

  Auf Delta-Freigaben und Externe Daten kann auch im oberen Bereich des Katalog-Explorers über dem Abschnitt Schnellzugriff zugegriffen werden.

Bereitstellen mehrerer externer Modelle über einen einzelnen Endpunkt für die Modellbereitstellung

27. Juni 2024

Mosaic AI Model Serving unterstützt jetzt die Bereitstellung mehrerer externer Modelle pro Endpunkt für die Modellbereitstellung. Weitere Informationen finden Sie unter Bereitstellen mehrerer externer Modelle an einen Endpunkt.

Databricks-Assistent jetzt allgemein verfügbar

27. Juni 2024

Der Databricks-Assistent ist jetzt allgemein verfügbar. Der Assistent bietet unter anderem folgende Funktionen:

• Generieren, Debuggen, Optimieren und Erläutern von Code
• Erstellen von Visualisierungen aus Daten Weitere Informationen finden Sie unter Erstellen von Visualisierungen mit dem Databricks-Assistenten.
• Debuggen von Aufträgen (Public Preview-Feature)
• Schreiben und Bearbeiten von SQL-Abfragen
• Finden relevanter Hilfe in der Azure Databricks-Dokumentation und in der Wissensdatenbank

Weitere Informationen finden Sie unter Was ist der Databricks-Assistent?.

Databricks-Assistent versieht Threads jetzt mit Titeln

27. Juni 2024

Um die Navigation in Hilfethreads zu vereinfachen, versieht der Databricks-Assistent die Threads jetzt basierend auf dem Kontext Ihres Prompts mit Titeln.

Weitere Informationen finden Sie unter Verwenden des Databricks-Assistenten.

Umgebungs-Manager für serverlose Notebooks

27. Juni 2024

Sie können Python-Abhängigkeiten für serverlose Notebooks nun über den Seitenbereich Umgebung installieren – einem zentralen Ort zum Bearbeiten, Anzeigen und Exportieren der Bibliotheksanforderungen für ein Notebook. Weitere Informationen finden Sie unter Installieren von Notebookabhängigkeiten.

Notebooks-Debugkonsole

27. Juni 2024

Mit der Notebook-Debugkonsole können Sie jetzt Livevariablenwerte prüfen und Codeausschnitte während einer Notebook-Debuggingsitzung ausführen.

Schnelles Hinzufügen eines regelmäßigen Zeitplans zu einem Azure Databricks-Workflow

28. Juni 2024

Sie können jetzt einem Azure Databricks-Workflow einen einfachen Zeitplan hinzufügen, indem Sie lediglich ein Intervall und eine Zeiteinheit angeben (beispielsweise, um den Workflow alle vier Stunden auszuführen). Dieser neue Zeitplantyp ergänzt den bereits vorhandenen erweiterten Zeitplantyp und ermöglicht es Ihnen, einen Zeitplan mit nur wenigen Klicks hinzuzufügen. Siehe Ausführen von Jobs nach einem Zeitplan.

Databricks Runtime 15.3 ist allgemein verfügbar

24. Juni 2024

Databricks Runtime 15.3 und Databricks Runtime 15.3 ML sind jetzt allgemein verfügbar.

Weitere Informationen finden Sie unter Databricks Runtime 15.3 bzw. unter Databricks Runtime 15.3 für Machine Learning.

Azure-Geografien sind GA

24. Juni 2024

Azure-Geografien sind jetzt allgemein verfügbar. Azure-Geografien verwalten die Datenresidenz beim Verarbeiten von Kundeninhalten für einige KI-Funktionen.

Weitere Informationen finden Sie unter Designierte Databricks-Dienste.

Neue verbesserte Katalogerstellungs-Benutzeroberfläche

18. Juni 2024

Die neue Benutzeroberfläche zur Katalogerstellung führt Sie schrittweise durch den gesamten Prozess zum Erstellen und Konfigurieren eines Katalogs. Dabei werden hilfreiche Eingabeaufforderungen bereitgestellt und erforderliche von optionalen Konfigurationen getrennt. Sie können dieselbe Benutzeroberfläche verwenden, um Standard- und Fremdkataloge sowie freigegebene Kataloge zu erstellen.

Weitere Informationen finden Sie unter Erstellen von Katalogen.

Updates für Subnetze in Netzwerkkonnektivitätskonfigurationen

18. Juni 2024

Databricks aktualisiert die Subnetze in Netzwerkkonnektivitätskonfigurationen (NCCs) in allen Regionen. Die neuen Subnetz-IDs werden automatisch vorhandenen Azure Storage-Firewallregeln hinzugefügt, die den Zugriff von den vorhandenen Subnetz-IDs ermöglichen, um einen unterbrechungsfreien Zugriff von Azure Databricks sicherzustellen.

Wenn Sie die Netzwerkkonnektivitätskonfigurations-API verwenden, um die Subnetz-IDs abzurufen und sie zu Speichernetzwerkregeln für neue Azure Storage-Konten hinzuzufügen, treten keine Unterbrechungen auf. Wenn Sie jedoch den vorhandenen Satz von Subnetz-IDs hartcodieren, können Unterbrechungen auftreten. Databricks empfiehlt die Verwendung der API für die neuesten Informationen. Siehe die API für Netzwerkkonnektivitätskonfigurationen.

Im Zuge dieses Updates kommt es am 20. Juni 2024 zwischen 20:00 und 24:00 Uhr (PDT) unter Umständen zu Downtime für die Netzwerkverbindungskonfigurations-API.

Die Abrechnungssystemtabellen sind standardmäßig aktiviert

18. Juni 2024

Das system.billing-Schema ist jetzt standardmäßig in allen Unity-Katalogarbeitsbereichen aktiviert. Weitere Informationen unter Referenz zur Systemtabelle für abrechnungsfähigen Verbrauch.

Lakehouse Monitoring ist allgemein verfügbar

13. Juni 2024

Databricks Lakehouse Monitoring ist jetzt allgemein verfügbar.

Die Volumefreigabe mithilfe der Delta-Freigabe ist jetzt allgemein verfügbar

13. Juni 2024

Delta Sharing-Unterstützung für die Freigabe nicht tabellarischer Daten als Volume ist jetzt allgemeine verfügbar. Sie können Volumes zwischen Databricks-Arbeitsbereichen auf verschiedenen Unity Catalog-Metaspeichern (einschließlich Arbeitsbereichen auf verschiedenen Databricks-Konten und verschiedenen Clouds) gemeinsam nutzen.

Volumes sind Unity Catalog-Objekte, die ein logisches Speichervolume an einem Speicherort für Cloudobjekte darstellen. Sie sollen in erster Linie Governance über nicht tabellarische Datenressourcen bereitstellen. Delta Sharing on Databricks bietet eine native Integration in Unity Catalog, mit der Sie freigegebene Volumedaten verwalten, steuern, überwachen und nachverfolgen können.

Siehe Hinzufügen von Volumes zu einer Freigabe.

Vom Kunden verwaltete Schlüssel (CMK) für die Databricks-Vektorsuche sind jetzt GA

12. Juni 2024

Kundenverwaltete Schlüssel (CMK) für Vektorsuchendpunkte sind jetzt allgemein verfügbar.

Mosaic AI Agent Framework (Öffentliche Vorschau)

12. Juni 2024

Das Mosaic AI Agent Framework ist eine Reihe von Tools für Databricks, die Entwicklern beim Erstellen, Bereitstellen und Bewerten von Anwendungen der erweiterten Generation (Retrieval Augmented Generation, RAG) von Produktionsqualität helfen sollen. Mit Agent Framework können Sie LLM-Anwendungen auf einer einzigen Plattform mithilfe Ihrer eigenen Daten erstellen oder optimieren.

Agent Framework umfasst die folgenden Funktionen:

• Erstellen und Protokollieren von Agents und Ketten.
• Parametrisieren Sie Agents und Ketten für schnelles Experimentieren und schnelle Durchläufe.
• Integrierte Metriken zum Vergleichen von Abfragen relevanter Dokumente, Antwortgenauigkeit und Kosten und Latenz.
• Benutzerdefinierte LLM-Richter für die Abruf- und Antwortgenauigkeit.
• Stellen Sie KI-Anwendungen mit automatisierter Anforderungs- und Antwortprotokollierung bereit.
• Integrierte Überprüfungs-App, um Benutzerfeedback zu erhalten.
• Agent-Bewertung, um die Qualität, Latenz und Kosten von generativen KI-Anwendungen schnell und zuverlässig zu bewerten.
• MLflow-Ablaufverfolgung zum Analysieren und Vergleichen von Ablaufverfolgungen über die Codeausführung hinweg.

Für weitere Informationen, siehe Retrieval Augmented Generation (RAG) in Azure Databricks.

Predictive Optimization ist jetzt GA

11. Juni 2024

Die prädiktive Optimierung für verwaltete Tabellen im Unity-Katalog ist jetzt allgemein verfügbar. Die Predictive Optimization führt jetzt OPTIMIZE auf Tabellen mit flüssiger Clusterung aus, die für die Anwendung von Clustering aktiviert ist. Siehe Prädiktive Optimierung für verwaltete Unity Catalog-Tabellen.

Die Routenoptimierung ist für die Bereitstellung von Endpunkten verfügbar

11. Juni 2024

Sie können jetzt routenoptimierte Bereitstellungsendpunkte für Ihr Modell erstellen, um Workflows zu bedienen oder Features zu bedienen. Siehe Konfigurieren der Routenoptimierung für die Bereitstellung von Endpunkten.

Modellunterstützung mit einer Arbeitsbereichsspeicherkontofirewall

11. Juni 2024

Die Modellbereitstellung wird jetzt von der Firewallunterstützung für das Speicherkonto des Arbeitsbereichs unterstützt. Siehe Aktivieren der Firewallunterstützung für Ihr Speicherkonto für einen Arbeitsbereich.

Spaltenzuordnung ist jetzt GA

10. Juni 2024

Die Säulenzuordnung des Delta Lake ist jetzt allgemein verfügbar. Sie können jetzt DROP FEATURE verwenden, um die Spaltenzuordnung und das Downgrade-Tabellenprotokoll zu deaktivieren. Weitere Informationen finden Sie unter Rename and drop columns with Delta Lake column mapping (Umbenennen und Löschen von Spalten mit Delta Lake-Spaltenzuordnung).

Workflowsystemtabellen sind jetzt verfügbar (Public Preview).

10. Juni 2024

Das system.lakeflow Schema enthält vier neue Tabellen, die Sie zum Überwachen von Aufträgen in Ihrem Konto verwenden können. Weitere Informationen finden Sie unter Auftragssystemtabellenreferenz.

Wenn Sie keinen Zugriff auf diese Systemtabellen haben, stellen Sie sicher, dass Sie das system.lakeflow Schema in Ihrem Konto aktiviert haben. Siehe Aktivieren von Systemtabellenschematas

Funktionsaufrufe sind in der öffentlichen Vorschauversion

10. Juni 2024

Funktionsaufrufe sind jetzt in der öffentlichen Vorschau verfügbar. Diese Funktionalität ist mit Foundation-Modell-APIs pay-per-Token-Modellen verfügbar: DBRX Instruct und Meta-Llama-3-70B-Instruct. Siehe Funktionsaufrufe für Azure Databricks.

Abfragen eines Vektorsuchindexes mithilfe von vector_search()

10. Juni 2024

KI-Funktionen unterstützen jetzt vector_search() für das Abfragen eines Mosaic AI-Vektorsuchindex mithilfe von SQL. Weitere Informationen finden Sie unter vector_search-Funktion.

Mosaic AI Vektorsuche unterstützt jetzt die Hybridsuche

7. Juni 2024

Die Mosaic AI-Vektorsuche unterstützt jetzt eine hybride Suchfunktion zur Ähnlichkeit mit Schlüsselwörtern, die die vektorbasierte Einbettungssuche mit herkömmlichen schlüsselwortbasierten Suchtechniken kombiniert. Dieser Ansatz entspricht exakten Wörtern in der Abfrage und verwendet gleichzeitig eine vektorbasierte Ähnlichkeitssuche, um die semantischen Beziehungen und den Kontext der Abfrage zu erfassen. Durch die Integration dieser beiden Techniken ruft die Hybrid-Stichwort-Ähnlichkeitssuche Dokumente ab, die nicht nur die genauen Schlüsselwörter enthalten, sondern auch solche, die konzeptionell ähnlich sind und umfassendere und relevante Suchergebnisse bereitstellen. Weitere Informationen finden Sie unter Mosaic AI-Vektorsuche.

GTE wird jetzt in Model Serving unterstützt

7. Juni 2024

Mosaic KI Model Serving unterstützt jetzt General Text Embedding (GTE), ein Texteinbettungsmodell, das Text einem Einbettungsvektor zuordnen kann. GTE wird als Teil von Foundation Model-APIs unterstützt und steht in Endpunktregionen mit Pay-per-Token-Diensten zur Verfügung. Siehe Verwenden von Foundation-Modell-APIs.

Databricks-Assistent: Threads & Abfragen standardmäßig aktiviert

6. Juni 2024

Der Databricks-Assistent (Public Preview) verfolgt jetzt Abfragethreads und Verlauf im gesamten Editorkontext in Ihrer Sitzungsoberfläche standardmäßig nach. Sie können die Aktivierung für alle Arbeitsbereiche in einem Konto oder für einzelne Arbeitsbereiche verwalten.

Weitere Informationen finden Sie unter Was ist Databricks Assistant?

Verbesserter Notizbuch Markdown-Editor

5. Juni 2024

Sie können jetzt eine Livevorschau Ihrer Markdown-Zellen in Notizbüchern anzeigen und auf eine Symbolleiste für allgemeine Markdown-Elemente wie Kopfzeilen, Listen und Links zugreifen. Verbringen Sie mehr Zeit mit der Kommunikation Ihrer Ideen und weniger Zeit, sich an die Syntax zu erinnern.

Schneller Zugriff auf Katalog-Explorer-Tabellen aus Notizbüchern

5. Juni 2024

Sie können jetzt ganz einfach direkt über Notizbücher auf Katalog-Explorer-Tabellen zugreifen. Zeigen Sie auf einen Tabellennamen in einer Notizbuchzelle, um einen Link zur Katalog-Explorer-Seite abzurufen, um Details wie Spalten, Berechtigungen und mehr anzuzeigen.

Databricks ODBC-Treiber 2.8.2

4. Juni 2024

Ab sofort steht Version 2.8.2 des Databricks-ODBC-Treibers zur Verfügung (Download). Mit diesem Release werden die folgenden neuen Features und Verbesserungen hinzugefügt:

• Kunden können jetzt erweiterte SQL PUT-, GET- und REMOVE-Befehle verwenden, um große Datasets in Unity-Katalogvolumen zu erfassen und zu verwalten.
• Standardmäßige OAuth-Konfigurationswerte werden jetzt aktualisiert und kompatibel. Zu den aktualisierten Konfigurationsoptionen gehören der Autorisierungsendpunkt, die OAuth-Client-ID, der OAuth-Benutzer-zu-Computer-Bereich und der OAuth-Computer-zu-Computer-Bereich. Weitere Informationen finden Sie in den Versionshinweisen.
• Drittanbieterbibliotheken wurden aktualisiert, einschließlich expat 2.6.2 (zuvor 2.6.0) und libCURL 8.7.1 (zuvor 8.6.0).
• Der Treiber akzeptiert jetzt eine private signierte Zertifizierungsstelle (CA), wenn sie dem Zertifikatspeicher der vertrauenswürdigen Windows-Stammzertifizierungsstelle hinzugefügt wird.

Darüber hinaus werden durch dieses Release folgende Probleme behoben:

• Der Client hat zuvor einen Fehler zurückgegeben, wenn die Länge eines Tabellenkommentars MaxCommentLen überschritten hat. Das Standardverhalten schneidet nun den Tabellenkommentar ab, um dem in MaxCommentLen angegebenen Limit zu entsprechen.
• Der Client hat zuvor beim Ausgeben von SQLCancel unter bestimmten Umständen einen Fehler zurückgegeben.

Die neue Benutzeroberfläche des Databricks-Notizbuchs ist jetzt allgemein verfügbar.

4. Juni 2024

Die neue Benutzeroberfläche von Databricks-Notizbüchern bietet Entwicklern eine optimierte, datenorientierte Erstellungserfahrung. Hauptfeatures sind:

• Modern UX: Genießen Sie eine optimierte Codierung mit einer aktualisierten Benutzeroberfläche und anderen Features, um die Organisation von Notizbüchern zu verbessern.
• Neue Ergebnistabelle: Führen Sie keine Codedatensuche mit Such- und Filterfunktionen direkt auf Ergebnisausgaben durch.