Settembre 2023

Queste funzionalità e i miglioramenti della piattaforma Azure Databricks sono stati rilasciati a settembre 2023.

Lakehouse Federation disponibile nei cluster a utente singolo

29 settembre 2023

La federazione di Lakehouse è ora disponibile in cluster a utente singolo che usano Databricks Runtime 13.1 e versioni successive. Solo il proprietario della connessione può eseguire query sui federati catalogs. Vedere Che cos'è Lakehouse Federation?.

Delegare la possibilità di creare credenziali di archiviazione in Unity Catalog

29 settembre 2023

È ora possibile grant agli utenti le autorizzazioni per creare una credenziale di archiviazione nel metastore Unity Catalog utilizzando il nuovo privilegio CREATE STORAGE CREDENTIAL. Vedere CREATE STORAGE CREDENTIAL.

Databricks Runtime 14.1 (Beta)

28 settembre 2023

Databricks Runtime 14.1 e Databricks Runtime 14.1 ML sono ora disponibili come versioni beta.

Vedere Databricks Runtime 14.1 e Databricks Runtime 14.1 per Machine Learning.

Modello GPU ottimizzato per le macchine virtuali in anteprima pubblica

28 settembre 2023

Il modello usato in Azure Databricks supporta la distribuzione di modelli PyTorch e TensorFlow usando risorse di calcolo GPU. Questa funzionalità è in anteprima pubblica nelle regioni select e si applica anche alla distribuzione GPU dei modelli registrati con varietà mlflow.pyfunc, mlflow.pytorch, mlflow.tensorflowe mlflow.transformers. Vedere Tipi di carico di lavoro GPU.

Questa anteprima include anche il supporto della distribuzione GPU ottimizzata per la gestione di modelli linguistici di grandi dimensioni. Vedere Servizio LLM (Optimized Large Language Model)

Impedire che le esecuzioni di un processo vengano ignorate quando si raggiungono i limiti di concorrenza

27 settembre 2023 - 2 ottobre 2023

Per impedire che le esecuzioni di un processo di Azure Databricks vengano ignorate a causa dei limiti di concorrenza, è ora possibile abilitare la coda nel processo. Quando la coda è abilitata, se viene raggiunto il livello di concorrenza limit, il processo viene inserito in una coda finché non c'è capacità disponibile per eseguire l'attività. Vedere Abilitare la coda di esecuzioni di processi.

Provider Databricks Terraform aggiornato alla versione 1.27.0

27 settembre 2023

Il provider Databricks Terraform versione 1.27.0 aggiunge owner e force_destroy a databricks_metastore_data_access, include diversi miglioramenti aggiuntivi e correzioni di bug e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 1.27.0.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.206.0 (anteprima pubblica)

27 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.206.0. Questa versione abilita le sostituzioni di destinazione per i cluster di pipeline nei bundle di asset di Databricks, migliora l'esperienza di inizializzazione del modello di bundle e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 0.206.0.

Databricks SDK per Go aggiornato alla versione 0.21.0 (beta)

27 settembre 2023

Databricks SDK per Go versione 0.21.0 introduce più di una dozzina di modifiche che causano un'interruzione dell'API, aggiunge oltre una dozzina di API e aggiunge una dozzina di campi. Per altre informazioni, vedere il log delle modifiche per la versione 0.21.0.

L'inferenza tables per gli endpoint di servizio dei modelli è in anteprima pubblica.

26 settembre 2023

Abilitare l'inferenza tables nel modello che gestisce gli endpoint per acquisire le richieste in ingresso e le risposte in uscita a tali endpoint e registrarle come Catalog Delta di Unity table. A sua volta, è possibile usare i dati in questa table per monitorare, eseguire il debug e migliorare i modelli di Machine Learning. Consultare Inference tables per il monitoraggio e il debug dei modelli.

Per registrarsi all’anteprima pubblica, contattare il team dell'account Azure Databricks.

Driver ODBC di Databricks 2.7.5

23 settembre 2023

È stata rilasciata la versione 2.7.5 del driver ODBC di Databricks (download). Questa versione aggiunge i miglioramenti e le nuove funzionalità che seguono:

• Miglioramento dell'autenticazione client OAuth 2.0 e supporto per l'individuazione degli endpoint OIDC.
• Crittografia lato server con chiavi fornite dal cliente.
• Funzione Timedate.
• Miglioramento della messaggistica degli errori per il recupero cloud.
• Aggiornamenti della sicurezza.

Questa versione risolve anche la regressione seguente nella versione 2.7.3:

• La funzione SQLForeignKeys restituirà un risultato vuoto se il chiamante passa un valore NULL per il catalog del table primario o del tableesterno.

La versione 2.7.5 restituisce ora tutte le chiavi primarie o le chiavi esterne associate al table correlato se il catalog dell'altro table è setNULL.

Estensione Databricks per Visual Studio Code aggiornata alla versione 1.1.3

21 settembre 2023

L'estensione Databricks per Visual Studio Code versione 1.1.3 aggiunge alcune correzioni secondarie. Per altre informazioni, vedere il log delle modifiche per la versione 1.1.3.

Esecuzione di processi con un’entità servizio è disponibile a livello generale

21 settembre 2023

I ruoli nelle entità servizio e l'impostazione del processo per l'esecuzione dei processi usando l'identità dell'entità servizio sono ora disponibili a livello generale.

Vedere Ruoli per la gestione delle entità servizio e Configurare l'identità per le esecuzioni dei processi.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.205.2 (anteprima pubblica)

21 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.205.2. Questa versione contiene alcuni aggiornamenti secondari. Per altre informazioni, vedere il log delle modifiche per la versione 0.205.2.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.205.1 (anteprima pubblica)

20 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.205.1. Questa versione abilita le sostituzioni di destinazione per le attività di processo nei bundle di asset di Databricks e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 0.205.1.

Databricks SDK per Go aggiornato alla versione 0.20.0 (beta)

20 settembre 2023

Databricks SDK per Go versione 0.20.0 aggiunge più di una dozzina di API, aggiunge una mezza dozzina di campi, modifica alcuni campi e metodi e rimuove alcune API. Per altre informazioni, vedere il log delle modifiche per la versione 0.20.0.

Databricks SDK per Python aggiornato alla versione 0.9.0 (beta)

20 settembre 2023

Databricks SDK per Python versione 0.9.0 modifica alcuni metodi e campi, aggiunge circa 10 campi, aggiunge circa 20 classi di dati e introduce modifiche e rimozioni aggiuntive. Per altre informazioni, vedere il log delle modifiche per la versione 0.9.0.

Databricks SDK per Python aggiornato alla versione 0.7.1 (beta)

20 settembre 2023

Databricks SDK per Python versione 0.7.1 include una correzione secondaria per migliorare le prestazioni di download dei file. Per altre informazioni, vedere il log delle modifiche per la versione 0.7.1.

Provider Databricks Terraform aggiornato alla versione 1.26.0

20 settembre 2023

provider Databricks Terraform versione 1.26.0 aggiunge il supporto per gli script init di Unity Catalogvolumes, include diversi miglioramenti aggiuntivi e correzioni di bug e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 1.26.0.

Databricks Connect per Databricks Runtime 14.0

20 settembre 2023

Databricks Connect per Databricks Runtime 14.0 supporta il flusso strutturato completo (incluso foreachBatch) e le query a esecuzione prolungata che si ricollegano alla query dopo l'interruzione.

Dashboard di Lakeview in anteprima pubblica

20 settembre 2023

I dashboard di Lakeview consentono di condividere visualizzazioni e set di dati usando un modello di governance dei dati semplificato e unificato. Vedere Dashboard.

Databricks Connect V2 è anteprima pubblica per Scala

19 settembre 2023

Databricks Connect per Databricks Runtime 13.3 LTS supporta ora Scala in anteprima pubblica, inclusi dataframe, delta, flusso strutturato e altro ancora.

Per Python, l'annullamento delle query è ora supportato e la classe DatabricksSession può ora essere usata nei notebook e nei processi di Azure Databricks.

Modello GPU in anteprima pubblica

19 settembre 2023

Il modello usato in Azure Databricks supporta la distribuzione di modelli PyTorch e TensorFlow usando risorse di calcolo GPU. Questa funzionalità è disponibile in [anteprima pubblica] nelle aree select e si applica anche alla distribuzione dei modelli su GPU registrati con le versioni mlflow.pyfunc, mlflow.pytorch, mlflow.tensorflowe mlflow.transformers. Vedere Tipi di carico di lavoro GPU.

Calcolo delle funzionalità su richiesta ora disponibile in Unity Catalog (anteprima pubblica)

14 settembre 2023

Le funzionalità di apprendimento automatico possono ora essere calcolate su richiesta in fase di inferenza. La logica di calcolo delle funzionalità, i modelli e i dati sono tutti regolati da Unity Catalog. Ciò consente ai modelli di calcolare le funzionalità usando input disponibili solo in fase di inferenza, ad esempio la posizione corrente di un utente. Per altre informazioni, vedere Funzionalità di calcolo su richiesta tramite funzioni definite dall'utente Python.

Databricks Runtime 14.0 è disponibile a livello generale

14 settembre 2023

Databricks Runtime 14.0 e Databricks Runtime 14.0 ML sono ora disponibili a livello generale.

Vedere Databricks Runtime 14.0 (EoS) e Databricks Runtime 14.0 per Machine Learning (EoS).

Aggiornamento delle notifiche tramite posta elettronica dell’account

14 settembre 2023

Databricks non invia più notifiche tramite posta elettronica quando gli utenti vengono aggiunti a un account Azure Databricks. Gli utenti continueranno a ricevere notifiche tramite posta elettronica quando ricevono l'accesso a un'area di lavoro.

Provider Databricks Terraform aggiornato alla versione 1.25.1

13 settembre 2023

Il provider Databricks Terraform versione 1.25.1 è stato rilasciato con miglioramenti secondari e correzioni di bug. Per altre informazioni, vedere il log delle modifiche per la versione 1.25.1.

Databricks SDK per Go aggiornato alla versione 0.19.2 (beta)

13 settembre 2023

Databricks SDK per Go versione 0.19.2 contiene una correzione secondaria. Per altre informazioni, vedere il log delle modifiche per la versione 0.19.2.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.205.0 (anteprima pubblica)

13 settembre 2023

L’interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.205.0. Questa è la prima versione dell'interfaccia della riga di comando di Databricks per supportare i bundle di asset di Databricks in anteprima pubblica. Per altre informazioni, vedere il log delle modifiche per la versione 0.205.0.

Posizione riservata per /Workspace

13 settembre 2023

La posizione /Workspace è ora riservata. Non è più possibile definire una directory denominata /Workspace relativa al percorso completo in Azure Databricks.

Bundle di asset di Databricks (anteprima pubblica)

12 settembre 2023

I bundle di asset di Databricks, ora in anteprima pubblica, consentono di esprimere i progetti di dati, analisi e Machine Learning end-to-end come raccolta di file di origine. In questo modo è più semplice applicare procedure consigliate per la progettazione dei dati, ad esempio controllo del codice sorgente, revisione del codice, test e CI/CD.

Provider Databricks Terraform aggiornato alla versione 1.25.0

12 settembre 2023

Il provider Databricks Terraform versione 1.25.0 include l'aggiunta dell'autorizzazione IS_OWNER per warehouse di Databricks SQL, correzioni secondarie, aggiornamenti della documentazione e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 1.25.0.

Estensione Databricks per Visual Studio Code aggiornata alla versione 1.1.2

12 settembre 2023

L’estensione Databricks per Visual Studio Code versione 1.1.2 aggiunge il supporto sperimentale per %run e # MAGIC nei notebook di Azure Databricks, risolve i problemi di percorso con più installazioni dell'interfaccia della riga di comando di Databricks locali e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 1.1.2.

Partner Connect supporta Snowplow

12 settembre 2023

È ora possibile usare Partner Connect per connettere l'area di lavoro di Azure Databricks a Snowplow. Per ulteriori informazioni, vedi Connessione a Snowplow.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.204.1 (anteprima pubblica)

11 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.204.1. Per altre informazioni, vedere il log delle modifiche per la versione 0.204.1.

È possibile filtrare i dati sensibili con filtri di riga e maschere "column" (in anteprima pubblica)

11 settembre 2023

È ora possibile applicare filtri di riga e maschere column a tables per impedire l'accesso ai dati sensibili da parte di determinati utenti. Questi filtri e maschere vengono implementati come funzioni definite dall'utente (UDF) SQL. Visualizza i dati sensibili table utilizzando i filtri di riga e le maschere column.

Il sistema tables ora include il Marketplace schema (versione di anteprima pubblica)

8 settembre 2023

System tables include ora un marketplaceschema che archivia i dati del fornitore del Marketplace. È possibile eseguire una query sul marketplace.listing_access_eventstable per recuperare le informazioni sul cliente per le attività eseguite sulle inserzioni. Per ulteriori informazioni, vedere il riferimento del sistema marketplace tables.

Il sistema tariffario table è ora disponibile (anteprima pubblica)

8 settembre 2023

System tables ora includono un wheretable (system.billing.list_prices) per monitorare il costo di uno SKU nel tempo. Questi log consentono di eseguire l'analisi dei costi e monitorare le modifiche ai prezzi. Vedere tableinformazioni di riferimento sul sistema tariffario.

Databricks SDK per Go aggiornato alla versione 0.19.1 (beta)

7 settembre 2023

Databricks SDK per Go versione 0.19.1 continua alcuni aggiornamenti e correzioni secondari. Per altre informazioni, vedere il log delle modifiche per la versione 0.19.1.

Driver ODBC di Databricks 2.7.3

7 settembre 2023

È stata rilasciata la versione 2.7.3 del driver ODBC di Databricks (download). Questa versione include le seguenti funzionalità e correzioni di bug:

• Correzioni di vulnerabilità aggiornando le dipendenze di terze parti.
• SQL_ATTR_MAX_ROWS supporto che consente a un client di limit il numero di righe da prelevare in una query per accelerare il caricamento, ad esempio l'anteprima.
• Aggiornamento del supporto macOS. Il driver supporta ora Apple Silicon/M1.
• Supporto dell'autenticazione basata su browser OAuth2 per facilitare l'accesso Single Sign-On (SSO).

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.204.0 (anteprima pubblica)

6 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.204.0. Questa versione include il raggruppamento di comandi correlati alle autorizzazioni, aggiunte e modifiche a diversi comandi e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 0.204.0.

Data Explorer è ora Catalog Explorer

6 settembre 2023

Data Explorer viene rinominato Catalog Explorer per evidenziare che è possibile usarlo per lavorare con tutti gli oggetti sicurizzabili in Unity Catalog, non solo con gli oggetti dati. Vedere Che cos'è Catalog Explorer?.

Databricks SDK per Go aggiornato alla versione 0.19.0 (beta)

4 settembre 2023

Databricks SDK per Go versione 0.19.0 rinomina le API delle autorizzazioni, aggiunge 8 API, aggiunge 5 campi, modifica e rimuove alcuni campi e modifica alcuni metodi. Per altre informazioni, vedere il log delle modifiche per la versione 0.19.0.

Databricks SDK per Python aggiornato alla versione 0.8.0 (beta)

4 settembre 2023

Databricks SDK per Python versione 0.8.0 rinomina le API delle autorizzazioni, aggiunge una mezza dozzina di campi, aggiunge una mezza dozzina di classi di dati e introduce diverse modifiche e rimozioni. Per altre informazioni, vedere il log delle modifiche per la versione 0.8.0.

Delegare i privilegi della lista di accesso consentito in Unity Catalog

1 settembre 2023

È ora possibile delegare i privilegi per la gestione degli elementi nella lista di autorizzazione per Unity Catalog. Si veda Librerie Allowlist e script di init su calcolo condiviso.

L’integrazione delle app GitHub in Repos è disponibile a livello generale

1 settembre 2023

L’integrazione delle app GitHub in Repos è disponibile a livello generale. La funzionalità consente una gestione più semplice delle credenziali Git quando si esegue l'integrazione con GitHub in Repos.