Novità dell'archivio per Azure Data Factory
Azure Data Factory è stato migliorato in modo continuativo. Per rimanere aggiornati sugli sviluppi più recenti, fare riferimento alla pagina Novità corrente, che fornisce informazioni su:
- Versioni più recenti.
- Problemi noti.
- Correzioni di bug.
- Funzionalità deprecate.
- Modifiche pianificate.
Questa pagina di archiviazione mantiene gli aggiornamenti dei mesi precedenti.
Consulta il nostro Archivio novità video per tutti gli aggiornamenti mensili.
Settembre 2023
Pipeline
Aggiunta del supporto per le pipeline guidate dai metadati per l'elaborazione dinamica completa e incrementale in Azure SQL Altre informazioni
Agosto 2023
Change Data Capture
- Disponibilità di destinazione di Azure Synapse Analytics nella risorsa CDC di primo livello Altre informazioni
- Connettore Snowflake nel supporto dei flussi di dati per mapping per Change Data Capture in anteprima pubblica Altre informazioni
Flusso di dati
- Tipo integer disponibile per le variabili della pipeline Altre informazioni
- Connettore di origine Snowflake CDC disponibile nella risorsa CDC di primo livello Altre informazioni
- Supporto dell'interfaccia utente nativo della parametrizzazione per altri servizi collegati Altre informazioni
Spostamento dati
- Supporto di endpoint privati gestiti per il gateway applicazione e il server flessibile MySQL Altre informazioni
- Disponibilità generale della rete virtuale gestita (TTL) Altre informazioni
Runtime di integrazione
Il runtime di integrazione self-hosted supporta ora la creazione interattiva autonoma (anteprima) Altre informazioni
Luglio 2023
Change Data Capture
La risorsa CDC di primo livello supporta ora l'evoluzione dello schema. Ulteriori informazioni
Flusso di dati
L'opzione Merge Schema nel sink differenziale supporta ora l'evoluzione dello schema nei flussi di dati di mapping. Ulteriori informazioni
Spostamento dati
- Impostare come commento parte della pipeline con disattivazione. Ulteriori informazioni
- Il valore restituito della pipeline è ora disponibile a livello generale. Ulteriori informazioni
Produttività degli sviluppatori
La ricerca della documentazione è ora inclusa nella barra degli strumenti di ricerca di Azure Data Factory. Ulteriori informazioni
Giugno 2023
Integrazione continua e distribuzione continua
Il pacchetto npm supporta ora il bundle pre-scaricato per la compilazione di modelli ARM. Se l'impostazione del firewall blocca il download diretto per il pacchetto npm, è ora possibile pre-caricare il pacchetto in anticipo e consentire al pacchetto npm di utilizzare la versione locale. Si tratta di un super boost per la pipeline CI/CD in un ambiente con firewall.
Espansione dell'area
Azure Data Factory è ora disponibile in Svezia centrale. È possibile condividere il flusso di lavoro ETL in questa nuova area se si usa l'area per l'archiviazione e la gestione del data warehouse moderno. Ulteriori informazioni
Spostamento dati
La protezione del traffico in uscita con le regole di rete in uscita di Azure Data Factory è ora supportata. Ulteriori informazioni
Connettori
Il connettore Amazon S3 è ora supportato come destinazione sink usando flussi di dati di mapping. Ulteriori informazioni
Flusso di dati
Vengono introdotte le impostazioni di origine facoltative per le origini DelimitedText e JSON nella risorsa CDC di primo livello. La risorsa CDC di primo livello in Data Factory supporta ora configurazioni di origine facoltative per origini delimitate e JSON. È ora possibile selezionare i delimitatori di colonna/riga per le origini delimitate e impostare il tipo di documento per le origini JSON. Ulteriori informazioni
Maggio 2023
Data Factory in Microsoft Fabric
Data factory in Microsoft Fabric offre servizi di spostamento e trasformazione dei dati su scala cloud che consentono di risolvere gli scenari di data factory e ETL più complessi. È progettato per rendere l'esperienza di data factory facile da usare, potente e di livello aziendale.
Aprile 2023
Flusso di dati
Annullare facilmente la registrazione di più matrici nei flussi di dati di Azure Data Factory. ADF ha aggiornato la trasformazione Flatten che ora semplifica la registrazione di più matrici da un singolo passaggio di trasformazione Flatten. Ulteriori informazioni
Integrazione continua e distribuzione continua
È ora possibile personalizzare il messaggio di commit in modalità Git. Digitare una descrizione dettagliata delle modifiche apportate e salvarla nel repository Git.
Connettori
Il connettore archiviazione BLOB di Azure supporta ora l'autenticazione anonima. Ulteriori informazioni
Marzo 2023
Connettori
Il connettore Azure Data Lake Storage Gen2 supporta ora l'autenticazione della firma di accesso condiviso. Ulteriori informazioni
2023 febbraio
Spostamento dati
- Tipo di autenticazione anonima supportato per Archiviazione BLOB di Azure Altre informazioni
- Modello SAP aggiornato per spostare facilmente i dati SAP in ADLSGen2 in formato Delta Altre informazioni
Orchestrazione
- Impostare il valore di output della pipeline (anteprima pubblica) Altre informazioni
- Gestione orchestrazione flussi di lavoro (anteprima pubblica) Altre informazioni
Produttività degli sviluppatori
Supporto del tema scuro aggiunto (anteprima pubblica) Altre informazioni
Gennaio 2023
Flusso di dati
- I flowlet supportano ora la deriva dello schema Altre informazioni
- L'estrazione incrementale di SQL CDC supporta ora le colonne numeriche Altre informazioni
Spostamento dati
Nuova risorsa CDC di primo livello - Configurazione CDC nativa in 3 semplici passaggi Altre informazioni
Orchestrazione
Orchestrare i notebook Synapse e le definizioni dei processi Spark di Synapse in modo nativo Altre informazioni
Espansione dell'area
- Espansione continua dell'area - Cina settentrionale 3 ora supportata Altre informazioni
- Espansione continua dell'area - Svizzera occidentale ora supportata Altre informazioni
SQL Server Integration Services (SSIS)
Inserimento rapido della rete virtuale per SSIS ora disponibile a livello generale Altre informazioni
Produttività degli sviluppatori
- Aggiunta del supporto per le risorse preferite nella home page
- Salvare la larghezza della colonna per il monitoraggio della pipeline
- Monitorare gli aggiornamenti dei filtri per ricerche più veloci
- Avviare direttamente la raccolta modelli di pipeline tramite il portale di Azure
Dicembre 2022
Flusso di dati
Estrazione incrementale di SQL Change Data Capture (CDC): supporta colonne numeriche nel flusso di dati di mapping Altre informazioni
Spostamento dati
L'inserimento rapido della rete virtuale per SSIS in Azure Data Factory è disponibile a livello generale Altre informazioni
Espansione dell'area
Espansione continua dell'area: Azure Data Factory è ora disponibile in Cina settentrionale 3 Altre informazioni
novembre 2022
Flusso di dati
- Solo incrementale è disponibile in SAP CDC: ottenere modifiche solo dal sistema SAP senza caricamento completo iniziale Altre informazioni
- Partizioni di origine nel caricamento completo iniziale dei dati di SAP CDC per migliorare le prestazioni Altre informazioni
- Un nuovo modello di pipeline: caricare più oggetti con grandi quantità da SAP tramite SAP CDC Altre informazioni
Spostamento di dati
- Supporto per Azure Databricks tramite collegamento privato da una rete virtuale gestita di Data Factory Altre informazioni
Interfaccia utente
2 Miglioramenti apportati alla finestra di progettazione della pipeline aggiunti all'esperienza di anteprima di ADF Studio
- Riquadro a comparsa contenuto dinamico: semplifica l'impostazione del contenuto dinamico nelle attività della pipeline senza usare il generatore di espressioni Altre informazioni
- Rilocazione del messaggio di errore nella colonna di stato: semplifica la visualizzazione degli errori quando viene visualizzata un'esecuzione della pipeline non riuscita Altre informazioni
Integrazione continua e distribuzione continua
Nella configurazione di pubblicazione automatica è disponibile il pulsante Disabilita pubblicazione per annullare la sovrascrittura dell'ultima distribuzione di pubblicazione automatizzata Altre informazioni
Ottobre 2022
Riepilogo video
Flusso di dati
- Esportare fino a 1000 righe dall'anteprima del flusso di dati Altre informazioni
- SQL CDC nei flussi di dati di mapping ora disponibili (anteprima pubblica) Altre informazioni
- Sbloccare l'analisi avanzata con Il connettore flusso di dati per mapping di Microsoft 365 Altre informazioni
- SAP Change Data Capture (CDC) in ora disponibile a livello generale Altre informazioni
Produttività degli sviluppatori
- Accettare ora i contributi della community a Raccolta modelli Altre informazioni
- Nuova progettazione nel portale di Azure: informazioni su come avviare ADF Studio Altre informazioni
- Learning Center ora disponibile in Azure Data Factory Studio Altre informazioni
- Fare clic per provare Azure Data Factory Altre informazioni
Orchestrazione
- Visualizzazione della fatturazione granulare disponibile per Azure Data Factory: vedere informazioni dettagliate sulla fatturazione per pipeline (anteprima pubblica) Altre informazioni
- Timeout di esecuzione dell'attività script ora configurabile Altre informazioni
Espansione dell'area
Espansione continua dell'area - Qatar Centrale ora supportato Altre informazioni
Integrazione continua e distribuzione continua
Escludere i trigger della pipeline che non sono stati modificati nella distribuzione ora disponibile a livello generale Altre informazioni
Settembre 2022
Riepilogo video
Flusso di dati
- Il connettore di origine Amazon S3 ha aggiunto Altre informazioni
- Connettore basato su REST di Fogli Google aggiunto come Origine (anteprima) Altre informazioni
- Ottimizzazione massima delle colonne nel flusso di dati Altre informazioni
- Funzionalità di SAP Change Data Capture in Mapping Data Flow (anteprima) - Estrarre e trasformare le modifiche dei dati dai sistemi SAP per un aggiornamento dei dati più efficiente Altre informazioni
- Scrittura di dati in un campo di ricerca tramite chiavi alternative supportate nei connettori Dynamics 365/CRM per il mapping dei flussi di dati Altre informazioni
Spostamento dati
Supporto per convertire il tipo Oracle NUMBER in integer corrispondente nell'origine Altre informazioni
Monitoraggio
- Altri miglioramenti del monitoraggio in Azure Data Factory Altre informazioni
- Monitoraggio dei miglioramenti del caricamento: i dati di raggruppamento della pipeline vengono rieseguiti solo quando vengono espansi
- Paginazione aggiunta alla visualizzazione delle esecuzioni di attività della pipeline per visualizzare tutti i record di attività nell'esecuzione della pipeline
- Monitoraggio del miglioramento del consumo: icona di caricamento aggiunta per sapere quando il report sull'utilizzo viene calcolato completamente
- Colonne di ordinamento aggiuntive nel monitoraggio: ordinamento aggiunto per Nome pipeline, Fine esecuzione e Stato
- Impostazioni del fuso orario ora salvate nel monitoraggio
- Visualizzazione diagramma di Gantt ora supportata nel monitoraggio del runtime di integrazione Altre informazioni
Orchestrazione
Il metodo DELETE nell'attività Web supporta ora l'invio di un corpo con richiesta HTTP Altre informazioni
Interfaccia utente
- Supporto dell'interfaccia utente nativa della parametrizzazione aggiunta per 6 servizi collegati aggiuntivi: SAP ODP, ODBC, Microsoft Access, Informix, Snowflake e DB2 Altre informazioni
- Miglioramenti della finestra di progettazione della pipeline aggiunti nell'esperienza di anteprima di Studio: gli utenti possono visualizzare il flusso di lavoro all'interno di oggetti pipeline come For Each, If Then e così via. Altre informazioni
Agosto 2022
Riepilogo video
Flusso di dati
- Connettore Appfigures aggiunto come Origine (anteprima) Altre informazioni
- Trasformazione Cast aggiunta: convertire visivamente i tipi di dati Altre informazioni
- Nuova interfaccia utente per i set di dati inline: categorie aggiunte per trovare facilmente origini dati Altre informazioni
Spostamento dati
Tipo di autenticazione dell'entità servizio aggiunto per l'archiviazione BLOB di Azure Altre informazioni
Produttività degli sviluppatori
- Timeout attività predefinito modificato da 7 giorni a 12 ore Altre informazioni
- Nuova esperienza di creazione della data factory: un clic per preparare la factory entro pochi secondi Altre informazioni
- Aggiornamento dell'interfaccia utente di Generatore di espressioni: schede categoriche aggiunte per un uso più semplice Altre informazioni
Integrazione continua e recapito continuo (CI/CD)
Quando si integra il modello di Resource Manager, anziché disattivare tutti i trigger, può escludere i trigger che non sono stati modificati nella distribuzione Altre informazioni
Luglio 2022
Riepilogo video
Flusso di dati
- Connettore Asana aggiunto come origine Altre informazioni
- Tre nuove funzioni di trasformazione dei dati ora supportate Altre informazioni
- collectUnique(): creare una nuova raccolta di valori univoci in una matrice.
- substringIndex(): estrarre la sottostringa prima di n occorrenze di un delimitatore.
- topN(): restituisce i primi n risultati dopo l'ordinamento dei dati.
- Refetch dall'origine disponibile in Aggiornare gli scenari di modifica dell'origine dati Altre informazioni
- Funzioni definite dall'utente (GA) - Creare espressioni riutilizzabili e personalizzate per evitare di creare logica complessa in Altre informazioni Video
- Configurazione più semplice nel runtime del flusso di dati: scegliere le dimensioni di calcolo tra Small, Medium e Large per preconfigurare tutte le impostazioni del runtime di integrazione Altre informazioni
Integrazione continua e recapito continuo (CI/CD)
Includere i parametri globali supportati nel modello di Resource Manager. Ulteriori informazioni
Produttività degli sviluppatori
Fare parte delle funzionalità di anteprima di Azure Data Factory Studio - Sperimentare le funzionalità più recenti di Azure Data Factory ed essere la prima a condividere il feedback Altre informazioni
Giugno 2022
Riepilogo video
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Flusso di dati | Supporto del join fuzzy per i flussi di dati | Il join fuzzy è ora supportato nella trasformazione Join dei flussi di dati con un punteggio di somiglianza configurabile in condizioni di join. Ulteriori informazioni |
| Funzionalità di modifica nella proiezione di origine | Le funzionalità di modifica nella proiezione di origine sono disponibili in Flusso di dati per apportare facilmente modifiche agli schemi Ulteriori informazioni | |
| Gestione degli errori di asserzione | La gestione degli errori di asserzione è ora supportata nei flussi di dati per la qualità dei dati e la convalida dei dati Ulteriori informazioni | |
| Spostamento dei dati | Parametrizzazione supportata in modo nativo in altri 4 connettori | È stato aggiunto il supporto nativo dell'interfaccia utente per i servizi collegati seguenti: Azure Data Lake Gen1, Azure PostgreSQL, Google AdWords e PostgreSQL. Ulteriori informazioni |
| Funzionalità di SAP Change Data Capture (CDC) nel nuovo connettore SAP ODP (anteprima pubblica) | Le funzionalità di SAP Change Data Capture (CDC) sono ora supportate nel nuovo connettore SAP ODP. Ulteriori informazioni | |
| Runtime di integrazione | Rete virtuale gestita time-to-live (anteprima pubblica) | È possibile impostare time-to-live sui calcoli di cui è stato effettuato il provisioning nella rete virtuale gestita. Ulteriori informazioni |
| Monitoraggio | Eseguire di nuovo una pipeline con nuovi parametri | È ora possibile rieseguire le pipeline con nuovi valori di parametro in Azure Data Factory. Ulteriori informazioni |
| Orchestrazione | La proprietà 'turnOffAsync' è disponibile nell'attività Web | L'attività Web supporta un modello asincrono richiesta-risposta che richiama HTTP GET nel campo Percorso nell'intestazione della risposta di una Risposta HTTP 202. Consente all'attività Web di eseguire automaticamente il polling dell'endpoint di monitoraggio fino all'esecuzione del processo. La proprietà 'turnOffAsync' è supportata per disabilitare questo comportamento nei casi in cui il polling non è necessario Ulteriori informazioni |
Maggio 2022
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Flusso di dati | Funzioni definite dall'utente per i flussi di dati di mapping | Azure Data Factory introduce in anteprima pubblica funzioni definite dall'utente e librerie del flusso di dati. Una funzione definita dall'utente è un'espressione personalizzata che è possibile definire per poter riutilizzare la logica in più flussi di dati di mapping. Le funzioni definite dall'utente si trovano in una raccolta denominata libreria del flusso di dati per poter raggruppare facilmente set comuni di funzioni personalizzate. Ulteriori informazioni |
Aprile 2022
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Flusso di dati | Miglioramenti dell'anteprima dei dati e del debug nei flussi di dati di mapping | Le sessioni di debug con il runtime di integrazione di Azure AutoResolve verranno ora avviate in meno di 10 secondi. Sono disponibili nuovi aggiornamenti per il pannello di anteprima dei dati nei flussi di dati di mapping. È ora possibile ordinare le righe all'interno della vista anteprima dati selezionando intestazioni di colonna. È possibile spostare le colonne in modo interattivo. È anche possibile salvare i risultati dell'anteprima dei dati come CSV usando Esporta CSV. Ulteriori informazioni |
| Il connettore Dataverse è disponibile per i flussi di dati di mapping | Il connettore Dataverse è disponibile come origine e sink per i flussi di dati di mapping. Ulteriori informazioni | |
| Supporto per gli schemi del database utente per la gestione temporanea con i connettori Azure Synapse Analytics e PostgreSQL nel sink del flusso di dati | Il sink del flusso di dati supporta ora l'uso di uno schema di database utente per la gestione temporanea nei connettori di Azure Synapse Analytics e PostgreSQL. Ulteriori informazioni | |
| Monitoraggio | Più aggiornamenti alle esperienze di monitoraggio di Data Factory | I nuovi aggiornamenti dell'esperienza di monitoraggio in Data Factory includono la possibilità di esportare i risultati in un file CSV, cancellare tutti i filtri e aprire un'esecuzione in una nuova scheda. Anche la memorizzazione nella cache delle colonne e dei risultati è stata migliorata. Ulteriori informazioni |
| Interfaccia utente | Nuovo supporto per il formato a livello di area | La scelta della lingua e del formato a livello di area nelle impostazioni influirà sul formato dei dati, ad esempio date e ore, nel monitoraggio di Azure Data Factory Studio. Ad esempio, il formato ora in Monitoraggio verrà visualizzato come "Apr 2, 2022, 3:40:29 pm" quando si sceglie inglese come formato regionale e "2 Apr 2022, 15:40:29" quando si sceglie francese come formato regionale. Queste impostazioni influiscono solo sull'interfaccia utente di Azure Data Factory Studio e non cambiano/modificano i dati effettivi e il fuso orario. |
Marzo 2022
Riepilogo video
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Flusso di dati | Il supporto per ScriptLines e il servizio collegato con parametri è stato aggiunto ai flussi di dati di mapping | È ora facile rilevare le modifiche apportate allo script del flusso di dati in Git con ScriptLines nella definizione JSON del flusso di dati. I servizi collegati con parametri possono ora essere usati anche all'interno dei flussi di dati per modelli di connessione generici flessibili. Ulteriori informazioni |
| Disponibilità generale di Whisper | Flowlets è ora disponibile a livello generale per creare parti riutilizzabili della logica del flusso di dati che è possibile condividere in altre pipeline come trasformazioni inline. I flowlet consentono di creare processi ETL (estrazione, trasformazione e caricamento) composti da componenti logici personalizzati o comuni. Ulteriori informazioni | |
| I connettori del feed di modifiche sono disponibili in cinque trasformazioni dell'origine del flusso di dati | I connettori dei feed di modifiche sono disponibili nelle trasformazioni dell'origine del flusso di dati per Azure Cosmos DB, Archiviazione BLOB di Azure, Azure Data Lake Storage Gen1, Azure Data Lake Storage Gen2 e common data model (CDM). Ulteriori informazioni | |
| Miglioramenti dell'anteprima dei dati e del debug nei flussi di dati di mapping | Sono state aggiunte nuove funzionalità all'anteprima dei dati e all'esperienza di debug nei flussi di dati di mapping. Ulteriori informazioni | |
| Connettore SFTP per il flusso di dati di mapping | Il connettore SFTP è disponibile per il flusso di dati di mapping sia come origine che come sink. Ulteriori informazioni | |
| Spostamento dei dati | Supporto di Always Encrypted per i connettori correlati a SQL nell'attività Ricerca in Rete virtuale gestita | Always Encrypted è supportato per SQL Server, database SQL di Azure, Istanza gestita di SQL di Azure e Synapse Analytics nell'attività di ricerca nella rete virtuale gestita. Ulteriori informazioni |
| Runtime di integrazione | Nuovo layout dell'interfaccia utente nella pagina di creazione e modifica del runtime di integrazione di Azure | Il layout dell'interfaccia utente della pagina di creazione e modifica del runtime di integrazione usa ora lo stile della scheda impostazioni, rete virtuale e runtime del flusso di dati. Ulteriori informazioni |
| Orchestrazione | Trasformare i dati usando l'attività Script | È possibile usare un'attività script per richiamare uno script SQL in database SQL, Azure Synapse Analytics, SQL Server, Oracle o Snowflake. Ulteriori informazioni |
| Miglioramento del timeout dell'attività Web | È possibile configurare il timeout di risposta in un'attività Web per impedirne il timeout se il periodo di risposta è superiore a un minuto, soprattutto nel caso di API sincrone. Ulteriori informazioni |
Febbraio 2022
Riepilogo video
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Flusso di dati | Servizi collegati con parametri supportati nei flussi di dati di mapping | È ora possibile usare i servizi collegati con parametri nei flussi di dati di mapping per rendere generiche e flessibili le pipeline del flusso di dati. Ulteriori informazioni |
| Estrazione incrementale dell'origine del database SQL disponibile nel flusso di dati (anteprima pubblica) | È stata aggiunta una nuova opzione nelle origini del database SQL del flusso di dati per mapping denominata Abilita estrazione incrementale (anteprima). È ora possibile eseguire automaticamente il pull solo delle righe modificate nelle origini del database SQL usando i flussi di dati. Ulteriori informazioni | |
| Quattro nuovi connettori disponibili per i flussi di dati di mapping (anteprima pubblica) | Data Factory ora supporta quattro nuovi connettori (anteprima pubblica) per il flusso di dati per mapping: Quickbase Connector, Smartsheet Connector, TeamDesk Connector e Zendesk Connector. Ulteriori informazioni | |
| Azure Cosmos DB (API SQL) per il flusso di dati di mapping supporta ora la modalità inline | Azure Cosmos DB (API SQL) per il flusso di dati di mapping può ora usare set di dati inline. Ulteriori informazioni | |
| Spostamento dei dati | Ottenere pipeline di inserimento dati basate sui metadati nello strumento di Copia dati di Data Factory entro 10 minuti (disponibilità generale) | È possibile creare pipeline di copia dei dati su larga scala con un approccio basato sui metadati per lo strumento di copia dati entro 10 minuti. Ulteriori informazioni |
| Disponibile l'aggiornamento dell'API connettore di Google AdWords Connector per Data Factory | Il connettore Google AdWords di Data Factory supporta ora la nuova versione dell'API AdWords. Non è necessaria alcuna azione per il nuovo utente del connettore perché è abilitata per impostazione predefinita. Ulteriori informazioni | |
| Integrazione continua e recapito continuo (CI/CD) | Supporto tra tenant Azure DevOps | Configurare un repository usando Azure DevOps Git non nello stesso tenant di Azure Data Factory。 Ulteriori informazioni |
| Espansione dell'area | Data Factory è ora disponibile negli Stati Uniti occidentali 3 e Jio India occidentale | Data Factory è ora disponibile in due nuove aree: Stati Uniti occidentali 3 e Jio India occidentale. È possibile collocare il flusso di lavoro ETL in queste nuove aree se si usano queste aree per archiviare e gestire il data warehouse moderno. È anche possibile usare queste aree a scopo di continuità aziendale e ripristino di emergenza se è necessario eseguire il failover da un'altra area all'interno dell'area geografica. Ulteriori informazioni |
| Sicurezza | Connettersi a un account Azure DevOps in un altro tenant Entra ID | È possibile connettere l'istanza di Data Factory a un account Azure DevOps in un tenant di Azure AD diverso a scopo di controllo del codice sorgente. Ulteriori informazioni |
2022 gennaio
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Flusso di dati | Il riutilizzo rapido è ora automatico in tutti gli IR di Azure che usano durata (TTL) | Non è più necessario specificare manualmente il "riutilizzo rapido". I flussi di dati di mapping di Data Factory possono ora avviare le attività successive del flusso di dati in meno di cinque secondi dopo aver impostato una durata (TTL). Ulteriori informazioni |
| Recuperare la descrizione di Assert personalizzata | Nella trasformazione Assert è possibile definire il proprio messaggio di descrizione dinamica. È possibile usare la nuova funzione assertErrorMessage() per recuperare il messaggio riga per riga e archiviarlo nei dati di destinazione. Ulteriori informazioni | |
| Rilevamento automatico dello schema nella trasformazione Analisi | Una nuova funzionalità aggiunta alla trasformazione Analisi consente di rilevare automaticamente lo schema di un campo complesso incorporato all'interno di una colonna stringa. Selezionare il pulsante Rileva schema per impostare automaticamente lo schema di destinazione. Ulteriori informazioni | |
| Supportare il connettore Dynamics 365 sia come sink che come origine | È ora possibile connettersi direttamente a Dynamics 365 per trasformare i dati di Dynamics su larga scala usando il nuovo connettore del flusso di dati per mapping per Dynamics 365. Ulteriori informazioni | |
| Connessioni SQL Always Encrypted ora disponibili nei flussi di dati | Always Encrypted può ora eseguire trasformazioni di origine in SQL Server, database SQL, Istanza gestita di SQL e Azure Synapse quando si usano flussi di dati. Ulteriori informazioni | |
| Spostamento dei dati | Il connettore Azure Databricks Delta Lake di Data Factory supporta nuovi tipi di autenticazione | Data Factory connettore Databricks Delta Lake supporta ora altri due tipi di autenticazione: l'autenticazione con identità gestita assegnata dal sistema e l'autenticazione dell'identità gestita assegnata dall'utente. Ulteriori informazioni |
| L'attività di copia di Data Factory supporta upsert in più connettori | L'attività di copia di Data Factory supporta ora upsert mentre esegue il sink dei dati in SQL Server, database SQL, Istanza gestita di SQL e Azure Synapse. Ulteriori informazioni |
Dicembre 2021
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Flusso di dati | Connettore Dynamics come origine nativa e sink per i flussi di dati di mapping | Il connettore Dynamics è ora supportato come origine e sink per i flussi di dati di mapping. Ulteriori informazioni |
| L'acquisizione nativa dei dati delle modifiche (CDC) è ora supportata in modo nativo | CDC è ora supportato in modo nativo in Data Factory per Azure Cosmos DB, Archiviazione BLOB, Data Lake Storage Gen1, Data Lake Storage Gen2 e CDM. Ulteriori informazioni | |
| Anteprima pubblica dei flowlet | L'anteprima pubblica dei flussi consente agli sviluppatori del flusso di dati di creare componenti riutilizzabili per creare facilmente la logica di trasformazione dei dati componibile. Ulteriori informazioni | |
| Anteprima pubblica dei dati mappa | L'anteprima dei dati mappa consente agli utenti aziendali di definire il mapping delle colonne e le trasformazioni per caricare i database Azure Synapse lake. Ulteriori informazioni | |
| Più destinazioni di output da Power Query | È ora possibile eseguire il mapping di più destinazioni di output da Power Query in Data Factory per modelli ETL flessibili per gli integratori di dati cittadini. Ulteriori informazioni | |
| Supporto per la trasformazione della Chiamata esterna | Estendere la funzionalità dei flussi di dati di mapping usando la trasformazione Chiamata esterna. È ora possibile aggiungere codice personalizzato come endpoint REST o chiamare una riga di servizio di terze parti curata per riga. Ulteriori informazioni | |
| Abilitare il riutilizzo rapido dei flussi di dati di mapping di Azure Synapse con il supporto TTL | I flussi di dati di mapping di Azure Synapse ora supportano il riutilizzo rapido impostando una durata (TTL) nel runtime di integrazione di Azure. L'uso di un'impostazione consente l'esecuzione delle attività successive del flusso di dati in meno di cinque secondi. Ulteriori informazioni | |
| Trasformazione asserzione | Aggiungere facilmente la qualità dei dati, la convalida del dominio dati e i controlli dei metadati alle pipeline di Data Factory usando la trasformazione Assert nei flussi di dati di mapping. Ulteriori informazioni | |
| Supporto IntelliSense nel generatore di espressioni per esperienze di creazione pipeline più produttive | Il supporto di IntelliSense nel generatore di espressioni e nella creazione di contenuti dinamici rende più produttivi gli sviluppatori di pipeline di Data Factory e Azure Synapse mentre scrivono espressioni complesse nelle pipeline di dati. Ulteriori informazioni |
Novembre 2021
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Integrazione continua e recapito continuo (CI/CD) | Miglioramenti all'integrazione di GitHub | I miglioramenti apportati all'integrazione di Data Factory e GitHub rimuovono i limiti per 1.000 risorse di Data Factory per tipo di risorsa, ad esempio set di dati e pipeline. Per le data factory di grandi dimensioni, questa modifica consente di ridurre l'impatto del limite di velocità dell'API GitHub. Ulteriori informazioni |
| Flusso di dati | Impostare il codice di errore personalizzato e il messaggio di errore con attività di errore | L'attività di errore consente agli sviluppatori ETL di impostare il messaggio di errore e il codice di errore personalizzato per una pipeline di Data Factory. Ulteriori informazioni |
| Trasformazione di chiamata esterna | La trasformazione Chiamata esterna dei flussi di dati di mapping consente agli sviluppatori ETL di usare trasformazioni e arricchimenti dei dati forniti dagli endpoint REST o dai servizi API di terze parti. Ulteriori informazioni | |
| Riutilizzo rapido di Synapse | Quando si esegue il flusso di dati in Synapse Analytics, usare la funzionalità TTL. La funzionalità TTL usa la funzionalità di riutilizzo rapido in modo che i flussi di dati sequenziali vengano eseguiti entro pochi secondi. È possibile impostare la durata (TTL) quando si configura un runtime di integrazione di Azure. Ulteriori informazioni | |
| Spostamento dei dati | L'attività di copia supporta la lettura dei dati da FTP o SFTP senza suddivisione in blocchi | Determinare automaticamente la lunghezza del file o l'offset pertinente da leggere quando si copiano dati da un server FTP o SFTP. Con questa funzionalità, Data Factory si connette automaticamente al server FTP o SFTP per determinare la lunghezza del file. Dopo aver determinato la lunghezza, Data Factory divide il file in più blocchi e li legge in parallelo. Ulteriori informazioni |
| UTF-8 senza supporto DBA nell'attività di copia | L'attività di copia supporta la scrittura di dati con codifica del tipo UTF-8 senza DBA per set di dati JSON e di testo delimitati. | |
| Supporto del delimitatore di colonna a più caratteri | L'attività di copia supporta l'uso di delimitatori di colonna a più caratteri per set di dati di testo delimitati. | |
| Runtime di integrazione | Eseguire qualsiasi processo in tre passaggi con SQL Server Integration Services (SSIS) in Data Factory | Informazioni su come usare le migliori funzionalità di Data Factory e SSIS in una pipeline. Un pacchetto SSIS di esempio con proprietà con parametri consente di iniziare. Con Data Factory Studio, il pacchetto SSIS può essere facilmente trascinato e rilasciato in una pipeline e usato come parte di un'attività Esegui pacchetto SSIS. Questa funzionalità consente di eseguire la pipeline di Data Factory con un pacchetto SSIS in IR self-hosted o IRS SSIS. Fornendo i valori dei parametri di runtime, è possibile usare le potenti funzionalità di Data Factory e SSIS insieme. Questo articolo illustra tre passaggi per eseguire qualsiasi processo, che può essere qualsiasi eseguibile, ad esempio un'applicazione, un programma, un'utilità o un file batch, ovunque. Ulteriori informazioni |
Ottobre 2021
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Flusso di dati | Connettori di Azure Data Explorer e Amazon Web Services (AWS) S3 | Il team di integrazione dei dati Microsoft ha rilasciato due nuovi connettori per il mapping dei flussi di dati. Se si usa Azure Synapse, è ora possibile connettersi direttamente ai bucket AWS S3 per le trasformazioni dei dati. Sia in Data Factory che in Azure Synapse è ora possibile connettersi in modo nativo ai cluster di Esplora dati di Azure nei flussi di dati di mapping. Ulteriori informazioni |
| L'attività di Power Query lascia l'anteprima per la disponibilità generale | L'attività della pipeline di Power Query di Data Factory è ora disponibile a livello generale. Questa nuova funzionalità offre preparazione dei dati con scalabilità orizzontale e data wrangling per gli integratori di cittadini all'interno dell'interfaccia utente del browser Data Factory per un'esperienza integrata per i data engineer. La funzionalità di data wrangling di Power Query in Data Factory offre una potente funzionalità di pipeline facile da usare per risolvere i modelli ETL e l'integrazione dei dati più complessi in un singolo servizio. Ulteriori informazioni | |
| Nuova trasformazione dei dati Stringify nei flussi di dati per mapping | I flussi di dati di mapping aggiungono una nuova trasformazione dei dati denominata Stringify per semplificare la conversione di tipi di dati complessi come struct e matrici in formato stringa. Questi tipi di dati possono quindi essere inviati a destinazioni di output strutturate. Ulteriori informazioni | |
| Runtime di integrazione | Aggiunta rete virtuale rapida per SSIS IR (anteprima pubblica) | Il runtime di integrazione SSIS supporta ora l'inserimento rapido della rete virtuale. Altre informazioni: Panoramica dell'inserimento della rete virtuale per SSIS IR Inserimento di reti virtuali standard e rapide per SSIS IR Inserimento rapido di rete virtuale per SSIS IR |
| Sicurezza | Miglioramento integrazione di Azure Key Vault | L'integrazione di Key Vault include ora elenchi a discesa in modo che gli utenti possano selezionare i valori dei segreti nel servizio collegato. Questa funzionalità aumenta la produttività perché gli utenti non devono digitare i segreti, che potrebbero causare errori umani. |
| Supporto per l'identità gestita assegnata dall'utente in Data Factory | La sicurezza delle credenziali è fondamentale per qualsiasi azienda. Il team di Data Factory si impegna a rendere il processo di progettazione dei dati sicuro ma semplice per gli ingegneri dei dati. L'identità gestita assegnata dall'utente (anteprima) è ora supportata in tutti i connettori e i servizi collegati che supportano l'autenticazione basata su Azure AD. Ulteriori informazioni |
Settembre 2021
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Integrazione continua e distribuzione continua | Funzionalità CI/CD espanse | È ora possibile creare un nuovo ramo Git basato su qualsiasi altro ramo in Data Factory. Ulteriori informazioni |
| Spostamento dei dati | Amazon Relational Database Service (RDS) per le origini Oracle | Il connettore Amazon RDS per le origini Oracle è ora disponibile sia in Data Factory che in Azure Synapse. Ulteriori informazioni |
| Amazon RDS per le origini di SQL Server | Amazon RDS per il connettore di origini di SQL Server è ora disponibile sia in Data Factory che in Azure Synapse. Ulteriori informazioni | |
| Supportare la copia parallela da Database di Azure per PostgreSQL | Il connettore database di Azure per PostgreSQL supporta ora le operazioni di copia parallele. Ulteriori informazioni | |
| Flusso di dati | Usare Data Lake Storage Gen2 per eseguire comandi di pre-elaborazione e post-elaborazione | I comandi di pre-elaborazione e post-elaborazione di Hadoop Distributed File System possono ora essere eseguiti usando sink Data Lake Storage Gen2 nei flussi di dati. Ulteriori informazioni |
| Modificare le proprietà del flusso di dati per le istanze esistenti del runtime di integrazione di Azure | Il runtime di integrazione di Azure è stato aggiornato per consentire la modifica delle proprietà del flusso di dati per gli IR esistenti. È ora possibile modificare le proprietà di calcolo del flusso di dati senza dover creare un nuovo runtime di integrazione di Azure. Ulteriori informazioni | |
| Impostazione TTL per Azure Synapse per migliorare il tempo di avvio dell'esecuzione delle attività della pipeline | Azure Synapse ha aggiunto TTL al runtime di integrazione di Azure per consentire alle attività della pipeline del flusso di dati di iniziare l'esecuzione in pochi secondi, riducendo notevolmente al minimo il runtime delle pipeline del flusso di dati. Ulteriori informazioni | |
| Runtime di integrazione | Disponibilità generale della rete virtuale gestita di Data Factory | È ora possibile effettuare il provisioning del runtime di integrazione di Azure come parte di una rete virtuale gestita e usare endpoint privati per connettersi in modo sicuro agli archivi dati supportati. Il traffico dei dati passa attraverso collegamenti privati di Azure, che fornisce connettività protetta all'origine dati. Impedisce inoltre l'esfiltrazione di dati nella rete Internet pubblica. Ulteriori informazioni |
| Orchestrazione | Rendere operativo e fornire il contratto di servizio per le pipeline di dati | La nuova metrica di esecuzione della pipeline temporale trascorsa, combinata con gli avvisi di Data Factory, consente agli sviluppatori di pipeline di dati di offrire meglio contratti di servizio ai clienti. A questo punto è possibile indicare quanto tempo deve essere eseguita una pipeline e verrà visualizzata una notifica proattiva quando la pipeline viene eseguita più a lungo del previsto. Ulteriori informazioni |
| Attività non riuscita (anteprima pubblica) | La nuova attività Errore consente di generare un errore in una pipeline intenzionalmente per qualsiasi motivo. Ad esempio, è possibile usare l'attività Errore se un'attività lookup non restituisce dati corrispondenti o un'attività personalizzata termina con un errore interno. Ulteriori informazioni |
Agosto 2021
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Integrazione continua e distribuzione continua | Miglioramenti di CI/CD con il supporto di GitHub in Azure per enti pubblici e Microsoft Azure gestito da 21Vianet | È stato aggiunto il supporto per GitHub in Azure per il governo degli Stati Uniti e Azure gestito da 21Vianet. Ulteriori informazioni |
| Spostamento dei dati | Il connettore dell'API Azure Cosmos DB per MongoDB supporta le versioni 3.6 e 4.0 in Data Factory | Il connettore dell'API Azure Cosmos DB di Azure Cosmos DB per MongoDB supporta ora le versioni del server 3.6 e 4.0. Ulteriori informazioni |
| Migliorare l'uso dell'istruzione COPIA per caricare i dati in Azure Synapse | Azure Data Factory connettore di Azure Synapse Analytics supporta ora l'origine di copia e copia a fasi con *.* come wildcardFilename per l'istruzione COPIA. Ulteriori informazioni | |
| Flusso di dati | Gli endpoint REST sono disponibili come origine e sink nel flusso di dati | I flussi di dati in Data Factory e Azure Synapse supportano ora gli endpoint REST come origine e sink con supporto completo per i payload JSON e XML. Ulteriori informazioni |
| Runtime di integrazione | Lo strumento di diagnostica è disponibile per il runtime di integrazione self-hosted | Uno strumento di diagnostica per il runtime di integrazione self-hosted è progettato per offrire un'esperienza utente migliore e aiutare gli utenti a individuare potenziali problemi. Lo strumento esegue una serie di scenari di test nel computer del runtime di integrazione self-hosted. Ogni scenario presenta casi tipici di controllo integrità per problemi comuni. Ulteriori informazioni |
| Orchestrazione | Trigger di eventi personalizzato con opzione di filtro avanzata disponibile a livello generale | È ora possibile creare un trigger che risponde a un argomento personalizzato pubblicato in Griglia di eventi di Azure. È anche possibile usare filtri avanzati per ottenere un controllo granulare sugli eventi a cui rispondere. Ulteriori informazioni |
Luglio 2021
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Spostamento dei dati | Ottenere pipeline di inserimento dati basate sui metadati nello strumento di Copia dati di Data Factory entro 10 minuti (anteprima pubblica) | È ora possibile creare pipeline di copia dati su larga scala con approcci basati sui metadati nello strumento Copia dati (anteprima pubblica) entro 10 minuti. Ulteriori informazioni |
| Flusso di dati | Nuove funzioni di mapping aggiunte nelle funzioni di trasformazione del flusso di dati | Un nuovo set di funzioni di trasformazione del flusso di dati consente agli ingegneri dei dati di generare, leggere e aggiornare facilmente i tipi di dati e le strutture mappa complesse. Ulteriori informazioni |
| Runtime di integrazione | Sono disponibili cinque nuove aree nella rete virtuale gestita di Data Factory (anteprima pubblica) | Cinque nuove aree, Cina orientale2, Cina settentrionale2, USA Governo dell’Arizona, USA Governo del Texas e USA Governo della Virginia, sono disponibili nella rete virtuale gestita di Data Factory (anteprima pubblica). |
| Produttività degli sviluppatori | Miglioramenti alla home page di Data Factory | La home page di Data Factory è stata riprogettata con funzionalità di contrasto e reflow migliori. Alcune sezioni sono state introdotte nella home page per migliorare la produttività nel percorso di integrazione dei dati. Ulteriori informazioni |
| Nuova pagina di destinazione per Data Factory Studio | Pagina di destinazione per il riquadro Data Factory nel portale di Azure. Ulteriori informazioni |
Giugno 2021
| Categoria di servizio | Miglioramenti del servizio | Dettagli |
| Spostamento dei dati | Nuova esperienza utente con lo strumento Copia dati di Data Factory | Lo strumento Copia dati riprogettato è ora disponibile con un'esperienza di inserimento dei dati migliorata. Ulteriori informazioni |
| MongoDB e MongoDB Atlas sono supportati sia come origine che come sink | Questo miglioramento supporta la copia dei dati tra qualsiasi archivio dati supportato e un database MongoDB o MongoDB Atlas. Ulteriori informazioni | |
| Always Encrypted è supportato per i connettori di database SQL, Istanza gestita di SQL e SQL Server come origine e sink | Always Encrypted è disponibile in Data Factory per database SQL, Istanza gestita di SQL e connettori SQL Server per l'attività di copia. Ulteriori informazioni | |
| L'impostazione di metadati personalizzati è supportata nell'attività di copia durante il sink in Data Lake Storage Gen2 o nell'archiviazione BLOB | Quando si scrive in Data Lake Storage Gen2 o in Archiviazione BLOB, l'attività di copia supporta l'impostazione di metadati o archiviazione personalizzati delle informazioni dell'ultima modifica apportata al file di origine come metadati. Ulteriori informazioni | |
| Flusso di dati | SQL Server è ora supportato come origine e sink nei flussi di dati | SQL Server è ora supportato come origine e sink nei flussi di dati. Seguire il collegamento per istruzioni su come configurare la rete usando la funzionalità di rete virtuale gestita del runtime di integrazione di Azure per comunicare con le istanze di SQL Server locali e basate su macchine virtuali cloud. Ulteriori informazioni |
| Riutilizzo rapido del cluster di flussi di dati ora abilitato per impostazione predefinita per tutti i nuovi IR di Azure | La funzionalità di riutilizzo rapido del flusso di dati più diffuso è ora disponibile a livello generale per Data Factory. Tutti i nuovi IR di Azure ora hanno un riutilizzo rapido abilitato per impostazione predefinita. Ulteriori informazioni | |
| Attività di Power Query (anteprima pubblica) | È ora possibile creare mapping di campi complessi al sink di Power Query usando data wrangling di Data Factory. Il sink è ora configurato nella pipeline nell'attività Power Query (anteprima pubblica) per supportare questo aggiornamento. Ulteriori informazioni | |
| Interfaccia utente di monitoraggio dei flussi di dati aggiornata in Data Factory | Data Factory include un nuovo aggiornamento per l'interfaccia utente di monitoraggio per semplificare la visualizzazione delle esecuzioni dei processi ETL del flusso di dati e identificare rapidamente le aree per l'ottimizzazione delle prestazioni. Ulteriori informazioni | |
| SQL Server Integration Services | Eseguire qualsiasi istruzione o script SQL in tre passaggi con SSIS in Data Factory | Questo post illustra tre passaggi per eseguire qualsiasi istruzione o script SQL in qualsiasi punto con SSIS in Data Factory.
|