Problema noto: i processi Spark potrebbero non riuscire a causa degli aggiornamenti di Runtime 1.3 per disponibilità generale
Microsoft Fabric Runtime 1.3 basato su Apache Spark 3.5 è stato disponibile a livello generale il 23 settembre 2024. Il runtime di Infrastruttura 1.3 può ora essere usato per i carichi di lavoro di produzione. Nell'ambito della transizione dall'anteprima pubblica alla fase di disponibilità generale, sono stati rilasciati gli aggiornamenti principali della libreria predefinita per migliorare funzionalità, sicurezza, affidabilità e prestazioni. Questi aggiornamenti possono influire sugli ambienti di Microsoft Fabric se sono state installate librerie o se è stata sostituita la versione predefinita della libreria con Runtime 1.3.
Stato: aperto
Esperienza prodotto: Ingegnere dei dati
Sintomi
Se sono stati installati gli ambienti con librerie con Runtime 1.3, il processo Spark inizia a non riuscire con un errore simile a Post Personalization failed. L'importazione di librerie personalizzate installate potrebbe non riuscire a causa dell'aggiornamento delle librerie predefinite sottostanti.
Strategie e soluzioni alternative
Reinstallare le librerie per Fabric Runtime 1.3 negli ambienti di Microsoft Fabric. La reinstallazione compila la nuova dipendenza in base agli aggiornamenti più recenti. Se le librerie personalizzate hanno dipendenze incompatibili nei pacchetti predefiniti Python, l'installazione ha esito negativo e viene generato un log di debug automatico con l'elenco delle versioni necessarie. È possibile aggiornare le dipendenze per rendere compatibili le librerie personalizzate. Potrebbero verificarsi incompatibilità o modifiche che causano interruzioni nel notebook o nella pipeline esistenti quando sono stati modificati i pacchetti Python sottostanti. È necessario rivedere il codice per attenuare il problema.