Delta Lives Tables version 2023.11
20-24 mars 2023
Ces fonctionnalités et améliorations ont été publiées avec la version 2023.11 de Delta Live Tables.
Versions de Databricks Runtime utilisées par cette version
Canal :
- VERSION ACTUELLE (par défaut) : Databricks Runtime 11.3.6
- PRÉVERSION : Databricks Runtime 12.1.2
Nouvelles fonctionnalités et améliorations de cette version
Vous pouvez désormais obtenir l’état en temps réel des mises à jour de votre pipeline par des notifications par e-mail. Vous pouvez configurer une ou plusieurs adresses e-mail pour recevoir des notifications lorsque :
- Une mise à jour du pipeline réussit, échoue avec une erreur renouvelable ou échoue sans erreur renouvelable.
- Un flux de données unique échoue.
Pour configurer les e-mails de notification, cliquez sur Notifications dans les paramètres du pipeline à la création ou lors de la modification d’un pipeline. Consultez Ajouter des notifications par e-mail pour les événements de pipeline.
Cette version contient des modifications pour améliorer l’expérience utilisateur lors de l’affichage de la liste des pipelines dans l’interface utilisateur Delta Live Tables. On compte, parmi les modifications, une augmentation du nombre de pipelines affichés sur chaque page. Par défaut, 20 pipelines sont affichés sur chaque page. La précédente valeur par défaut était de 10 pipelines sur chaque page.
Avec cette version, vous allez voir des avertissements de dépréciation dans le journal des événements Delta Live Tables, si l’une de vos définitions du jeu de données Python contient des backticks englobant le nom du jeu de données, par exemple, la définition d’une table en tant que
dlt.table(name="`table.name`")
.
Correctifs de bogues dans cette version
- Cette version corrige un bogue à l’origine d’une erreur lors de l’utilisation de la commande
spark.sql("SHOW CATALOGS")
.SHOW CATALOGS
est désormais une commande prise en charge.