Février 2021
Ces fonctionnalités et améliorations de la plateforme Azure Databricks ont été publiées en février 2021.
Notes
Les publications se font par étapes. Votre compte Azure Databricks ne peut pas être mis à jour jusqu’à une semaine ou plus après la date de publication initiale.
Nouveau connecteur Azure Databricks Power BI (GA)
26 février 2021
Le nouveau connecteur Power BI pour Azure Databricks, publié en préversion publique en septembre 2020, est maintenant en GA. Il offre :
- Une configuration simple des connexions : le nouveau connecteur Azure Databricks Power BI est intégré à Power BI. Vous pouvez le configurer dans une boîte de dialogue simple en quelques clics.
- Une authentification basée sur les informations d’identification Microsoft Entra ID : inutile pour les administrateurs de configurer des jetons PAT.
- Des importations plus rapides et des appels de métadonnées optimisés, grâce au nouveau pilote ODBC Azure Databricks qui offre des améliorations significatives au niveau des performances.
- L’accès aux données Azure Databricks via Power BI respecte Azure Databricks contrôle d’accès aux tables et les autorisations de compte de stockage Azure associées à votre identité Microsoft Entra ID.
Pour plus d’informations, consultez Connecter Power BI à Azure Databricks.
La journalisation des diagnostics des activités utilisateur dans Azure Databricks est en GA
23 février au 2 mars 2021 : version 3.40
Capturez une piste d’audit détaillée des activités que vos utilisateurs effectuent dans Azure Databricks, désormais en disponibilité générale.
Consultez Informations de référence sur les journaux de diagnostic.
Ajout de modification_time aux réponses obtenir le statut et les listes de l’API REST DBFS
23 février au 2 mars 2021 : version 3.40
L’heure de la dernière modification d’un objet fichier est désormais disponible dans l’API REST DBFS. modification_time est maintenant retourné dans la structure de réponse FileInfo à la fois par les points de terminaison d’API get-status et list. Exemple de réponse JSON pour un appel get-status sur un répertoire :
{"path": "/test-directory", "is_dir": true, "file_size": 0, "modification_time": 1610366751000}
Consultez API DBFS.
Copie facile des noms d’expérience longs dans MLflow
16 au 23 février 2021 : version 3.39
Vous pouvez maintenant copier le nom de l’expérience à partir de la page de l’expérience, ce qui facilite la définition de l’expérience MLflow active sur laquelle les journaux d’un notebook s’exécutent. Consultez Obtenez l’ID de l’expérience et le chemin d'accès pour accéder à l’expérience.
Ajustement de la taille de la mémoire et du nombre de cœurs pour les clusters
16 au 23 février 2021 : version 3.39
Vous pouvez désormais personnaliser les clusters utilisés pour la mise en service de modèles MLflow. Voir Intégration de Feature Store.
Le terminal web est maintenant en GA
16 au 23 février 2021 : version 3.39
Le terminal web est désormais en disponibilité générale. Il offre un moyen pratique et très interactif d’exécuter des commandes d’interpréteur de commandes et d’utiliser des éditeurs sur le nœud de pilote Spark. Consultez Exécuter des commandes d’interpréteur de commandes dans un terminal web Azure Databricks.
Le connecteur Apache Spark pour Azure SQL Database et SQL Server prend en charge Databricks Runtime 7.x et ultérieur
16 février 2021
Le connecteur Spark pour Azure SQL Database et SQL Server prend désormais en charge Spark 3 et, par conséquent, Databricks Runtime 7.x et versions ultérieures.
Fin du support de la série Databricks Runtime 7.2
11 février 2021
Le support de Databricks Runtime 7.2, de Databricks Runtime 7.2 pour Machine Learning et de Databricks Runtime 7.2 pour Genomics a pris fin le 11 février. Consultez Cycles de vie du support de Databricks.
Databricks Runtime 7.6 GA
8 février 2021
Databricks Runtime 7.6 et Databricks Runtime 7.6 ML sont désormais en disponibilité générale.
Pour obtenir plus d’informations, consultez les notes de publication complètes sur les pages Databricks Runtime 7.6 (EoS) et Databricks Runtime 7.6 pour le Machine Learning (EoS).
Databricks Runtime 8.0 (bêta)
1er février 2021
Databricks Runtime 8.0 et Databricks Runtime 8.0 ML sont désormais disponibles en versions bêta.
Pour obtenir plus d’informations, consultez les notes de publication complètes dans Databricks Runtime 8.0 (EoS) et Databricks Runtime 8.0 pour ML (EoS).
Databricks Runtime pour Genomics maintenant déprécié
1er février 2021
Databricks ne génère plus de nouvelles versions de Databricks Runtime pour Genomics et supprimera le support de Databricks Runtime pour Genomics le 24 septembre 2022, quand le support de Databricks Runtime pour Genomics 7.3 LTS prendra fin. À compter de cette date, Databricks Runtime pour Genomics ne sera plus disponible à la sélection lorsque vous créerez un cluster.
Pour plus d’informations sur la stratégie et la planification de dépréciation de Databricks Runtime, consultez Versions LTS de Databricks Runtime prises en charge.
Meilleure lisibilité de JSON dans l’affichage de l’artefact d’exécution MLflow
4 au 11 février 2021 : version 3.38
La sortie JSON dans le panneau d’artefact MLflow est désormais dans un format plus lisible.
Ajout de commentaires dans le registre de modèles avec l’API REST
4 au 11 février 2021 : version 3.38
Vous pouvez maintenant ajouter des commentaires dans le registre de modèles à l’aide de l’API REST.
Spécification facile des valeurs de cluster par défaut dans les appels d’API
4 au 11 février 2021 : version 3.38
Vous pouvez maintenant utiliser le champ applyDefaultPolicyValues lorsque vous créez et modifiez des clusters à usage général à l’aide de l’API Clusters de Databricks. La valeur true indique l’utilisation des valeurs par défaut de la stratégie pour les attributs de cluster manquants.
Paramétrage de la configuration de worker de cluster en fonction de l’allocation de worker actuelle
4 au 11 février 2021 : version 3.38
La liste de clusters affiche le nombre de workers alloués à chaque cluster en cours d’exécution. Ce nombre est maintenant affiché dans la page de détails du cluster, ce qui vous permet de comparer facilement le dimensionnement actuel du cluster aux détails de configuration du cluster et d’effectuer les réglages de configuration nécessaires.
Transfert des informations spécifiques au contexte à la tâche d’un travail avec des variables de paramètre de tâche
4 au 11 février 2021 : version 3.38
Vous pouvez maintenant passer des variables aux tâches qui contiennent des informations spécifiques au contexte, telles que l’ID de travail ou l’heure de début d’exécution. Pour plus d’informations, consultez Qu’est-ce qu’une référence de valeur dynamique ?.
Les messages d’erreur des échecs de travail ne contiennent plus d’informations potentiellement sensibles
4 au 11 février 2021 : version 3.38
Les messages d’erreur des échecs de travail ne contiennent plus les traces de pile des exceptions Java. Les traces de pile, incluses dans le champ miscMessage, pouvaient exposer des informations sensibles aux utilisateurs.