Avril 2023

Ces fonctionnalités et améliorations de la plateforme Azure Databricks ont été publiées en avril 2023.

Place de marché Databricks (préversion publique) : place de marché ouverte pour les données, l’analytique et l’IA

27 avril 2023

Vous pouvez désormais utiliser la Place de marché Databricks pour découvrir, accéder et déployer des centaines de produits de données dans vos flux de travail d’IA et d’analyse. La Place de marché Databricks tire parti de Delta Sharing pour fournir un partage sécurisé et transparent de produits de données gratuits et commerciaux dans n’importe quelle région ou cloud. Consultez Qu’est-ce que la Place de marché Databricks ?.

Configurer le formateur Python

25 avril 2023

Pour les fichiers et les notebooks dans Databricks Repos, vous pouvez maintenant configurer le formateur Python sur la base d’une spécification Black. Consultez la bibliothèque de formateur noir Python.

Les fichiers d’espace de travail sont en disponibilité générale

24 avril 2023

Vous pouvez travailler avec des fichiers non-notebooks dans Azure Databricks. Les fichiers d’espaces de travail sont activés par défaut dans tous les espaces de travail. Consultez l’article Que sont les fichiers d’espace de travail ?.

Les scripts init associés aux clusters de l’étendue peuvent désormais être stockés dans des fichiers d’espace de travail

24 avril 2023

Vous pouvez maintenant stocker des scripts init délimités par un cluster dans des fichiers d’espace de travail, quelle que soit la version de Databricks Runtime utilisée par votre calcul. Databricks recommande de stocker tous les scripts init de l’étendue du cluster dans des fichiers d’espace de travail. Consultez l’article Stocker les scripts d’initialisation dans des fichiers d’espace de travail.

Créer une étendue de secret Azure Key Vault avec un principal de service

19 avril 2023

Vous pouvez désormais créer une étendue de secret Azure Key Vault en utilisant un principal de service. Voir Gérer les étendues de secret

Les nouveaux privilèges Delta Sharing permettent la délégation des tâches de gestion du partage, du destinataire et du fournisseur

18 avril 2023

Les nouveaux privilèges USE SHARE, USE RECIPIENT, USE PROVIDERet SET SHARE PERMISSION permettent la délégation des tâches de gestion de partage, de destinataire et de fournisseur qui nécessiteraient autrement le rôle d’administrateur ou la propriété de l’objet metastore. Ces privilèges vous permettent de limiter le nombre d’utilisateurs qui ont le rôle d’administrateur de metastore puissant. Voir Types de privilèges s’appliquant uniquement au partage Delta ou à la Place de marché Databricks.

Databricks Connect V2 (préversion publique)

17 avril 2023

À compter de Databricks Runtime 13.0, Databricks Connect s’appuie sur Spark Connect, ce qui permet aux développeurs d’utiliser la puissance de Databricks et de l’IDE de leur choix pour développer et déboguer de manière interactive leur code dans n’importe quel espace de travail Azure Databricks.

Nouvelle interface utilisateur des métriques de cluster

14 avril 2023

Les clusters qui utilisent Databricks Runtime 13.0 et versions ultérieures ont accès à la nouvelle interface utilisateur des métriques de cluster. Cette fonctionnalité remplace Ganglia en tant qu’outil de surveillance des métriques de cluster. La nouvelle interface utilisateur des métriques de cluster inclut un affichage en direct du niveau de performance du cluster et des affichages historiques personnalisées minute par minute. Pour plus d’informations, consultez Afficher les métriques de calcul.

Databricks Runtime 13.0 est en disponibilité générale

14 avril 2023

Databricks Runtime 13.0 et Databricks Runtime 13.0 ML sont désormais en disponibilité générale.

Consultez Databricks Runtime 13.0 (EoS) et Databricks Runtime 13.0 pour Machine Learning (EoS).

Contrôler l’accès à la console du compte par plages d’adresses IP (préversion publique)

17 avril 2023

La console de compte Azure Databricks prend désormais en charge les listes d’accès IP pour contrôler l’accès à la console du compte par plages d’adresses IP, comme la prise en charge existante des listes d’accès IP pour les espaces de travail. Utilisez une interface utilisateur de console de compte ou une API REST pour gérer l’accès. Voir Configure des listes d’accès IP pour la console de compte.

Quand Azure Databricks bloque une requête, Azure Databricks génère un nouvel événement dans les journaux d’audit au niveau du compte avec service accounts et événement accountIpAclsValidationFailed. Consultez Informations de référence sur les journaux de diagnostic.

Fournisseur Databricks Terraform mis à jour vers la version 1.14.3

14 avril 2023

La version 1.14.3 ajoute la prise en charge de l’exportateur pour databricks_sql_alert, ajoute la prise en charge des notifications dans databricks_pipeline, et bien plus encore. Pour plus de détails, consultez le journal des modifications de la version 1.14.3.

Entrées de journal de diagnostic pour les paramètres d’administration modifiés pour l’espace de travail

14 avril 2023

Il existe désormais des événements de journal d’audit pour les modifications apportées à certains paramètres d’administration dans les journaux de diagnostic de l’espace de travail. Dans le service accounts, les nouveaux noms d’action d’événement sont deleteSetting et setSetting. Consultez Informations de référence sur les journaux de diagnostic. Tous les paramètres ne génèrent pas d’événements auditables.

Pour la clé initiale gérée par le client pour les disques managés, Azure Databricks met désormais fin aux ressources de calcul

10 avril 2023

Auparavant, l’ajout initial d’une clé gérée par le client pour les disques managés redémarre toutes les ressources de calcul en cours d’exécution (clusters, pools). Les ressources de calcul sont maintenant terminées et ne sont pas redémarrées, ce qui signifie que vous devez les démarrer manuellement une fois la mise à jour terminée. Azure Databricks empêche les clusters de fonctionner ou de démarrer pendant l’ajout d’une clé. Planifiez le temps et terminez toutes les ressources de calcul avant d’ajouter la clé pour empêcher l’arrêt automatique, ce qui peut entraîner des problèmes pour certains types de charges de travail.

Pour un espace de travail qui dispose déjà d’une clé gérée par le client pour les disques managés, si vous effectuez une rotation de la clé, vous n’avez pas besoin de mettre fin aux ressources de calcul.

Fournisseur Databricks Terraform mis à jour vers les versions 1.14.1 et 1.14.2

4 au 6 avril 2023

La version 1.14.1 exclut les rôles dans les appels de liste d’API SCIM pour réduire la charge sur le service SCIM Databricks, et bien plus encore. La version 1.14.2 ajoute une tâche de fichier SQL à la databricks_job ressource, corrige plusieurs bogues, et bien plus encore. Pour plus de détails, consultez le journal des modifications de la version 1.14.1 et 1.14.2.

Paramètres utilisateur SQL combinés et paramètres utilisateur généraux

3 au 5 avril 2023

Les paramètres utilisateur SQL ont été combinés avec les paramètres utilisateur généraux de l’espace de travail pour créer une expérience unifiée pour les utilisateurs de l’espace de travail. Tous les paramètres utilisateur SQL sont désormais accessibles à partir de Paramètres:

• L’onglet Mot de passe s’appelle désormais l’onglet Mot de passe et compte.
• L’onglet Extraits de requête est visible par les utilisateurs disposant du droit SQL.

Visualisations de notebook héritées déconseillées

4 avril 2023

La création et la modification des visualisations de notebook héritées sont déconseillées et seront bientôt supprimées du produit. Les visualisations héritées existantes continueront d’être rendues. Les détails s’affichent dans les notifications dans le produit.

Créer ou modifier une table à partir d’une page de téléchargement de fichiers prend en charge les téléchargements de fichiers JSON

3 avril 2023

La page Créer ou modifier une table à partir d’un fichier chargé prend désormais en charge les téléchargements de fichiers JSON. Pour plus d’informations, consultez Créer ou modifier une table à l’aide du chargement de fichiers.