Mars 2022

Ces fonctionnalités et améliorations de la plateforme Azure Databricks ont été publiées en mars 2022.

Meilleures performances et coûts pour vos pipelines Delta Live Tables avec la mise à l’échelle automatique améliorée databricks

31 mars 2022

La mise à l’échelle automatique améliorée de Databricks améliore la fonctionnalité de mise à l’échelle automatique de cluster existante en ajoutant des optimisations de charge de travail de streaming et en améliorant la prise en charge des charges de travail par lots. Les améliorations améliorées de la mise à l’échelle automatique offrent une utilisation plus efficace des clusters, une utilisation réduite des ressources et un coût inférieur. Consultez Optimiser l’utilisation du cluster des pipelines Delta Live Tables avec mise à l’échelle automatique améliorée.

Fichiers dans Repos activés par défaut dans les nouveaux espaces de travail

30 mars 2022

La fonctionnalité Fichiers dans Repos est désormais activée par défaut dans les espaces de travail nouvellement créés.

Disponibilité générale du magasin de caractéristiques Databricks

22 mars 2022

Le magasin de caractéristiques Databricks est en disponibilité générale. Le magasin de caractéristiques Databricks permet de partager et découvrir des caractéristiques au sein de votre organisation, et garantit aussi que le même code de calcul des caractéristiques est utilisé pour l’entraînement et l’inférence des modèles.

Partager une expérience à partir de sa page

21-28 mars 2022 : Version 3.68

Le bouton Autorisations de la page de l’expérience MLflow a été renommé Partage. La boîte de dialogue inclut désormais un lien partageable vers l’expérience. Consultez pour modifier les autorisations d’une expérience.

Correctif de bogue RStudio Workbench

21-28 mars 2022 : Version 3.68

La dernière version de RStudio Workbench dépend de cookies lors de votre utilisation d’un fichier de licence. Ces cookies ne figuraient pas dans la liste d’autorisation pour le proxy. Ce problème est à présent résolu.

Nouvelles options de langue de l’espace de travail

21 mars 2022

L’espace de travail est maintenant disponible dans les langues suivantes :

• Español
• Português (Brasil)

Databricks Runtime 10.4 LTS et 10.4 LTS ML sont en disponibilité générale ; 10.4 Photon est en préversion publique

18 mars 2022

Databricks Runtime 10.4 LTS et Databricks Runtime 10.4 LTS ML sont désormais en disponibilité générale. Databricks Runtime 10.4 Photon est en préversion publique.

Consultez Databricks Runtime 10.4 LTS et Databricks Runtime 10.4 LTS pour le Machine Learning.

Unity Catalog est disponible en Préversion publique

10 mars 2022

Unity Catalog (Aperçu) est une solution de gouvernance granulaire pour les données et l'IA sur la plateforme Databricks lakehouse.

Le Catalogue Unity permet de simplifier la sécurité et la gouvernance de vos données grâce aux fonctionnalités clés suivantes :

• Définir une fois, sécuriser partout : Le Catalogue Unity offre un emplacement unique pour gérer les stratégies d’accès aux données qui s’appliquent à tous les espaces de travail et personnages.
• modèle de sécurité conforme aux normes : le modèle de sécurité du Catalogue Unity est basé sur le SQL ANSI standard, et il permet aux administrateurs d’accorder des autorisations au niveau des catalogues, des bases de données (également appelés schémas), des tables et des vues dans leur lac de données existant à l’aide d’une syntaxe familière.
• Audit intégré : Unity Catalog capture automatiquement les journaux d’audit de niveau utilisateur qui enregistrent l’accès à vos données.

Vous pouvez accéder aux données dans Unity Catalog de la même manière que vous accédez aux données locales d’un espace de travail : à partir d’un cluster Data Science & Engineering ou d’un cluster Databricks Mosaic AI, d’un entrepôt SQL, de l’éditeur SQL de Databricks, ou en utilisant l’API REST de Unity Catalog ou l’interface de ligne de commande (CLI) de Unity Catalog.

Pour plus d’informations, consultez Qu’est-ce que Unity Catalog ?. Pour participer à la préversion publique d’Unity Catalog, contactez l’équipe de votre compte Azure Databricks.

Delta Sharing est disponible en Préversion publique

10 mars 2022

Delta Sharing (préversion) est un protocole ouvert développé par Databricks pour le partage de données sécurisé avec d’autres organisations, quelle que soit la plateforme de calcul utilisée. Un utilisateur de Databricks, appelé "fournisseur de données", peut utiliser Delta Sharing pour partager des données dans un métastore du catalogue Unity avec une personne ou un groupe extérieur à son organisation, appelé "destinataire des données". Les destinataires de données peuvent commencer immédiatement à travailler avec la dernière version des données partagées. Pour obtenir la liste complète des connecteurs et des informations sur leur utilisation, consultez la documentation sur Delta Sharing. Lorsque Delta Sharing est activé sur un metastore du catalogue Unity, le catalogue Unity exécute un serveur Delta Sharing.

Pour plus d’informations, consultez Présentation de Delta Sharing. Pour participer à la préversion publique de Delta Sharing, contactez l’équipe de votre compte Azure Databricks.

Rotation de la clé gérée par le client pour les services gérés

10 mars 2022

Vous pouvez ajouter une clé gérée par le client (CMK) pour les services managés. Azure Databricks utilise votre clé pour protéger et contrôler l’accès à la clé qui chiffre les données dans le plan de contrôle pour la source du notebook, les secrets et l’historique des requêtes Databricks SQL. Cette fonctionnalité est disponible en préversion publique.

Vous pouvez maintenant faire pivoter (mettre à jour) la clé.

Contrôle d’accès amélioré pour les pipelines de tables dynamiques Delta

9 mars 2022

Vous disposez maintenant d’un contrôle accru sur l’accès à vos pipelines de tables dynamiques Delta, y compris le propriétaire d’un pipeline, qui peut afficher ou gérer le pipeline, et qui peut exécuter le pipeline. Consultez les listes de contrôle d’accès du pipeline Delta Live Tables.

Tester la fonctionnalité en préversion Delta Live Tables avec le nouveau paramètre channel (préversion publique)

7-14 mars 2022 : Version 3.67

Vous pouvez tester les fonctionnalités à venir dans vos pipelines Delta Live Tables avec le nouveau paramètre channel. Pour tester votre pipeline avec les fonctionnalités à venir, affectez à channel la valeur preview. Pour revenir à la version actuelle, affectez à channel la valeur current.

Amélioration de la gestion des erreurs pour les fonctions Python Delta Live Tables (préversion publique)

7-14 mars 2022 : Version 3.67

Cette version ajoute une vérification de type pour confirmer que les fonctions Python Delta Live Tables utilisent le type de données string lors de la définition de noms et de valeurs pour les propriétés de table. Auparavant, la définition des propriétés de table à l’aide de valeurs non-chaîne pouvait entraîner l’échec de votre pipeline sans message d’erreur indiquant la cause sous-jacente.

Améliorations apportées à Databricks Repos

du 7-14 mars 2022 : Version 3.67

Les améliorations suivantes ont été apportées à Databricks Repos.

• Recherche de texte et remplacement dans les fichiers en pensions. L’éditeur de fichier contient désormais des menus fichier et modifier qui fournissent des fonctionnalités de recherche, de remplacement et de remplacement.
• Auparavant, Databricks a recommandé que le nombre total de blocs-notes et de fichiers dans un référentiel ne dépasse pas 2000. Cette limite a été augmentée à 5000.

Journalisation des diagnostics pour les modifications de stratégie de cluster

du 7-14 mars 2022 : Version 3.67

Lorsque la journalisation d’audit est activée, un événement d’audit est désormais consigné lorsque vous créez, mettez à jour ou supprimez une stratégie de cluster, ou lorsque vous mettez à jour des autorisations utilisateur pour une stratégie de cluster. Pour plus d’informations, consultez Référence des journaux de diagnostic.

Databricks Runtime 10.4 (bêta)

4 mars 2022

Databricks Runtime 10.4, 10.4 Photon et 10.4 ML sont désormais disponibles en versions bêta.

Consultez les notes de publication complètes dans Databricks Runtime 10.4 LTS et Databricks Runtime 10.4 LTS pour le Machine Learning.