Juin 2023

Ces fonctionnalités et améliorations de la plateforme Azure Databricks ont été publiées en juin 2023.

Fournisseur Databricks Terraform mis à jour vers la version 1.20.0

29 juin 2023

La version 1.20.0 du fournisseur Databricks Terraform ajoute la prise en charge de la ressource Unity Catalogdatabricks_catalog_workspace_binding, améliore l’exportation des utilisateurs et des groupes au niveau du compte, et bien plus encore. Pour plus d’informations, consultez le journal des modifications de la version 1.20.0.

Interface CLI Databricks mise à jour vers la version 0.200.1 (préversion publique)

28 juin 2023

Databricks CLI version 0.200.1 met à jour les commandes fs ls et fs cp , prend en charge les fichiers locaux comme valeur par défaut pour les commandes fs, ajoute la détection du fournisseur à la commande repos create, et bien plus encore. Pour plus d’informations, consultez le journal des modifications de la version 0.200.1.

Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.12.0 (bêta)

28 juin 2023

Le Kit de développement logiciel (SDK) Databricks pour Go version 0.12.0 ajoute la prise en charge des paramètres au niveau du travail et des définitions de paramètres, l’exécution conditionnelle des tâches de travail et plusieurs correctifs de bogues pour d’autres services. Pour plus d’informations, consultez le journal des modifications de la version 0.12.0.

Kit de développement logiciel (SDK) Databricks pour Go mis à jour vers la version 0.11.0 (bêta)

28 juin 2023

Le Kit de développement logiciel (SDK) Databricks pour Go version 0.11.0 introduit plusieurs modifications cassants dans les API Go, notamment des dizaines d’ajouts, de renommages et de consolidations. Pour plus d’informations, consultez le journal des modifications de la version 0.11.0.

Kit de développement logiciel (SDK) Databricks pour Python (bêta)

28 juin 2023

Le Kit de développement logiciel (SDK) Databricks pour Python est désormais disponible en version bêta. Le Kit de développement logiciel (SDK) Databricks pour Python vous permet d’automatiser des comptes, des espaces de travail et des ressources Azure Databricks en exécutant du code Python.

Consultez kit de développement logiciel (SDK) Databricks pour Python.

Kit de développement logiciel (SDK) Databricks pour Go (bêta)

28 juin 2023

Le Kit de développement logiciel (SDK) Databricks pour Go est désormais disponible en version bêta. Le kit de développement logiciel (SDK) Databricks pour Go vous permet d’automatiser les comptes, les espaces de travail et les ressources Azure Databricks en exécutant du code Go.

Consultez kit de développement logiciel (SDK) Databricks pour Go.

Journal d’audit d’accès, utilisation facturable et tables système de traçabilité (préversion publique)

28 juin 2023

Les administrateurs de compte peuvent désormais activer l’accès aux tables système dans les comptes Azure Databricks. Les tables système sont un magasin analytique hébergé par Azure Databricks des données opérationnelles d’un compte. Les tables système fournissent des données d’observabilité à l’échelle du compte facilement accessibles.

Pour plus d’informations, consultez Surveiller l’activité du compte avec des tables système.

Modèles dans Unity Catalog (préversion publique)

28 juin 2023

Vous pouvez maintenant mettre à niveau les workflows du Registre de modèles MLflow pour régir les modèles via Unity Catalog. Unity Catalog fournit un contrôle d’accès centralisé, un audit, une traçabilité, un partage de modèles entre les espaces de travail et de meilleurs flux de travail de déploiement MLOps. Databricks recommande d’utiliser des modèles dans Unity Catalog au lieu du registre de modèles d’espace de travail existant, qui sera déprécié à l’avenir. Pour plus d’informations, consultez Gérer le cycle de vie des modèles dans Unity Catalog .

La Place de marché Databricks est maintenant en disponibilité générale

27 juin 2023

Vous pouvez maintenant utiliser Databricks Marketplace pour découvrir, accéder et déployer des centaines de produits de données et de notebooks des principaux fournisseurs dans vos workflows d’IA et d’analytique. Les faits saillants depuis le début de la préversion publique incluent de nouveaux fournisseurs, notamment Dun et Bradstreet, LexisNexis, Refinitiv (London Stock Exchange Group), YipitData et ZoomInfo, ainsi que l’ajout d’échanges privés et la gestion simplifiée des autorisations des consommateurs à l’aide du USE_MARKETPLACE_ASSETS privilège.

Consultez Qu’est-ce que la Place de marché Databricks ?.

Databricks Runtime 13.2 (bêta)

26 juin 2023

Databricks Runtime 13.2 et Databricks Runtime 13.2 ML sont désormais disponibles en versions bêta.

Consultez Databricks Runtime 13.2 (EoS) et Databricks Runtime 13.2 pour Machine Learning (EoS).

Extension Databricks pour Visual Studio Code (Disponibilité générale)

26 juin 2023

L’extension Databricks pour Visual Studio Code est désormais en disponibilité générale. Connectez-vous au lakehouse, effectuez un débogage interactif et exécutez des notebooks Jupyter, le tout sans quitter votre IDE. Utilisez la navigation, la refactorisation, l’achèvement et l’identification des erreurs de votre IDE.

Consultezextension Databricks pour Visual Studio Code.

Activer des clés gérées par le client à l’aide d’Azure CLI et de PowerShell sans modèle

23 juin 2023

Vous pouvez maintenant activer des clés gérées par le client pour les services managés et les disques managés à l’aide d’Azure CLI et de PowerShell sans utiliser de modèle. Cela était déjà disponible pour les clés gérées par le client pour DBFS. Consultez Activer les clés gérées par le client pour les services managés, Configurer des clés gérées par le client pour les disques managés Azure et Clés gérées par le client pour la racine DBFS.

Les entrepôts SQL serverless fonctionnent avec les principaux Azure Private Link activés

22 juin 2023

L’activation du Azure Private Link back-end n’empêche plus les entrepôts SQL serverless de démarrer. Les ressources de calcul serverless n’utilisent pas le back-end Azure Private Link connexion si elle est activée. Consultez Activer des entrepôts SQL serverless et activer les connexions back-end et front-end Azure Private Link.

Voir une vue d’ensemble visuelle des exécutions de travaux terminées dans l’interface utilisateur des travaux Azure Databricks

22 juin 2023

Une interface utilisateur améliorée des travaux Azure Databricks fournit une vue d’ensemble des exécutions de travaux terminées, filtrables par état et l’heure d’exécution, ainsi qu’une liste des erreurs de travail les plus courantes. Le filtre de temps par défaut couvre les 48 heures précédentes. Voir Afficher les exécutions de travaux récentes.

CLI Databricks (préversion publique)

21 juin 2023

L’interface de ligne de commande Databricks (Databricks CLI) a subi une refonte majeure. La nouvelle interface CLI couvre toutes les opérations de l’API REST Databricks et prend en charge tous les types d’authentification Azure Databricks. Les utilisateurs macOS et Linux peuvent installer la nouvelle interface CLI avec Homebrew. Windows est également pris en charge.

Pagination améliorée des résultats des requêtes d’API List all jobs et List job runs

14 juin 2023

Vous pouvez maintenant utiliser le paramètre page_token pour pager les résultats retournés à partir des requêtes d’API GET /api/2.1/jobs/list et GET /api/2.1/jobs/runs/list . Cette pagination basée sur des jetons remplace les paramètres offset et limit déconseillés et améliore la scalabilité du service pour ces requêtes.

Le navigateur d’espace de travail pleine page inclut Repos

14 juin 2023

L’expérience du navigateur d’espace de travail pleine page s’étend désormais à Repos. Vous pouvez parcourir le contenu des référentiels Databricks et de votre contenu d’espace de travail en cliquant sur Espace de travail dans la barre latérale. Vous pouvez également parcourir le contenu d'un carnet à l'aide d'un navigateur contextuel. Pour plus d’informations sur le navigateur d’espace de travail pleine page, consultez Naviguer dans l’espace de travail et Navigateur de l’espace de travail.

Fournisseur Databricks Terraform mis à jour vers la version 1.19.0

14 juin 2023

Le fournisseur Databricks Terraform 1.19.0 ajoute run_as et run_as_user_name à databricks_job, ajoute d’autres attributs à databricks_cluster_policy, ajoute force_destroy à databricks_external_location, et bien plus encore. Pour plus de détails, consultez le journal des modifications de la version 1.19.0.

Exécuter des travaux en principal de service (Préversion publique)

13 juin 2023

Vous pouvez désormais accorder aux utilisateurs, aux principaux de service et aux groupes Azure Databricks des autorisations pour utiliser un principal de service. Cela permet aux utilisateurs d’exécuter des travaux en tant que principal de service, au lieu d’être exécutés en tant qu’identité du propriétaire du travail, afin d’empêcher l’échec des travaux si un utilisateur quitte votre organization ou si un groupe est modifié.

Consultez Rôles pour la gestion des principaux de service et Configurer l’identité pour les exécutions de travaux.

La nouvelle IU du principal de service offre une meilleure expérience de gestion

13 juin 2023

Vous pouvez maintenant utiliser la nouvelle interface utilisateur du principal de service pour gérer les principaux de service dans votre espace de travail. L’interface utilisateur du principal de service vous permet d’ajouter des principaux de service à votre espace de travail, de configurer les droits d’utilisation et de gérer les autorisations de principal de service. Si vous souhaitez en savoir plus, veuillez consulter la rubrique Gérer les principaux de service.

Dossiers de base restaurés lorsque des utilisateurs sont à nouveau ajoutés aux espaces de travail

9 juin 2023

Lorsqu’un administrateur supprime un utilisateur d’un espace de travail, puis le rajoute à nouveau, le dossier d’accueil de l’utilisateur est maintenant restauré. Auparavant, une fois ajouté à l’espace de travail, l’utilisateur recevait un nouveau dossier d’accueil vide. Son ancien dossier de base a été conservé en tant que sauvegarde. Pour plus d’informations sur les dossiers d’espace de travail, consultez Organiser les objets d’espace de travail en dossiers.

Place de marché Databricks : Les échanges privés sont désormais disponibles

7 juin 2023

Les échanges privés permettent aux fournisseurs de données de partager des produits de données avec un groupe sélectionné de consommateurs invités. Les annonces privées apparaissent sur la page d’accueil de la Place de marché des consommateurs invités, mais elles n’apparaissent pas sur la place de marché publique. Consultez Créer et gérer des échanges privés dans Databricks Marketplace.

Place de marché Databricks : les consommateurs peuvent désinstaller des produits de données par l’interface utilisateur

5 juin 2023

Les consommateurs de données peuvent désormais désinstaller n’importe quel produit de données à l’aide de l’interface Mes demandes de la Place de marché. Consultez Supprimer les produits de données installés.

Place de marché Databricks : les fournisseurs peuvent créer leurs propres profils

5 juin 2023

Les fournisseurs de données peuvent désormais créer et mettre à jour leurs propres profils, une fois leur application fournisseur approuvée. Consultez Créer votre profil de fournisseur de la Place de marché.

Databricks Connect V2 est en disponibilité générale pour Python

2 juin 2023

Depuis la version 13.1 de Databricks Runtime, Databricks Connect est désormais en disponibilité générale pour Python. Cette version ajoute la prise en charge de Structured Streaming, de toutes les fonctionnalités Delta et de Pandas sur Spark. Il inclut également la prise en charge d’OAuth (expérimental), en s’appuyant sur le Kit de développement logiciel (SDK) Databricks pour Python inclus.

Fournisseur Databricks Terraform mis à jour vers la version 1.18.0

2 juin 2023

Le fournisseur Databricks Terraform 1.18.0 ajoute une ressourcedatabricks_volume, une prise en charge databricks_model_serving à databricks_permissions, et bien plus encore. Pour plus de détails, consultez le journal des modifications de la version 1.18.0.

Nouveaux fournisseurs de la Place de marché Databricks

1 juin 2023

Huit nouveaux fournisseurs ont publié des annonces dans Databricks Marketplace au cours du mois dernier. Il s’agit notamment des paramètres suivants :

• IQVIA : Données relatives aux soins de santé et aux sciences de la vie.
• Morningstar : des données d’offre d’investissement et des insights de recherche tels que les données de notation des risques ESG.
• Vaisala : Données météorologiques et environnementales.
• Sucali : Mesures de performance immobilière pour les fonds spéculatifs et les investisseurs.
• Veritas Data Research : index complet des données de mortalité aux États-Unis de 2010 à aujourd’hui.
• Magasin de données collecteurs : le sport et le trading carte des données pour les annonceurs et les consommateurs.
• Tego Cyber : Données de cybersécurité et de renseignement sur les menaces
• Intégrité du ruban : données du fournisseur de soins de santé.

Si vous avez des questions sur ces fournisseurs ou la Place de marché, contactez dataconsumers@databricks.com. Consultez également Qu’est-ce que la Place de marché Databricks ?

Databricks Runtime 13.1 est en disponibilité générale

1 juin 2023

Databricks Runtime 13.1 et Databricks Runtime 13.1 ML sont désormais en disponibilité générale.

Consultez Databricks Runtime 13.1 (EoS) et Databricks Runtime 13.1 pour Machine Learning (EoS).

Afficher les données des notebooks, de l’éditeur SQL et de Catalog Explorer avec le navigateur de schémas unifié (préversion publique)

1 juin 2023

Le nouveau navigateur de schéma unifié vous permet d’afficher toutes les données du metastore Unity Catalog sans quitter un notebook ou l’éditeur SQL. Vous pouvez sélectionner Pour limiter l’affichage aux données actives que vous utilisez et à vos favoris.

Pour plus d’informations sur Catalog Explorer, consultez Catalog Explorer.

Pour plus d’informations sur l’accès aux Catalog Explorer à partir d’un bloc-notes, consultez Parcourir les données.