Juillet 2022

Ces fonctionnalités et améliorations de la plateforme Azure Databricks ont été publiées en juillet 2022.

Databricks Runtime 11.1 et 11.1 ML sont en disponibilité générale

27 juillet 2022

Databricks Runtime 11.1 et Databricks Runtime 11.1 ML sont désormais en disponibilité générale.

Consultez Databricks Runtime 11.1 (EoS) et Databricks Runtime 11.1 pour Machine Learning (EoS).

Photon est en disponibilité générale

27 juillet 2022

Photon est désormais en disponibilité générale, à compter de Databricks Runtime 11.1.

Photon est le moteur de requête vectorisé natif sur Azure Databricks, écrit pour être compatible avec les API Apache Spark, de sorte qu’il fonctionne avec votre code existant. Photon est développé en C++ pour tirer parti du matériel moderne, et il utilise les dernières techniques du traitement des requêtes vectorisées pour tirer parti du parallélisme au niveau des données et des instructions dans les processeurs, améliorant ainsi les performances sur les données et les applications réelles, tout ceci en mode natif sur votre Data Lake.

Photon fait partie d’un runtime hautes performances qui exécute vos appels d’API SQL et tableau existants plus rapidement et réduit le coût total par charge de travail. Photon est utilisé par défaut dans les entrepôts Databricks SQL.

Voir Photon est en disponibilité générale dans les notes de publication de Databricks Runtime 11.1.

Notification lors de l’achèvement du notebook

27 juillet – 15 août 2022

Si vous quittez un notebook pendant son exécution, une notification s’affiche maintenant lors de son achèvement. Vous pouvez activer ou désactiver ces notifications dans votre navigateur.

Limite accrue du nombre de travaux dans les espaces de travail Azure Databricks

19-22 juillet 2022

Vous pouvez maintenant créer jusqu’à 10 000 travaux dans un espace de travail Azure Databricks lorsque vous activez le bouton bascule Augmentation du nombre de travaux dans la console d’administration Azure Databricks. Cette fonctionnalité active également une liste de travaux paginés lorsque vous affichez des travaux dans l’interface utilisateur des travaux, ce qui réduit le temps nécessaire au chargement de la vue Liste des travaux.

Databricks recommande l’API Travaux 2.1 si vous activez l’augmentation de la limite du nombre de travaux. L’utilisation de l’API Travaux 2.0 entraîne une dégradation des performances lors du retour d’un grand nombre de travaux.

Les journaux d’audit détaillé sont désormais enregistrés lorsque les requêtes SQL Databricks sont exécutées.

14 juillet 2022

Vous pouvez maintenant configurer les journaux d’audit à enregistrer lorsque les requêtes SQL Databricks sont exécutées. Pour ce faire, utilisez le paramètre de configuration de l’espace de travail journaux d’audit détaillés. Consultez Activer les journaux d’audit détaillés. Il y a un enregistrement de journal d’audit pour soumettre une requête et un autre pour l’achèvement de la requête (y compris l’annulation).

Si les journaux d’audit détaillés ont déjà été activés pour votre espace de travail pour journaliser les commandes de bloc-notes, vos journaux d’audit détaillés incluent automatiquement les requêtes SQL Databricks pour l’espace de travail.

Pilote JDBC Databricks 2.6.27

11 juillet 2022

Nous avons publié la version 2.6.27 du pilote JDBC Databricks (télécharger). Cette version met à niveau les bibliothèques tierces telles qu’Apache Arrow 7.0.0.0. Cette version inclut également des mises à jour du fichier de licence et du guide d’installation de la configuration.

De plus, cette version résout les problèmes suivants :

• Dans certains cas, quand une connexion HTTP a été active pendant une longue période, le connecteur retourne une erreur NoHttpResponseException.
• Dans certains cas, des classes Log4j non hachées dans le fichier JAR du connecteur sont en conflit avec des fichiers déployés dans l’environnement de l’utilisateur final. Les classes non hachées ont été supprimées du fichier JAR du connecteur.
• Lors de l’utilisation d’une classe DataSource, les noms de sous-protocole sont incorrects.

Pilote ODBC Databricks 2.6.25

11 juillet 2022

Nous avons publié la version 2.6.25 du pilote ODBC Databricks (téléchargement). Cette version ajoute un support pour configurer le connecteur afin de minimiser les opérations de téléchargement de fichier au résultat aléatoire.

Databricks Runtime 11.1 (bêta)

8 juillet 2022

Databricks Runtime 11.1, Photon 11.1 et ML 11.1 sont désormais disponibles en versions bêta.

Consultez les notes de publication complètes dans Databricks Runtime 11.1 (EoS) et Databricks Runtime 11.1 pour Machine Learning (EoS).

Visualisations de notebook améliorées

5-11 juillet 2022 : version 3.75

Le support intégré pour les graphiques et visualisations dans les notebooks prend désormais en charge plusieurs profils de graphiques et de données. Lorsque vous exécutez une cellule SQL dans un notebook, ou utilisez la fonction display sur une tramedonnées, le notebook affiche les résultats sous des onglets, comme dans Databricks SQL. Vous pouvez désormais créer dans un notebook les mêmes visualisations riches que celles que vous pouvez créer dans Databricks SQL. Pour plus de détails, consultez l’article Visualisations dans les notebooks Databricks.