Databricks Light

Databricks Light est le package Databricks du runtime Apache Spark open source. Il fournit une option d’exécution pour les travaux qui n’ont pas besoin des avantages avancés en matière de performances, de fiabilité ou de mise à l’échelle automatique fournis par Databricks Runtime. En particulier, Databricks Light ne prend pas en charge les éléments suivants :

• Delta Lake
• Fonctionnalités Autopilot telles que la mise à l’échelle automatique
• Clusters à usage général et à fort taux de simultanéité
• Notebooks, tableaux de bord et fonctionnalités de collaboration
• Connecteurs à différentes sources de données et outils BI

Databricks Light est un environnement d’exécution pour les travaux (ou « charges de travail automatisées »). Lorsque vous exécutez des travaux sur des clusters Databricks Light, ils sont soumis à des tarifs Jobs Light Compute plus faibles. Vous pouvez sélectionner Databricks Light uniquement lorsque vous créez ou planifiez un travail JAR, Python ou spark-submit et que vous attachez un cluster à ce travail. Vous ne pouvez pas utiliser Databricks Light pour exécuter des travaux de notebook ou des charges de travail interactives.

Databricks Light peut être utilisé dans le même espace de travail avec les clusters exécutés sur d’autres runtimes Databricks et niveaux tarifaires. Vous n’avez pas besoin de demander un espace de travail distinct pour commencer.

Éléments inclus dans Databricks Light

La planification de mise en production du runtime Databricks Light suit la planification de mise en production du runtime Apache Spark. Toute version de Databricks Light est basée sur une version spécifique d’Apache Spark. Pour plus d’informations, consultez les notes de publication suivantes :

• Databricks Light 2.4 : support étendu (EoS)

Créer un cluster à l’aide de Databricks Light

Lorsque vous créez un cluster de travail, sélectionnez une version de Databricks Light dans la liste déroulante Version de Databricks Runtime.