Runtime de Azure Synapse para Apache Spark 3.2 (en desuso)
Azure Synapse Analytics admite varios entornos de ejecución para Apache Spark. En este documento se describen los componentes y versiones del entorno de ejecución de Azure Synapse para Apache Spark 3.2.
Precaución
Notificación de desuso y deshabilitación de Azure Synapse Runtime para Apache Spark 3.2
- Se anunció la finalización del soporte técnico para Azure Synapse Runtime para Apache Spark 3.2, 8 de julio de 2023. De acuerdo con la directiva de ciclo de vida de Synapse para Apache Spark, el entorno de ejecución de Azure Synapse para Apache Spark 3.2 se retiró a partir del 8 de julio de 2024. Los flujos de trabajo existentes seguirán ejecutándose, pero las actualizaciones de seguridad y las correcciones de errores ya no estarán disponibles. Los metadatos permanecerán temporalmente en el área de trabajo de Synapse.
- A partir del 8 de julio de 2024, Azure Synapse suspendió la compatibilidad oficial con los entornos de ejecución de Spark 3.2. Sin embargo, en función de las solicitudes recibidas de varios clientes, hemos ampliado el uso de este entorno de ejecución hasta el 31 de octubre de 2024 y la deshabilitación del trabajo se iniciará poco después de eso.
- Se recomienda encarecidamente actualizar las cargas de trabajo de Apache Spark 3.2 a Azure Synapse Runtime para Apache Spark 3.4.
- Para obtener información actualizada, una lista detallada de cambios y notas de la versión específicas para los entornos de ejecución de Spark, compruebe y suscríbase a las versiones y actualizaciones de Spark Runtimes.
Versiones de componentes
| Componente | Versión |
|---|---|
| Spark de Apache | 3.2.1 |
| Sistema operativo | Ubuntu 18.04 |
| Java | 1.8.0_282 |
| Scala | 2.12.15 |
| Hadoop | 3.3.1 |
| .NET Core | 3.1 |
| .NET | 2.0.0 |
| Delta Lake | 1.2 |
| Python | 3.8 |
| R (versión preliminar) | 4,2 |
Synapse-Python38-CPU.yml contiene la lista de bibliotecas enviadas en el entorno de Python 3.8 predeterminado en Azure Synapse Spark.
Bibliotecas
Para comprobar las bibliotecas incluidas en Azure Synapse Runtime para Apache Spark 3.2 para Java/Scala, Python y R, vaya a Las notas de la versión de Azure Synapse Runtime para Apache Spark 3.2
Pasos siguientes
Migración entre versiones de Apache Spark: compatibilidad
Para obtener instrucciones sobre la migración desde versiones anteriores del entorno de ejecución a Azure Synapse Runtime para Apache Spark 3.3 o 3.4, consulte Introducción al entorno de ejecución para Apache Spark.