Dezembro de 2019
Esses recursos e aprimoramentos da plataforma Azure Databricks foram lançados em dezembro de 2019.
Nota
Os lançamentos são encenados. Sua conta do Azure Databricks pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.
O Databricks Connect suporta agora o Databricks Runtime 6.2
Dezembro 17, 2019
O Databricks Connect agora suporta o Databricks Runtime 6.2.
Configurar clusters com a sua própria imagem de contentor mediante a utilização do Databricks Container Services (Disponibilidade Geral)
16 de dezembro de 2019: Versão 3.7
Geralmente disponível no Databricks Runtime 6.1 e na plataforma Azure Databricks versão 3.7, o Databricks Container Services permite configurar um cluster com sua própria imagem de contêiner. Você pode pré-empacotar ambientes complexos dentro de um contêiner, publicá-lo em um registro de contêiner popular, como ACR, ECR ou Docker Hub, e fazer com que o Azure Databricks puxe a imagem para criar um cluster. Alguns exemplos de casos de uso incluem:
- Personalização de bibliotecas - você tem controle total sobre as bibliotecas do sistema que deseja instalar
- Ambiente de contêiner dourado - sua imagem do Docker é um ambiente bloqueado que nunca mudará
- Integração de CI/CD do Docker - você pode integrar o Azure Databricks com seus pipelines de CI/CD do Docker
Há muitos outros casos de uso, desde a especificação da configuração até a instalação de pacotes de aprendizado de máquina.
Para obter detalhes, consulte Personalizar contêineres com o Databricks Container Service.
Disponibilidade Geral do Databricks Runtime 6.2 para o Genomics
Dezembro 3, 2019
O Databricks Runtime 6.2 for Genomics é construído sobre o Databricks Runtime 6.2. Ele inclui muitas melhorias e atualizações do Databricks Runtime 6.1 for Genomics, incluindo:
- Regressão logística de Firth
- Métricas de controle de qualidade de amostra definidas pelo usuário
- Melhoria do desempenho do transformador de tubos
- Genotipagem articular mais robusta
- Integração simplificada com LOFTEE
- Salve 0.26.0
- Samtools 1,9
O conector de aprovisionamento do SCIM do Azure Databricks está agora disponível na galeria de aplicações
Dezembro 3, 2019
Agora que o do Conector de Provisionamento SCIM do Azure Databricks está disponível na galeria de aplicativos do Microsoft Entra ID (anteriormente Azure Ative Directory), é mais fácil set o provisionamento de usuários e grupos do Microsoft Entra ID para o Azure Databricks. Para obter detalhes, consulte Configurar o provisionamento SCIM usando o Microsoft Entra ID (Azure Ative Directory).
Fim do suporte para o Databricks Runtime 5.3 e 5.4
Dezembro 3, 2019
O suporte para 5.3 e 5.4 terminou em 3 de dezembro. Consulte Ciclos de vida de suporte do Databricks.
Disponibilidade Geral do Databricks Runtime 6.2 ML
Dezembro 3, 2019
O Databricks Runtime 6.2 ML GA traz muitas atualizações de biblioteca, incluindo:
- TensorFlow e TensorBoard: 1.14.0 a 1.15.0.
- PyTorch: 1.2.0 a 1.3.0.
- tensorboardX: 1.8 a 1.9.
- MLflow: 1.3.0 a 1.4.0.
- Hyperopt: 0.2-db1 com integrações MLflow do Azure Databricks.
- mleap-databricks-runtime para 0.15.0 e inclui mleap-xgboost-runtime.
Para obter mais informações, consulte as notas de versão completas do Databricks Runtime 6.2 for ML (EoS ).
Disponibilidade Geral do Databricks Runtime 6.2
Dezembro 3, 2019
O Databricks Runtime 6.2 GA traz novos recursos, melhorias e muitas correções de bugs, incluindo:
- Mesclagem otimizada somente insertDelta Lake
Para obter mais informações, consulte as notas de versão completas do Databricks Runtime 6.2 (EoS ).
O Databricks Connect suporta agora o Databricks Runtime 6.1
Dezembro 3, 2019
O Databricks Connect agora suporta o Databricks Runtime 6.1. O Databricks Connect permite que você conecte seu IDE favorito (IntelliJ, Eclipse, PyCharm, RStudio, Visual Studio), servidor de notebook (Zeppelin, Jupyter) e outros aplicativos personalizados a clusters do Azure Databricks e execute o código Apache Spark.