Março de 2023

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em março de 2023.

Databricks Terraform provedor atualizado para a versão 1.14.0

31 de março de 2023

A versão 1.14.0 adiciona um exemplo para girar automaticamente um token de acesso, uma run_if condição e um gatilho de chegada de databricks_job arquivo ao recurso e muito mais. Para obter mais detalhes, consulte o changelog para a versão 1.14.0.

Termina o suporte ao Databricks Runtime 7.3 LTS ML

31 de março de 2023

O suporte para Databricks Runtime 7.3 LTS para Machine Learning terminou em 31 de março. Consulte Ciclos de vida de suporte do Databricks.

Preparação distribuída com o TorchDistributor

27 de março de 2023

Com o Databricks Runtime 13.0 ML e superior, você pode realizar treinamento distribuído em modelos PyTorch ML usando o TorchDistributor. Consulte Treinamento distribuído com TorchDistributor.

TorchDistributor é um módulo de código aberto no PySpark que ajuda os usuários a fazer treinamento distribuído com o PyTorch em seus clusters Spark, então ele permite que você inicie trabalhos de treinamento do PyTorch como trabalhos do Spark.

Databricks Runtime 13.0 (Beta)

24 de março de 2023

O Databricks Runtime 13.0 e o Databricks Runtime 13.0 ML já estão disponíveis como versões Beta.

Consulte Databricks Runtime 13.0 (EoS) e Databricks Runtime 13.0 para Machine Learning (EoS).

Editor de ficheiros melhorado

24 de março de 2023

O editor de arquivos foi atualizado para trazer muitos dos recursos do notebook para sua experiência de edição de arquivos. Além disso, agora você pode executar diretamente arquivos Python, SQL, R e Scala a partir do editor de arquivos. Para obter detalhes, consulte Usar o bloco de anotações e o editor de arquivos Databricks.

Alterar a redundância de armazenamento raiz do DBFS para espaços de trabalho existentes do Azure Databricks

23 de março de 2023

Os usuários agora têm a opção de alterar a redundância de sua conta de armazenamento raiz DBFS. Consulte Alterar opções de redundância de armazenamento do espaço de trabalho.

Suporte a notebook .ipynb (Jupyter) no Repos (visualização)

22 de março de 2023

O suporte para notebooks Jupyter (arquivos .ipynb) está disponível em Repos. Você pode clonar repositórios com blocos de anotações .ipynb, trabalhar na interface do usuário do Databricks e, em seguida, confirmar e enviar por push como blocos de anotações .ipynb. Os metadados, como um painel do bloco de anotações, são preservados. Os administradores podem controlar se as saídas podem ser confirmadas ou não.

Também pode:

• Crie novos blocos de anotações .ipynb.
• Converta blocos de anotações para o formato de arquivo .ipynb.
• Visualize diffs como Code diff (alterações de código em células) ou Raw diff (alterações de código em JSON, incluindo metadados).

Consulte Permitir confirmação da saída do bloco de anotações .ipynb.

Suporte para reload4j

21 de março de 2023

O Reload4j 1.2.19 está substituindo o log4j nas versões 10.4 e anteriores do Databricks Runtime.

Novos endereços IP para a região da Ásia Oriental

15 de março de 2023

O Azure Databricks adicionou um novo plano de controle dedicado para a eastasia região. Se você hospedar um espaço de trabalho do Azure Databricks em sua própria VNet (também conhecida como injeção de VNet) na região do Leste Asiático, provavelmente gerenciará o tráfego de rede para seu espaço de trabalho usando rotas personalizadas (UDR). Em caso afirmativo, você deve atualizar essas rotas usando os endereços IP e domínios adicionais listados em endereços IP e domínios para serviços e ativos do Azure Databricks.

Executar células SQL no bloco de anotações em paralelo

15 de março de 2023

Agora você pode executar células SQL em blocos de anotações do Azure Databricks em paralelo enquanto estiver conectado a um cluster interativo. Consulte Executar células SQL em paralelo.

Criar tarefas de trabalho usando o código Python armazenado em um repositório Git

14 de março de 2023

Agora você pode recuperar o código Python de um provedor Git quando adiciona uma tarefa Python a um trabalho do Azure Databricks, simplificando a integração de seus trabalhos com seus fluxos de trabalho de CI/CD. Consulte Usar o Git com trabalhos.

Databricks Terraform provedor atualizado para a versão 1.13.0

14 de março de 2023

A versão 1.13.0 adiciona um databricks_sql_alert recurso e muito mais. Para obter mais detalhes, consulte o changelog da versão 1.13.0.

Databricks Terraform provedor atualizado para a versão 1.12.0

9 de março de 2023

A versão 1.12.0 adiciona um databricks_model_serving recurso, substitui o schedule bloco dentro do databricks_sql_query recurso e muito mais. Para obter mais detalhes, consulte o changelog para a versão 1.12.0.

Console de administração do SQL e console de administração do espaço de trabalho combinados

9 de março de 2023

O console de administração do SQL foi combinado com as configurações gerais de administração para criar uma experiência unificada para usuários administradores. Todas as configurações de administração do SQL agora são acessadas no console de administração.

Modelo de Servir é GA

7 de março de 2023

O Model Serving, anteriormente Serverless Real-Time Inference, agora está disponível para o público em geral.

O Model Serving fornece um serviço altamente disponível e de baixa latência para a implantação de modelos. O serviço aumenta ou diminui automaticamente para atender às mudanças de demanda dentro do intervalo de simultaneidade escolhido. Consulte Modelo de serviço com o Azure Databricks.

A pesquisa automática de recursos é GA

7 de março de 2023

A pesquisa automática de recursos com o Model Serving agora está disponível para o público em geral. Para obter detalhes, consulte Pesquisa automática de recursos com o Databricks Model Serving.

Para novos espaços de trabalho que usam UDRs, o IP de armazenamento do Azure precisa de um UDR adicional

6 de março de 2023

Devido a alterações no armazenamento raiz DBFS para novos espaços de trabalho, os novos espaços de trabalho que usam injeção de VNet e definem rotas definidas pelo usuário (UDRs) usando endereços IP em vez das tags de serviço recomendadas devem adicionar um UDR do Azure adicional para cada VNet. Para configurar as duas UDRs, consulte Endereço IP de armazenamento raiz DBFS. Essa alteração não afeta os espaços de trabalho existentes.

O armazenamento raiz DBFS do Azure Databricks usa o Azure Data Lake Storage Gen2 para novos espaços de trabalho

6 de março de 2023

Os novos espaços de trabalho do Azure Databricks usam contas de armazenamento do Azure Data Lake Storage Gen2 para a raiz DBFS. Os espaços de trabalho existentes do Azure Databricks continuam a usar o armazenamento de Blob para a raiz DBFS. Consulte Introdução ao Azure Data Lake Storage Gen2.

Nova disponibilidade do Catalog Explorer

6 de março de 2023

Uma nova versão do Catalog Explorer agora está disponível em todos os espaços de trabalho que usam uma versão suportada do Databricks Runtime 7.3 ou posterior.

Exibir consultas frequentes e usuários de uma tabela usando a guia Informações

6 de março de 2023

Agora você pode usar a guia Insights no Catalog Explorer para exibir as consultas e os usuários mais frequentes de qualquer tabela registrada no Unity Catalog. Você deve ter o SELECT privilégio em uma tabela para ver esses dados e só vê consultas que tem permissão para exibir. Consulte Ver consultas frequentes e utilizadores de uma tabela.

A pesquisa de correspondência exata está disponível na pesquisa global

3 de março de 2023

Agora você pode pesquisar frases exatas usando aspas na pesquisa global. Consulte Pesquisar objetos de espaço de trabalho.

Exibir informações de linhagem para seus trabalhos do Azure Databricks

3 de março de 2023

Se o Catálogo Unity estiver habilitado em seu espaço de trabalho, você poderá exibir informações de linhagem para seus trabalhos na interface do usuário de Trabalhos do Azure Databricks, incluindo tabelas upstream das quais o trabalho lê e tabelas downstream nas quais o trabalho grava. Consulte Exibir informações de linhagem para um trabalho.

Databricks Runtime 12.2 LTS e Databricks Runtime 12.2 LTS ML são GA

2 de março de 2023

Databricks Runtime 12.2 LTS e Databricks Runtime 12.2 LTS ML estão agora disponíveis para o público em geral.

Consulte Databricks Runtime 12.2 LTS e Databricks Runtime 12.2 LTS para Machine Learning.

Os ficheiros da área de trabalho estão agora em Pré-visualização Pública

6 de março de 2023

Agora você pode trabalhar com arquivos que não sejam de bloco de anotações no Azure Databricks. Os arquivos de espaços de trabalho são habilitados por padrão em todos os espaços de trabalho. Consulte O que são arquivos de espaço de trabalho?.