Abril de 2023

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em abril de 2023.

Databricks Marketplace (Public Preview): um mercado aberto para dados, análises e IA

27 de abril de 2023

Agora você pode usar o Databricks Marketplace para descobrir, acessar e implantar centenas de produtos de dados em seus fluxos de trabalho de IA e análise. O Databricks Marketplace aproveita o Delta Sharing para fornecer compartilhamento seguro e contínuo de produtos de dados gratuitos e comerciais em qualquer nuvem ou região. Consulte O que é o Databricks Marketplace?.

Configurar o formatador Python

25 de abril de 2023

Para arquivos e blocos de anotações no Databricks Repos, agora você pode configurar o formatador Python com base em uma especificação Black. Consulte Biblioteca de formatadores pretos do Python.

Os arquivos do espaço de trabalho são GA

24 de abril de 2023

Agora você pode trabalhar com arquivos que não sejam de bloco de anotações no Azure Databricks. Os arquivos de espaços de trabalho são habilitados por padrão em todos os espaços de trabalho. Consulte O que são arquivos de espaço de trabalho?.

Os scripts de inicialização com escopo de cluster agora podem ser armazenados em arquivos de espaço de trabalho

24 de abril de 2023

Agora você pode armazenar scripts de inicialização com escopo de cluster em arquivos de espaço de trabalho, independentemente da versão do Databricks Runtime usada pela computação. O Databricks recomenda armazenar todos os scripts de inicialização com escopo de cluster em arquivos de espaço de trabalho. Consulte Armazenar scripts de inicialização em arquivos de espaço de trabalho.

Criar um escopo secreto apoiado pelo Cofre de Chaves do Azure com uma entidade de serviço

19 de abril de 2023

Agora você pode criar um escopo secreto apoiado pelo Cofre de Chaves do Azure usando uma entidade de serviço. Consulte Gerenciar escopos secretos

Novos privilégios de compartilhamento delta permitem a delegação de tarefas de gerenciamento de compartilhamento, destinatário e provedor

18 de abril de 2023

Os novos privilégios USE SHARE, USE RECIPIENT, USE PROVIDERe SET SHARE PERMISSION permitem a delegação de tarefas de gerenciamento de compartilhamento, destinatário e provedor que, de outra forma, exigiriam a função de administrador do metastore ou a propriedade do objeto. Esses privilégios permitem limitar o número de usuários que têm a poderosa função de administrador do metastore. Consulte Tipos de privilégios que se aplicam apenas ao Delta Sharing ou ao Databricks Marketplace.

Databricks Connect V2 (Pré-visualização Pública)

17 de abril de 2023

Começando com o Databricks Runtime 13.0, o Databricks Connect se baseia no Spark Connect, permitindo que os desenvolvedores usem o poder do Databricks e seu IDE de escolha para desenvolver e depurar interativamente seu código em qualquer espaço de trabalho do Azure Databricks.

Nova interface do usuário de métricas de cluster

14 de abril de 2023

Os clusters que usam o Databricks Runtime 13.0 e superior têm acesso à nova interface do usuário de métricas de cluster. Esse recurso substitui o Ganglia como a ferramenta de monitoramento de métricas de cluster. A nova interface do usuário de métricas de cluster inclui uma exibição ao vivo do desempenho do cluster e exibições históricas personalizadas minuto a minuto. Para obter mais informações, consulte Exibir métricas de computação.

Databricks Runtime 13.0 é GA

14 de abril de 2023

Databricks Runtime 13.0 e Databricks Runtime 13.0 ML agora estão disponíveis para o público em geral.

Consulte Databricks Runtime 13.0 (EoS) e Databricks Runtime 13.0 para Machine Learning (EoS).

Controlar o acesso ao console da conta por intervalos de endereços IP (Visualização pública)

17 de abril de 2023

O console de conta do Azure Databricks agora dá suporte a listas de acesso IP para controlar o acesso ao console de conta por intervalos de endereços IP, semelhante ao suporte existente para listas de acesso IP para espaços de trabalho. Use uma interface do usuário do console de conta ou uma API REST para gerenciar o acesso. Consulte Configurar listas de acesso IP para o console da conta.

Quando o Azure Databricks bloqueia uma solicitação, o Azure Databricks gera um novo evento nos logs de auditoria no nível da conta com serviço accounts e evento accountIpAclsValidationFailed. Consulte Referência do log de diagnóstico.

Databricks Terraform provedor atualizado para a versão 1.14.3

14 de abril de 2023

A versão 1.14.3 adiciona suporte ao exportador para databricks_sql_alert, adiciona suporte para notificações no databricks_pipeline, e muito mais. Para obter mais detalhes, consulte o changelog para a versão 1.14.3.

Entradas de log de diagnóstico para configurações de administrador alteradas para espaço de trabalho

14 de abril de 2023

Agora há eventos de log de auditoria para alterações em algumas configurações de administrador nos logs de diagnóstico do espaço de trabalho. Dentro do accounts serviço, os novos nomes de ação do evento são deleteSetting e setSetting. Consulte Referência do log de diagnóstico. Nem todas as configurações geram eventos auditáveis.

Para a chave inicial gerenciada pelo cliente para discos gerenciados, o Azure Databricks agora encerra os recursos de computação

10 de abril de 2023

Anteriormente, adicionar inicialmente uma chave gerenciada pelo cliente para discos gerenciados reinicia todos os recursos de computação em execução (clusters, pools). Os recursos de computação agora são encerrados e não reiniciados, o que significa que você deve iniciá-los manualmente após a conclusão da atualização. O Azure Databricks impede que os clusters sejam executados ou iniciados ao adicionar uma chave. Planeje o tempo de inatividade e encerre todos os recursos de computação antes de adicionar a chave para evitar o encerramento automático, o que pode causar problemas para alguns tipos de cargas de trabalho.

Para um espaço de trabalho que já tenha uma chave gerenciada pelo cliente para discos gerenciados, se você girar a chave, não precisará encerrar os recursos de computação.

Databricks Terraform provedor atualizado para as versões 1.14.1 e 1.14.2

4 a 6 de abril de 2023

A versão 1.14.1 exclui funções em chamadas de lista de API SCIM para reduzir a carga no serviço SCIM Databricks e muito mais. A versão 1.14.2 adiciona uma tarefa de arquivo SQL ao databricks_job recurso, corrige vários bugs e muito mais. Para obter mais detalhes, consulte o changelog para as versões 1.14.1 e 1.14.2.

Configurações de usuário SQL combinadas e configurações gerais do usuário

3 a 5 de abril de 2023

As configurações de usuário SQL foram combinadas com as configurações gerais do usuário do espaço de trabalho para criar uma experiência unificada para os usuários do espaço de trabalho. Todas as configurações de usuário SQL agora são acessadas em Configurações:

• A guia Senha agora é a guia Conta & Senha .
• A guia Trechos de consulta é visível para os usuários com o direito SQL.

Visualizações de blocos de anotações herdadas preteridas

4 de abril de 2023

A criação e edição de visualizações de blocos de anotações legadas foram preteridas e serão removidas do produto em breve. As visualizações herdadas existentes continuarão a ser renderizadas. Os detalhes aparecerão nas notificações dentro do produto.

Criar ou modificar tabela a partir da página de carregamento de ficheiros suporta carregamentos de ficheiros JSON

3 de abril de 2023

A página Criar ou modificar tabela a partir do carregamento de ficheiros suporta agora carregamentos de ficheiros JSON. Para obter mais informações, consulte Criar ou modificar uma tabela usando o upload de arquivo.