Maio de 2023

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em maio de 2023.

Criar ou modificar a UI table para suportar uploads de arquivos Avro, Parquet e de texto.

29 de maio de 2023

O Criar ou modificar table interface do usuário agora oferece suporte aos seguintes tipos de arquivo:

• Avro (.avro)
• Parquet (.parquet)
• Texto (.txt)

Para obter mais informações, consulte Criar ou modificar um table através do upload de ficheiro.

Use a interface de adicionar dados para carregar dados utilizando as localizações externas do Unity Catalog (Visualização pública)

29 de maio de 2023

Agora pode usar a interface do utilizador para adicionar dados e carregar informações de um caminho de armazenamento de objetos na nuvem que está definido como uma localização externa do Unity Catalog. Para obter mais informações, consulte Carregar dados usando um local externo do Unity Catalog.

Executar blocos de anotações Databricks em armazéns SQL (Visualização Pública)

31 de maio de 2023

Agora você pode executar blocos de anotações Databricks em armazéns SQL. Os armazéns SQL são otimizados para análise SQL e oferecem melhor desempenho de preço para execução SQL em comparação com a computação multiuso. Para obter mais informações, consulte Usar um bloco de anotações com um SQL warehouse.

Impedir que a tecla Enter aceite a sugestão de preenchimento automático

26 de maio de 2023

Agora você pode impedir que a tecla Enter aceite sugestões de preenchimento automático no editor SQL. Select Desativar enter para aceitar de preenchimento automático no menu kebab no editor SQL.

Nova região: China East 3

25 de maio de 2023

O Azure Databricks agora está disponível na região do Azure China Leste 3. Consulte Regiões do Azure Databricks.

Suporte para tipos de VM de computação confidencial do Azure (Visualização Pública)

25 de maio de 2023

O Azure Databricks agora oferece suporte ao uso de tipos de VM de computação confidencial do Azure ao criar clusters. A computação confidencial do Azure ajuda a proteger os dados em uso, impedindo que o provedor de nuvem having acesso a dados confidenciais. Consulte VMs de computação confidenciais do Azure.

Databricks Terraform provedor atualizado para a versão 1.17.0

22 de maio de 2023

O provedor Databricks Terraform 1.17.0 remove o databricks_cluster suporte para a liberação de binários de 32 bits, adiciona mais informações sobre o impacto do uso de uma política de cluster no recurso e muito mais. Para obter mais detalhes, consulte o changelog da versão 1.17.0.

A interface do usuário de upload de dados suporta novos tipos de dados column

19 de maio de 2023

A interface de utilizador de carregamento de dados agora suporta os seguintes tipos de dados column:

• STRUCT
• ARRAY
• DECIMAL(P,S)

Para obter mais informações, consulte Criar ou modificar um table usando o upload de arquivo.

Vincular o Unity Catalogcatalogs a espaços de trabalho específicos

17 de maio de 2023

Agora você pode acessar limitcatalog a espaços de trabalho específicos na sua conta, também conhecidos como vinculação a espaços de trabalhocatalog. Esse recurso é especialmente útil se você usar espaços de trabalho para isolar o acesso aos dados do usuário, por exemplo, se tiver espaços de trabalho de produção e desenvolvimento separados ou um espaço de trabalho dedicado para lidar com dados confidenciais.

Para obter mais informações, consulte Limitcatalog acesso a espaços de trabalho específicos.

Todos os usuários podem se conectar ao Fivetran usando o Partner Connect (Visualização pública)

17 de maio de 2023

A função de usuário administrador do espaço de trabalho não é mais necessária para se conectar ao Fivetran usando o Partner Connect. Para obter mais informações, consulte Conectar-se ao Fivetran usando o Partner Connect.

Databricks Terraform provedor atualizado para a versão 1.16.1

16 de maio de 2023

O provedor Databricks Terraform 1.16.1 adiciona documentação para o recurso databricks_service_principal_secret e integração do Unity Catalog no recurso databricks_pipeline, atualiza a documentação para o recurso databricks_secret_scope e muito mais. Para obter mais detalhes, consulte o changelog para a versão 1.16.1.

Driver JDBC Databricks 2.6.33

15 de maio de 2023

Lançamos a versão 2.6.33 do driver JDBC Databricks (download). Esta versão adiciona APIs de Chave Primária e Chave Estrangeira ao se conectar a um servidor que tenha Unity Catalog habilitado.

O Partner Connect suporta Alation

15 a 22 de maio de 2023

Agora você pode conectar seu espaço de trabalho do Azure Databricks ao Alation usando o Partner Connect. Para obter mais informações, consulte Conectar o Azure Databricks ao Alation.

Novo tema padrão para editor

12 de maio de 2023

Com base nos comentários dos clientes, o esquema de cores padrão no editor foi atualizado para melhor legibilidade.

Databricks Terraform provedor atualizado para a versão 1.16.0

12 de maio de 2023

Databricks Terraform provider 1.16.0 adiciona um databricks_workspace_file recurso, adiciona um notification_settings bloco ao databricks_job recurso e muito mais. Para obter mais detalhes, consulte o changelog para a versão 1.16.0.

O suporte do Unity Catalog para identidades gerenciadas do Azure agora é GA

11 de maio de 2023

A capacidade de usar identidades gerenciadas do Azure para acessar contêineres de armazenamento em nome de usuários do Unity Catalog agora está disponível em geral. As identidades gerenciadas do Azure fornecem vantagens significativas sobre as entidades de serviço para esse caso de uso. Consulte Usar identidades geridas do Azure no Unity Catalog para aceder ao armazenamento.

Databricks Runtime 13.1 (Beta)

10 de maio de 2023

O Databricks Runtime 13.1 e o Databricks Runtime 13.1 ML já estão disponíveis como versões Beta.

Consulte Databricks Runtime 13.1 (EoS) e Databricks Runtime 13.1 para Machine Learning (EoS).

Executar consultas SQL baseadas em arquivo em um fluxo de trabalho do Azure Databricks

9 de maio de 2023

Agora você pode recuperar consultas SQL de um provedor Git ao adicionar uma tarefa SQL a um trabalho do Azure Databricks. Consulte Usar o Git com trabalhos.

Databricks Terraform provedor atualizado para a versão 1.15.0

5 de maio de 2023

A versão 1.15.0 adiciona um recurso experimental databricks_sql_table , adiciona suporte para executar databricks_cluster scripts init a partir de arquivos de espaço de trabalho, adiciona permissões ausentes ao databricks_grants, e muito mais. Para obter mais detalhes, consulte o changelog da versão 1.15.0.

As regiões do Azure China agora oferecem suporte ao Unity Catalog

5 de maio de 2023

As regiões China Leste 2, China Norte 2 e China Norte 3 agora apoiam a Unidade Catalog.

Apelidos de conta agora disponíveis no console da conta

5 de maio de 2023

Os administradores de conta agora podem set apelidos de conta para suas contas do Azure Databricks. Depois de atribuir uma alcunha à sua conta, o nome é apresentado na parte superior da consola da conta e junto ao ID da conta. Para obter mais informações, consulte Adicionar um apelido de conta.

Compartilhar blocos de anotações usando o Delta Sharing

4 de maio de 2023

Agora você pode usar o Delta Sharing para compartilhar arquivos de bloco de anotações com segurança usando o fluxo de compartilhamento Databricks para Databricks.

O partilhar de cadernos empodera os utilizadores a colaborar entre metastores e diferentes contas e permite a providers demonstrar casos de uso e visualizações para os dados que partilham.

Consulte Adicionar ficheiros de notas à partilha (para providers) e Ler notas partilhadas (para recipients).

O Azure Databricks não cria mais um SQL warehouse inicial sem servidor

3 a 12 de maio de 2023

O Azure Databricks não cria mais um SQL warehouse inicial sem servidor. Para criar o seu próprio, consulte Criar um armazém SQL.

Na API do SQL Warehouses, habilitar a computação sem servidor agora deve ser explícito

3 a 12 de maio de 2023

Houve uma pequena alteração na API do SQL Warehouses ao criar um SQL warehouse.

Para o campo enable_serverless_compute, anteriormente o padrão era true se os pontos de extremidade SQL sem servidor estivessem habilitados para o espaço de trabalho. O padrão agora false é para a maioria dos espaços de trabalho. No entanto, se esse espaço de trabalho usou a API dos Armazéns de Dados SQL para criar um armazém de dados entre 1 de novembro de 2022 e 19 de maio de 2023 e se encaixa nos requisitos de armazém SQL sem servidor, incluindo a sua região , a configuração padrão permanece set para true.

Para evitar ambiguidades, especialmente para organizações com muitos espaços de trabalho, o Databricks recomenda que você sempre set explicitamente o campo enable_serverless_compute.

Alterações nas configurações do espaço de trabalho para armazéns SQL sem servidor

3 a 12 de maio de 2023

Para contas que têm a computação sem servidor habilitada, os espaços de trabalho agora estão habilitados para recursos sem servidor por padrão. Como parte dessa alteração, a configuração no nível do espaço de trabalho para habilitar ou desabilitar armazéns SQL sem servidor foi removida da interface do usuário de configurações do espaço de trabalho.

Alterações nas configurações de computação sem servidor para contas e espaços de trabalho

3 a 12 de maio de 2023

Todos os espaços de trabalho agora estão habilitados para SQL warehouses sem servidor se a região oferecer suporte a isso.

O Azure Databricks notifica cada administrador de espaço de trabalho uma vez na interface do usuário SQL do Databricks para cada espaço de trabalho.

Para espaços de trabalho recém-habilitados para suportar armazéns SQL sem servidor, cada espaço de trabalho deve atender aos requisitos e, e pode exigir uma update no firewall de Armazenamento do Azure de cada espaço de trabalho.

Databricks SQL Serverless é GA

3 a 12 de maio de 2023

Databricks SQL Serverless agora está disponível em geral em regiões com suporte. Os armazéns SQL sem servidor fornecem computação instantânea, gerenciamento mínimo e otimização de custos para consultas SQL. Crie armazéns SQL sem servidor ou converta armazéns SQL profissionais ou clássicos em serverless.

Atualizar um espaço de trabalho existente com conectividade de cluster segura ou Azure Private Link (Visualização Pública)

3 de maio de 2023

Você pode habilitar a conectividade de cluster seguro (SCC) em um espaço de trabalho existente para fazer com que sua rede virtual não tenha portas abertas e os nós de cluster do Databricks Runtime não tenham endereços IP públicos. Esse recurso é configurado em modelos do Azure usando o nome No Public IP (enableNoPublicIp).

Você pode habilitar ou desabilitar o Azure Private Link em um espaço de trabalho existente para conectividade privada entre usuários e seus espaços de trabalho Databricks e também entre recursos de computação e o plano de controle da infraestrutura do Azure Databricks.

Ambas as atualizações exigem que o espaço de trabalho use a injeção de VNet e o nível de preço Premium.

Descontinuação de scripts de inicialização com escopo de cluster no DBFS

2 de maio de 2023

Os scripts de inicialização com escopo de cluster no DBFS foram preteridos. Em vez disso, eles devem ser armazenados como arquivos de espaço de trabalho. Consulte Armazenar scripts de inicialização em arquivos de espaço de trabalho.

Navegação unificada (Pré-visualização Pública)

1 de maio de 2023

A nova experiência de navegação unificada está na Pré-visualização Pública. A navegação unificada reduz os cliques e as opções de contexto necessárias para concluir tarefas em todas as áreas do produto. Para obter mais informações, consulte Navegar no espaço de trabalho.