junho de 2024

Esses recursos e melhorias na plataforma Azure Databricks foram lançados em junho de 2024.

Blocos de notas - realce de sintaxe fora de ordem

16 de junho de 2024

O destaque de erro de sintaxe Python em blocos de anotações agora avisa os usuários quando as variáveis são usadas antes de serem declaradas e sugere uma correção.

O Assistente de Blocos de Notas diagnostica automaticamente erros

16 de junho de 2024

O Assistente Databricks agora diagnostica automaticamente erros de código em blocos de anotações. Isso usa IA generativa para analisar seu código e a mensagem de erro para sugerir uma correção diretamente em seu notebook. Para saber mais, consulte Usar o Assistente Databricks

Melhorias no Catalog Explorer

Junho 28, 2024

As seguintes melhorias foram feitas no Catalog Explorer:

• Adicionada uma seção de acesso rápido que exibe objetos recentes do Catálogo Unity, objetos favoritos do Catálogo Unity e catálogos e esquemas para navegação.

• Removida a barra superior e a estrutura do acordeão e movidos os pontos de entrada para o seguinte para um menu de ícones de engrenagem na barra lateral com o navegador de esquema para uma navegação mais simples:

  • Seleção de computação
  • Compartilhamento Delta
  • Credenciais de armazenamento
  • Localizações externas
  • Ligações
  • Procurar DBFS

  Você também pode acessar o Compartilhamento Delta e dados externos na parte superior do Gerenciador de Catálogos, acima da seção Acesso rápido .

Sirva vários modelos externos a partir de um único modelo de ponto de extremidade de serviço

Junho 27, 2024

O Mosaic AI Model Serving agora suporta o atendimento de vários modelos externos por modelo que serve o ponto de extremidade. Consulte Servir vários modelos externos a um ponto de extremidade.

Databricks Assistant agora é GA

Junho 27, 2024

Databricks Assistant é lançado como GA. Os recursos do assistente incluem:

• Gerar, depurar, otimizar e explicar código.
• Crie visualizações a partir de dados. Consulte Criar visualizações com o Databricks Assistant.
• Depurar trabalhos (recurso de visualização pública).
• Codifique e edite consultas SQL.
• Encontre ajuda relevante na documentação e na base de dados de conhecimento do Azure Databricks.

Para obter mais informações, consulte O que é o Databricks Assistant?.

Databricks Assistant agora dá títulos a threads

Junho 27, 2024

Para navegar mais facilmente pelos threads de ajuda, o Assistente Databricks intitula os threads com base no contexto do prompt.

Consulte Usar o Assistente Databricks.

Gerenciador de ambiente de notebooks sem servidor

Junho 27, 2024

Agora você pode instalar dependências Python para blocos de anotações sem servidor usando o painel lateral Ambiente, que fornece um único local para editar, visualizar e exportar os requisitos de biblioteca para um bloco de anotações. Consulte Instalar dependências do bloco de anotações.

Console de depuração de notebooks

Junho 27, 2024

Com o console de depuração do bloco de anotações, agora você pode inspecionar valores de variáveis em tempo real e executar trechos de código durante uma sessão de depuração do bloco de anotações.

Adicione rapidamente uma agenda periódica a um fluxo de trabalho do Azure Databricks

Junho 28, 2024

Agora você pode adicionar uma agenda simples a um fluxo de trabalho do Azure Databricks especificando apenas um intervalo e uma unidade de tempo (por exemplo, execute o fluxo de trabalho a cada 4 horas). Este novo tipo de agenda complementa o tipo de agenda avançada existente, permitindo que você adicione uma agenda com apenas alguns cliques. Consulte Executar trabalhos em uma agenda.

Databricks Runtime 15.3 é GA

24 de junho de 2024

O Databricks Runtime 15.3 e o Databricks Runtime 15.3 ML estão agora disponíveis para o público em geral.

Consulte Databricks Runtime 15.3 e Databricks Runtime 15.3 para Machine Learning.

Azure Geographies é GA

24 de junho de 2024

O Azure Geographies agora está disponível para o público em geral. O Azure Geographies gerencia a residência de dados ao processar conteúdo do cliente para alguns recursos de IA.

Para obter mais informações, consulte Databricks Designated Services.

Nova interface do usuário de criação de catálogo aprimorada

18 de junho de 2024

A nova interface do usuário de criação de catálogo leva você passo a passo durante todo o processo de criação e configuração de um catálogo, fornecendo prompts úteis e separando as configurações necessárias das opcionais. Você pode usar a mesma interface do usuário para criar catálogos padrão, compartilhados e estrangeiros.

Consulte Criar catálogos.

Atualizações para sub-redes em configurações de conectividade de rede

18 de junho de 2024

O Databricks está atualizando as sub-redes em configurações de conectividade de rede (NCCs) em todas as regiões. As novas IDs de sub-rede são adicionadas automaticamente às regras de firewall existentes do Armazenamento do Azure que permitem o acesso a partir das IDs de sub-rede existentes para garantir o acesso ininterrupto a partir do Azure Databricks.

Se você usar a API de Configurações de Conectividade de Rede para obter as IDs de sub-rede e adicioná-las às regras de rede de armazenamento para novas contas de Armazenamento do Azure, não ocorrerá interrupções. No entanto, se codificar o conjunto existente de IDs de sub-rede, poderá enfrentar interrupções. A Databricks recomenda o uso da API para obter as informações mais recentes. Consulte a API de configurações de conectividade de rede.

Você pode enfrentar tempo de inatividade para a API de Configurações de Conectividade de Rede enquanto esta atualização ocorre entre 20:00 e 12:00 PDT em 20 de junho de 2024.

As tabelas do sistema de cobrança são habilitadas por padrão

18 de junho de 2024

O system.billing esquema agora está habilitado por padrão em todos os espaços de trabalho do Catálogo Unity. Consulte Referência da tabela do sistema de uso faturável.

Lakehouse Monitoring é GA

13 de junho de 2024

Databricks Lakehouse Monitoring está agora disponível para o público em geral.

O compartilhamento de volume usando o Delta Sharing agora está disponível para o público em geral

13 de junho de 2024

O suporte do Delta Sharing para compartilhar dados não tabulares como um volume agora é GA. Você pode compartilhar volumes entre espaços de trabalho Databricks em diferentes metastores do Unity Catalog (incluindo espaços de trabalho em diferentes contas Databricks e nuvens diferentes).

Os volumes são objetos do Unity Catalog que representam um volume lógico de armazenamento em um local de armazenamento de objetos na nuvem. Destinam-se principalmente a fornecer governança sobre ativos de dados não tabulares. O Delta Sharing on Databricks fornece uma integração nativa com o Unity Catalog que permite gerenciar, governar, auditar e rastrear o uso de dados de volumes compartilhados.

Consulte Adicionar volumes a uma partilha.

As chaves gerenciadas pelo cliente (CMK) para a Pesquisa Vetorial Databricks agora são GA

Junho 12, 2024

As chaves gerenciadas pelo cliente (CMK) em pontos de extremidade de pesquisa vetorial agora estão disponíveis ao público em geral.

Mosaic AI Agent Framework (Visualização pública)

Junho 12, 2024

O Mosaic AI Agent Framework é um conjunto de ferramentas no Databricks projetado para ajudar os desenvolvedores a criar, implantar e avaliar aplicativos de geração aumentada de recuperação (RAG) com qualidade de produção. O Agent Framework permite que você crie ou otimize aplicativos LLM em uma única plataforma usando seus próprios dados.

O Agent Framework inclui os seguintes recursos:

• Crie e registre agentes e cadeias.
• Parametrize agentes e cadeias para experimentar e iterar rapidamente.
• Métricas integradas para comparar execuções na recuperação de documentos relevantes, precisão de resposta e custo e latência.
• Juízes LLM personalizados para recuperação e precisão de resposta.
• Implante aplicativos de IA com registro automatizado de solicitações e respostas.
• Aplicativo de revisão integrado para obter feedback dos usuários.
• Avaliação de agentes para avaliar a qualidade, latência e custo de aplicações generativas de IA.
• MLflow Tracing para analisar e comparar rastreamentos na execução de código.

Para obter detalhes, consulte RAG (Retrieval Augmented Generation) no Azure Databricks.

A otimização preditiva agora é GA

Junho 11, 2024

A otimização preditiva para tabelas gerenciadas do Unity Catalog agora está disponível para o público em geral. A otimização preditiva agora é executada OPTIMIZE em tabelas com clustering líquido habilitado para aplicar clustering. Consulte Otimização preditiva para tabelas gerenciadas do Unity Catalog.

A otimização de rotas está disponível para servir pontos finais

Junho 11, 2024

Agora você pode criar pontos de extremidade de serviço otimizados de rota para seus fluxos de trabalho de serviço de modelo ou de serviço de recursos. Consulte Configurar otimização de rota em pontos de extremidade de serviço.

Suporte de serviço de modelo com um firewall de conta de armazenamento de espaço de trabalho

Junho 11, 2024

O Serviço de Modelo agora é suportado com suporte de firewall para a conta de armazenamento do espaço de trabalho. Consulte Ativar suporte de firewall para sua conta de armazenamento de espaço de trabalho.

O mapeamento de colunas agora é GA

10 de junho de 2024

O mapeamento da coluna Delta Lake agora está disponível para o público em geral. Agora você pode usar DROP FEATURE para desativar o mapeamento de colunas e o protocolo de tabela de downgrade. Consulte Renomear e soltar colunas com o mapeamento de colunas Delta Lake.

As tabelas do sistema de fluxo de trabalho já estão disponíveis (Visualização pública)

10 de junho de 2024

O system.lakeflow esquema contém quatro novas tabelas que você pode usar para monitorar trabalhos em sua conta. Consulte Referência da tabela do sistema de trabalhos.

Se não tiver acesso a estas tabelas do sistema, certifique-se de que ativou o system.lakeflow esquema na sua conta. Consulte Ativar esquemas de tabela do sistema.

A chamada de função é Visualização Pública

10 de junho de 2024

A chamada de função está agora disponível na Pré-visualização Pública. Essa funcionalidade está disponível usando modelos de pagamento por token das APIs do Modelo de Fundação: DBRX Instruct e Meta-Llama-3-70B-Instruct. Consulte Chamada de função no Azure Databricks.

Consultar um índice de pesquisa vetorial usando vector_search()

10 de junho de 2024

AI Functions agora suporta vector_search() o que permite que você consulte um índice Mosaic AI Vetor Search usando SQL. Consulte vetor_search função.

O Mosaic AI Vetor Search agora suporta pesquisa híbrida

7 de junho de 2024

O Mosaic AI Vetor Search agora suporta pesquisa híbrida de semelhança de palavras-chave, que combina pesquisa de incorporação baseada em vetor com técnicas tradicionais de pesquisa baseadas em palavras-chave. Essa abordagem corresponde a palavras exatas na consulta e, ao mesmo tempo, usa uma pesquisa de semelhança baseada em vetor para capturar as relações semânticas e o contexto da consulta. Ao integrar estas duas técnicas, a pesquisa híbrida de semelhança de palavras-chave recupera documentos que contêm não só as palavras-chave exatas, mas também aquelas que são conceptualmente semelhantes, fornecendo resultados de pesquisa mais abrangentes e relevantes. Para obter detalhes, consulte Mosaic AI Vetor Search.

GTE agora é suportado no Model Serving

7 de junho de 2024

O Mosaic AI Model Serving agora suporta General Text Embedding (GTE), um modelo de incorporação de texto que pode mapear texto para um vetor de incorporação. O GTE é suportado como parte das APIs do Modelo de Fundação e está disponível em regiões de ponto de extremidade de serviço de pagamento por token. Consulte Usar APIs de modelo básico.

Assistente Databricks: Experiência de consultas de threads e consultas habilitada por padrão

6 de junho de 2024

O Databricks Assistant (Visualização Pública) agora rastreia threads de consulta e histórico em todos os contextos do editor em sua experiência de sessão por padrão. Você pode gerenciar a ativação para todos os espaços de trabalho em uma conta ou espaços de trabalho individuais.

Para obter mais informações, consulte O que é o Databricks Assistant?

Editor de Markdown de bloco de notas melhorado

5 de junho de 2024

Agora você pode ver uma visualização ao vivo de suas células de Markdown em blocos de anotações e acessar uma barra de ferramentas para elementos comuns de Markdown, como cabeçalhos, listas e links. Passe mais tempo comunicando suas ideias e menos tempo lembrando a sintaxe.

Aceda rapidamente a tabelas do Explorador de Catálogos a partir de blocos de notas

5 de junho de 2024

Agora você pode acessar facilmente as tabelas do Catalog Explorer diretamente dos blocos de anotações. Passe o cursor sobre o nome de uma tabela em uma célula do bloco de anotações para obter um link para a página do explorador de catálogos para ver detalhes como colunas, permissões e muito mais.

Databricks driver ODBC 2.8.2

4 de junho de 2024

Databricks ODBC Driver (download) versão 2.8.2 já está disponível. Esta versão adiciona os seguintes novos recursos e aprimoramentos:

• Os clientes agora podem usar SQL PUTestendido , GETe REMOVE comandos para ingerir e gerenciar grandes conjuntos de dados em volumes do Catálogo Unity.
• Os valores de configuração OAuth padrão agora são atualizados e estão em conformidade. As opções de configuração atualizadas incluem o ponto de extremidade de autorização, a ID do cliente OAuth, o escopo de usuário para máquina do OAuth e o escopo de máquina para máquina do OAuth. Para obter mais detalhes, consulte as notas de versão.
• Bibliotecas de terceiros foram atualizadas, incluindo expat 2.6.2 (anteriormente 2.6.0) e libCURL 8.7.1 (anteriormente 8.6.0).
• O driver agora aceita uma autoridade de certificação (CA) privada assinada se ela for adicionada ao armazenamento de certificados da CA raiz confiável do Windows.

Esta versão também corrige os seguintes problemas:

• O cliente retornou anteriormente um erro se o comprimento de um comentário de tabela excedeu MaxCommentLen. O comportamento padrão agora trunca o comentário da tabela para estar em conformidade com o limite especificado em MaxCommentLen.
• O cliente retornou anteriormente um erro ao emitir SQLCancel em determinadas circunstâncias.

A nova interface do usuário do Databricks Notebook agora está disponível para o público em geral

4 de junho de 2024

A nova interface do usuário do Databricks Notebooks oferece aos desenvolvedores uma experiência de criação simplificada e focada em dados. As principais funcionalidades incluem:

• UX moderna: desfrute de uma experiência de codificação simplificada com uma interface do usuário atualizada e outros recursos para aprimorar a organização do Notebook.
• Nova tabela de resultados: execute a exploração de dados sem código com recursos de pesquisa e filtragem diretamente nas saídas de resultados.