Notas de versão da plataforma Azure Databricks
-
dezembro 2024
- Atribuir recursos de computação a grupos (visualização pública)
- Delegar a capacidade de criar uma credencial de armazenamento no Unity Catalog a um principal de serviço
-
Unity Catalog
MANAGE
privilege (Visualização pública) - Meta Llama 3.3 agora está disponível para cargas de trabalho de largura de banda provisionadas
- Visualizar métricas de carga de trabalho de streaming para as suas execuções de tarefas (Visualização pública)
- Visualizar métricas de trabalho em fluxo contínuo nas atualizações do pipeline Delta Live Tables (Pré-visualização pública)
- Lakehouse Federation suporta Oracle (Public Preview)
- Databricks Runtime 16.1 (Beta)
- Gerencie conexões de rede de saída sem servidor com controle de saída sem servidor
- A tabela de eventos de acesso à rede do sistema já está disponível (Visualização Pública)
- Monitorizar e revogar tokens de acesso pessoal na sua conta (Pré-visualização Pública)
- Unity Catalog pode federar-se a metastores do Hive
- Remova o armazenamento no nível de metastore para impor o isolamento de armazenamento no nível de catálogo
- Meta Llama 3.3 70B Instruct já está disponível no Model Serving
- bamboolib foi agora preterido
- Agilize a avaliação de agentes de IA usando conjuntos de avaliação sintéticos
- Melhorar o desempenho de leitura da tabela Databricks-to-Databricks Delta Sharing com compartilhamento de histórico (Visualização pública)
- Vida útil máxima do token de acesso pessoal agora 730 dias (dois anos)
- Treino do Modelo AI Mosaic - previsão em ambiente sem servidor (Pré-visualização pública)
- Adicione políticas de orçamento aos endpoints de modelo de serviço
-
Novembro de 2024
- Metadados adicionais para a dica de ferramenta de tabela em blocos de anotações
- A atualização automática do cluster e a interface do usuário aprimorada de segurança e conformidade estão geralmente disponíveis
- Suporte expandido para depurador Python em notebooks
- Experiência de terminal web melhorada
- Histórico de consultas e suporte de perfil de consulta para Delta Live Tables
- Rebranding do Mosaic AI Model Training
-
Reutilizar saídas SQL como
_sqldf
em células SQL subsequentes - Conectividade privada do suporte de computação sem servidor para recursos gerenciados pelo Azure
- Suporte de conectividade privada para trabalhos, notebooks e Delta Live Tables
- A tabela do sistema de armazéns já está disponível (Visualização pública)
- Partilha de vistas entre plataformas (Pré-visualização Pública)
- A pré-visualização pública das Salas Limpas não está disponível, com novas funcionalidades
- Databricks Runtime 16.0 é GA
- Mudança de rutura: O RStudio hospedado está em fim de vida útil
- Otimização preditiva habilitada para todas as novas contas do Azure Databricks
- Blocos de código somente leitura atualizados e unificados
- Aumento das recomendações de Correção Rápida
- Pagamento por token das APIs do Modelo de Base disponível em todas as regiões suportadas pelo Model Serving
- Acesso controlado pelo catálogo Unity a serviços de nuvem externos usando credenciais de serviço (Visualização pública)
- Controlos de conformidade do UK Cyber Essentials Plus
- Conectividade privada do suporte de computação sem servidor para serviço de modelo
- Termina o suporte da série Databricks Runtime 14.2
-
Outubro de 2024
- Habilite a atribuição de custos de controle de acesso refinado em computação de usuário único
- O Databricks Assistant ajuda a otimizar consultas SQL
- Fim do suporte da série Databricks Runtime 15.1
- Llama 2 70B Aposentadoria do modelo de bate-papo em APIs de modelo de fundação pay-per-token
- Permitir que um metastore seja atribuído automaticamente a novos espaços de trabalho
- Saídas estruturadas suportadas no Mosaic AI Model Serving (Visualização pública)
- O controle de acesso refinado na computação de um único usuário está geralmente disponível
- Funções de IA agora disponíveis nas regiões da UE
- Atribua o uso sem servidor com políticas de orçamento (Visualização pública)
- Computação sem servidor ativada automaticamente em contas qualificadas
- O Databricks Assistant Autocomplete já está disponível para o público em geral
- Os filtros nas tabelas de resultados do bloco de notas persistem agora
- Melhorias nos comentários em blocos de notas
- Databricks Runtime 16.0 (Beta)
- O Mosaic AI Model Serving agora suporta inferência em lote
- Crie dados seguros e aplicativos de IA para seus usuários com o Databricks Apps (Visualização pública)
-
Recarregamento mais confiável de módulos Python modificados com melhorias para
autoreload
- Simplificação do conector de ingestão do Salesforce
- Computação sem servidor agora disponível em regiões adicionais
-
Setembro de 2024
- Meta Llama 3.1 405B Instruir agora suportado na chamada de função Databricks
-
vector_search()
agora disponível para todos os clientes (Visualização pública) - Os modelos Meta Llama 3.2, 3B e 1B são suportados no Model Serving
- Os modelos Meta Llama 3.2, 3B e 1B são suportados no Foundation Model Fine-tuning
- Publicar no Power BI agora está disponível para o público em geral
-
Usar
@
para referenciar tabelas nos prompts do Assistente do Databricks - Prototipar e exportar agentes GenAI de chamada de ferramentas no AI Playground
-
Controle o acesso externo aos dados no Unity Catalog usando o novo
EXTERNAL USE SCHEMA
privilégio - Os modelos de incorporação GTE v1.5 (inglês) agora são suportados na taxa de transferência provisionada da API do Modelo de Base
- Databricks Assistant Quick Fix depura código embutido
- Criar orçamentos para monitorar os gastos da conta (Visualização pública)
- O ajuste fino do modelo de base já está disponível para todos os clientes (Visualização pública)
- AI Gateway agora é visualização pública
- Modelos Meta Llama 3.1 70B e 8B suportados no ajuste fino do modelo Foundation
- Suporte estendido a comentários gerados por IA
- Monitorar o uso de salas limpas na tabela de uso faturável
- A extensão Databricks para Visual Studio Code é GA
- A chamada de função agora é suportada na taxa de transferência provisionada de APIs do Modelo de Base
- As tabelas do sistema estão agora disponíveis para o público em geral
-
Agosto de 2024
- Monitorar o uso do objeto Unity Catalog em relação às cotas usando as novas APIs de Cotas de Recursos
- MPT 7B Instruir e MPT 30B Instruir aposentadorias de modelo
- AskSupport substituído pelo assistente do Azure Databricks
- Painel de gerenciamento de custos importável adicionado ao console da conta (Visualização pública)
- As tabelas do sistema Lakeflow são estendidas com colunas adicionais
- Destaques do erro de formatação de código Python
- Compartilhamento Delta: Mais recursos Delta Lake agora suportados pelos conectores Python e Power BI
- Delta Sharing adiciona suporte para TimestampNTZ
-
A tarefa Trabalhos
For each
do Azure Databricks é GA - Permissão do RBAC do Azure para administradores de espaço de trabalho
- Databricks Runtime 15.4 LTS é GA
- Preenchimento automático personalizado do notebook
- Configurar o modo de acesso padrão do espaço de trabalho para computação de trabalhos
- Novos comandos de barra para o Databricks Assistant
- A pesquisa de espaço de trabalho agora suporta volumes
- Modelos Meta Llama 3.1 405B suportados no Foundation Model Fine-tuning
- Driver JDBC Databricks 2.6.40
- Tokens de acesso pessoal Databricks revogados se não forem utilizados após 90 dias
- A API de clusters agora oferece suporte a atualizações parciais de configuração
- Envolver linhas em células do bloco de notas
- Especificar colunas a sincronizar para o Mosaic AI Vetor Search
- Os arquivos não podem mais ter nomes idênticos em pastas de espaço de trabalho
- Aplicação de política de computação agora disponível
- Foundation Model APIs, pay-per-token, agora é GA
- Colabore em projetos de dados de forma segura e privada usando o Databricks Clean Rooms (Visualização pública)
- O Mosaic AI Vetor Search agora é compatível com HIPAA
- Formatar colunas em blocos de notas e tabelas de resultados de consultas
- Filtros de linha e máscaras de coluna agora são GA, com melhorias
- Lakehouse Federation está geralmente disponível (GA)
-
Julho de 2024
- Maior limite para tarefas simultâneas
- Incorporar e arrastar e soltar imagens em blocos de anotações
- Paleta de comandos disponível em blocos de notas
-
Esquema do sistema de fluxo de trabalho renomeado para
lakeflow
- LakeFlow Connect (visualização pública fechada)
- O suporte para armazenamento Cloudflare R2 é GA
- Monitorar atividades do Databricks Assistant com tabelas do sistema (Visualização pública)
- O compartilhamento de esquemas usando o Delta Sharing agora é GA
-
O Mosaic AI Agent Framework está disponível em
northcentral
ecentralus
- O Databricks Assistant pode diagnosticar problemas com trabalhos (Visualização pública)
- Atualizações nos comportamentos de autenticação e compartilhamento de pastas Databricks Git
- Tempo limite de instalação da biblioteca de clusters
- Os endereços IP de saída do plano de computação devem ser adicionados a uma lista de permissões de IP do espaço de trabalho
- Suporte estendido à série Databricks Runtime 9.1
- O logon único (SSO) é suportado na Lakehouse Federation for SQL Server
- O compartilhamento de modelos usando o Delta Sharing agora está disponível para o público em geral
- Compartilhar comentários e restrições de chave primária usando o Compartilhamento Delta
- Novo driver JDBC (OSS) Databricks
- Databricks Runtime 15.4 LTS (Beta)
- Scala é GA na computação compartilhada do Unity Catalog
- A computação de usuário único suporta controle de acesso refinado, exibições materializadas e tabelas de streaming
- A tabela do sistema de linha do tempo do nó já está disponível (Visualização pública)
- Meta Llama 3.1 agora é suportado no Model Serving
- Blocos de notas: alternar títulos de células mais visíveis
-
/
em nomes de ativos do espaço de trabalho foi preterido - O Compartilhamento Delta permite compartilhar tabelas que usam clustering líquido
- A tabela do sistema de histórico de consultas já está disponível (Visualização pública)
- Os relatórios de verificação de vulnerabilidades agora são enviados por e-mail aos administradores
- Registro de metadados de partição para tabelas externas do Unity Catalog
- A computação sem servidor para fluxos de trabalho é GA
- A computação sem servidor para notebooks é GA
- O Databricks Connect for Python agora suporta computação sem servidor
- Filtrar saídas de dados usando prompts de linguagem natural
- Suporte a segredos de texto simples para modelos externos
-
Previsão de dados de séries cronológicas utilizando
ai_forecast()
- O suporte a tarefas de Arquivo SQL para arquivos com consultas SQL de várias instruções é GA
- A Lakehouse Federation oferece suporte ao Salesforce Data Cloud (visualização pública)
- Tabela do sistema Databricks Assistant agora disponível (Visualização pública)
- Conta SCIM API v2.1 (Visualização pública)
- Aumento da cota de recursos para tabelas por metastore do Unity Catalog
- O Databricks Assistant pode diagnosticar erros de notebook automaticamente
-
O suporte para a
:param
sintaxe com a tarefa de arquivo SQL é GA
-
junho de 2024
- Blocos de notas - realce de sintaxe fora de ordem
- O Assistente de Blocos de Notas diagnostica automaticamente erros
- Melhorias no Catalog Explorer
- Sirva vários modelos externos a partir de um único modelo de ponto de extremidade de serviço
- Databricks Assistant agora é GA
- Databricks Assistant agora dá títulos a threads
- Gerenciador de ambiente de notebooks sem servidor
- Console de depuração de notebooks
- Adicione rapidamente uma agenda periódica a um fluxo de trabalho do Azure Databricks
- Databricks Runtime 15.3 é GA
- Azure Geographies é GA
- Nova interface do usuário de criação de catálogo aprimorada
- Atualizações para sub-redes em configurações de conectividade de rede
- As tabelas do sistema de cobrança são habilitadas por padrão
- Lakehouse Monitoring é GA
- O compartilhamento de volume usando o Delta Sharing agora está disponível para o público em geral
- As chaves gerenciadas pelo cliente (CMK) para a Pesquisa Vetorial Databricks agora são GA
- Mosaic AI Agent Framework (Visualização pública)
- A otimização preditiva agora é GA
- A otimização de rotas está disponível para servir pontos finais
- Suporte de serviço de modelo com um firewall de conta de armazenamento de espaço de trabalho
- O mapeamento de colunas agora é GA
- As tabelas do sistema de fluxo de trabalho já estão disponíveis (Visualização pública)
- A chamada de função é Visualização Pública
-
Consultar um índice de pesquisa vetorial usando
vector_search()
- O Mosaic AI Vetor Search agora suporta pesquisa híbrida
- GTE agora é suportado no Model Serving
- Assistente Databricks: Experiência de consultas de threads e consultas habilitada por padrão
- Editor de Markdown de bloco de notas melhorado
- Aceda rapidamente a tabelas do Explorador de Catálogos a partir de blocos de notas
- Databricks driver ODBC 2.8.2
- A nova interface do usuário do Databricks Notebook agora está disponível para o público em geral
-
maio de 2024
- A configuração de firewall sem servidor agora suporta mais tipos de computação
- Termina o suporte da série Databricks Runtime 15.0
- Databricks Runtime 15.3 (Beta)
- A interface do usuário de métricas de computação agora está disponível em todas as versões do Databricks Runtime
- Pesquisa e filtragem melhoradas em tabelas de resultados do bloco de notas e do editor SQL
- Novo painel ajuda os provedores do Databricks Marketplace a monitorar o uso da listagem
-
Exibir consultas federadas geradas pelo sistema em
Query Profile
- Os endereços IP de saída do plano de computação devem ser adicionados a uma lista de permissões de IP do espaço de trabalho
- OAuth é apoiado na Lakehouse Federation for Snowflake
- Mover e excluir objetos de espaço de trabalho em massa do navegador de espaço de trabalho
- Os objetos do Catálogo Unity estão disponíveis em recentes e favoritos
- Novo conector dbt-databricks 1.8.0 adota arquitetura dbt desacoplado
- Novas APIs de configurações de conformidade e segurança (Visualização pública)
- Databricks Runtime 15.2 é GA
- Novo conector do Tableau para compartilhamento delta
- Novos exemplos de modelos de recomendação de aprendizagem profunda
- Vincular credenciais de armazenamento e locais externos a espaços de trabalho específicos (Visualização pública)
- As pastas Git são GA
- Modelos pré-treinados no Catálogo Unity (Visualização pública)
- Mosaic AI Vetor Search é GA
- Preenchimento automático do Databricks Assistant (Visualização pública)
- Suporte Meta Llama 3 no Foundation Model Training
- Novas alterações na interface do usuário da pasta Git
- Formação de Modelo de Fundação (Pré-visualização Pública)
- Permitir que os usuários copiem dados da tabela de resultados para a área de transferência
- Os valores da tag de atributo para objetos do Unity Catalog agora podem ter 1000 caracteres (Visualização pública)
- Nova página de Pré-visualizações
- Novos recursos para o Mosaic AI Vetor Search
- Os controles de passagem de credenciais e de acesso à tabela de metastore do Hive foram preteridos
- Driver JDBC Databricks 2.6.38
- Suporte de firewall para a conta de armazenamento de espaço de trabalho GA
- Databricks Runtime 15.2 (Beta)
- Os blocos de anotações agora detetam e preenchem automaticamente nomes de colunas para DataFrames do Spark Connect
-
Abril de 2024
- Databricks Runtime 15.1 é GA
- Assistente Databricks: Threads & histórico
- Cancelar atualizações pendentes de ponto de extremidade de serviço no Model Serving
- O Meta Llama 3 agora é suportado no Model Serving for Azure
- A linhagem de dados agora captura leituras em tabelas com máscaras de coluna e segurança em nível de linha
- Os blocos de anotações agora detetam automaticamente o SQL
- Novas colunas adicionadas à tabela do sistema de uso faturável (Visualização pública)
- O Compartilhamento Delta suporta tabelas que usam mapeamento de colunas (Visualização Pública)
- Obter esquemas de ponto de extremidade de serviço (Visualização pública)
- A criação e instalação de bibliotecas de espaço de trabalho não está mais disponível
- Os trabalhos criados por meio da interface do usuário agora estão na fila por padrão
- Configurar o acesso a recursos a partir de pontos de extremidade de serviço é GA
- A computação sem servidor para fluxos de trabalho está em pré-visualização pública
- A Lakehouse Federation oferece suporte a tabelas estrangeiras com identificadores que diferenciam maiúsculas de minúsculas
- A clonagem de computação agora clona todas as bibliotecas instaladas na computação original
- A conectividade privada da computação sem servidor é GA
- Experiência de interface do usuário para registro de aplicativo OAuth
- Melhorias na experiência do desenvolvedor do notebook Delta Live Tables (Visualização pública)
-
Março de 2024
- DBRX Base e DBRX Instruct agora estão disponíveis no Model Serving
- O Model Serving está em conformidade com a HIPAA em todas as regiões
- A taxa de transferência provisionada nas APIs do Modelo de Base é compatível com GA e HIPAA
- O MLflow agora impõe limites de cota para experimentos e execuções
- A interface do usuário de trabalhos é atualizada para gerenciar melhor os trabalhos implantados pelo Databricks Asset Bundles
- Google Cloud Vertex AI suportado como fornecedor de modelos para modelos externos
- Depuração interativa de blocos de notas
- Inscrição self-service para provedores de câmbio privados no Marketplace
- Databricks Runtime 15.0 é GA
- Databricks Repos alterado para pastas Git
- Suporte estendido às séries Databricks Runtime 14.1 e 14.2
- Databricks driver ODBC 2.8.0
- Gerenciar regras de ponto de extremidade privado (Visualização pública)
- Acesso ao espaço de trabalho para o pessoal do Azure Databricks
- HIPAA agora suporta computação sem servidor
- SQL warehouses para notebooks é GA
- Delegar a capacidade de visualizar os metadados de um objeto no Unity Catalog (Visualização pública)
- Novo limite por região para terminais privados
- Databricks Runtime 15.0 (Beta)
- Termina o suporte da série Databricks Runtime 14.0
- Nova computação para sys.path e CWD em Repos
- Feature Serving é GA
- Otimização preditiva disponível em mais regiões
-
Fevereiro de 2024
- Usar tabelas delta ao vivo na engenharia de recursos (visualização pública)
- Endereços IPv4 de origem para conexões PrivateLink em logs de auditoria
- Restringir a alteração de um proprietário de trabalho e a configuração Executar como
- Suporte para entidades de serviço gerenciado Databricks
- Habilitar a atualização automática do cluster (Visualização Pública)
- Os administradores podem habilitar recursos aprimorados de segurança e conformidade (Visualização pública)
- Suporte para armazenamento Cloudflare R2 para evitar taxas de saída entre regiões (Visualização pública)
- Adicionar dados UI suporta formato de arquivo XML
- Use funções de IA para invocar um modelo de IA generativo a partir de APIs de modelo de base
- Os volumes do Catálogo Unity são GA
- Pesquisa de página inteira alimentada por IA
- Executar trabalhos do bloco de anotações SQL em um SQL warehouse
- Gatilhos de chegada de arquivo no Azure Databricks Jobs é GA
- Pesquisar modelos de aprendizado de máquina no Unity Catalog usando a pesquisa de espaço de trabalho global
- Databricks Git server proxy é GA
- O proxy do servidor Git Databricks não requer mais permissões de CAN_ATTACH_TO
- O suporte ao arquivo de espaço de trabalho para as tarefas de arquivo dbt e SQL é GA
- Databricks Connect é GA para Scala
- Criar tabelas a partir de arquivos em volumes
- Databricks Runtime 14.3 LTS é GA
- O Compartilhamento Delta suporta tabelas que usam vetores de exclusão (Visualização Pública)
-
janeiro de 2024
- Suporte ao formato de arquivo XML nativo (Visualização pública)
- Compartilhar modelos de IA usando o Databricks Marketplace (Visualização pública)
- Atualizações das regras do grupo de segurança de rede
- Atualização do caminho do espaço de trabalho
- O suporte para o firewall do Armazenamento do Azure da computação sem servidor é GA
- Criação simplificada de trabalhos do Azure Databricks
- Monitore o modelo de GPU servindo cargas de trabalho usando tabelas de inferência
- Acesso baseado em caminho de URI a volumes externos do Unity Catalog
- As listas de controles de acesso podem ser habilitadas em espaços de trabalho atualizados
- Tabela do sistema de eventos de listagem do Marketplace agora disponível (Visualização pública)
- Interface do usuário atualizada para células de bloco de anotações (Visualização pública)
- Ajuda do Quick Fix com erros de sintaxe no bloco de notas
- Databricks Runtime 14.3 LTS (Beta)
- Compartilhar modelos de IA usando o Delta Sharing (Visualização pública)
- O Databricks Marketplace suporta compartilhamento de volume
- Criar widgets a partir da interface do usuário do Databricks
- A tabela do sistema de eventos do armazém já está disponível (Visualização pública)
- O limite de tamanho do arquivo do espaço de trabalho agora é de 500 MB
- Aviso de remoção de recursos para integração Git herdada no Databricks
- Databricks driver ODBC 2.7.7
- Termina o suporte da série Databricks Runtime 13.2
- Os recursos de assistência à IA são ativados por padrão
-
Dezembro de 2023
- Compartilhar exibições dinâmicas usando o Compartilhamento Delta (Visualização pública)
- Compartilhar volumes usando o Compartilhamento Delta (Visualização Pública)
- Diagrama de Relacionamento de Entidade para chaves primárias e chaves estrangeiras
- Aumento do limite de tamanho de upload de arquivo de volume do Catálogo Unity
- Renderização de resultados de novas células do bloco de anotações disponível (Visualização pública)
- Temas do editor de blocos de notas disponíveis
- O suporte a modelos externos no Model Serving está em Pré-visualização Pública
- Databricks Online Tables é uma visualização pública
- Repos & Git Integration Settings UI agora observa corretamente o suporte para o GitHub Enterprise Server
- Driver JDBC Databricks 2.6.36
- Suporte para referenciar arquivos de espaço de trabalho a partir de scripts init
- Feature & Function Serving é visualização pública
- As APIs do Modelo de Base são Visualização Pública
- Nova interface do usuário de configurações de administração unificadas
- Os scripts de inicialização no DBFS estão em fim de vida útil
- Os scripts init globais herdados e nomeados por cluster estão em fim de vida útil
-
Novembro de 2023
- Mosaic AI Vetor Search é uma pré-visualização pública
- As listas de controles de acesso não podem mais ser desabilitadas
- Novos comportamentos e ações no Catalog Explorer para volumes
- Databricks Runtime 14.2 é GA
- Databricks SQL Connector para Python versão 3.0.0
- Bibliotecas em arquivos de espaço de trabalho suportados em clusters compartilhados sem isolamento
- Descontinuação de bibliotecas de espaço de trabalho
- O suporte para tipos de VM de computação confidencial do Azure agora é GA
- Pesquisar listagens do Databricks Marketplace usando a pesquisa global do espaço de trabalho
- Consumir produtos de dados no Databricks Marketplace usando plataformas externas
- Suporte para armazéns SQL sem servidor adicionado para várias regiões do Azure
- Ativação automática do Unity Catalog para novos espaços de trabalho
- Databricks Runtime 14.2 (beta)
- O Databricks Marketplace inclui os Aceleradores de Solução Databricks
- Lakehouse Federation adiciona suporte para o Google BigQuery
-
Outubro de 2023
- Conectividade segura sem servidor para Databricks SQL Serverless (visualização pública)
- Exibir a fonte YAML para um trabalho do Azure Databricks
- Adicionar lógica condicional aos seus fluxos de trabalho do Azure Databricks
- Configurar parâmetros em um trabalho do Azure Databricks que podem ser referenciados por todas as tarefas de trabalho
- Ativar automaticamente vetores de exclusão
-
Suporte do Catálogo Unity para
UNDROP TABLE
é GA - O Partner Connect suporta Dataiku
- Os blocos de anotações gerados pelo AutoML agora são salvos como artefatos MLflow
- Nova região: Qatar Central
- Volumes do Catálogo Unity suportados com o Firewall do Azure e o Private Link
- Otimização preditiva (Visualização pública)
- As tabelas do sistema de computação já estão disponíveis (Visualização pública)
- A computação de recursos sob demanda é GA
- Engenharia de recursos no catálogo Unity é GA
- Comentários de tabela gerados por IA (Visualização pública)
- Modelos no catálogo Unity é GA
- Bibliotecas agora suportadas em políticas de computação (Visualização pública)
- O Partner Connect suporta Monte Carlo
- Pesquisa semântica (Pré-visualização pública)
- Ativar o Assistente Databricks no nível do espaço de trabalho
- Novos padrões do Photon
- Databricks Runtime 14.1 é GA
- As notas de versão das ferramentas de desenvolvedor foram movidas
- Extensão Databricks para Visual Studio Code atualizada para a versão 1.1.5
- E/S preditiva para atualizações é GA
- Os vetores de exclusão são GA
- O Partner Connect suporta RudderStack
- CLI do Databricks atualizada para a versão 0.207.0 (Visualização pública)
- Executar células selecionadas num bloco de notas
- Usar a vinculação de catálogo de espaço de trabalho para conceder acesso somente leitura a um catálogo
- Extensão Databricks para Visual Studio Code atualizada para a versão 1.1.4
- Databricks SDK para Python atualizado para a versão 0.10.0 (Beta)
- Databricks SDK for Go atualizado para a versão 0.22.0 (Beta)
- Volumes do Catálogo Unity agora em Visualização Pública para o Azure China
-
Setembro de 2023
- Lakehouse Federation disponível em clusters de usuário único
- Delegar a capacidade de criar uma credencial de armazenamento no Unity Catalog
- Databricks Runtime 14.1 (Beta)
- Modelo de GPU otimizado para LLMs em visualização pública
- Impedir que execuções de um trabalho sejam ignoradas quando você atingir os limites de simultaneidade
- Databricks Terraform provedor atualizado para a versão 1.27.0
- CLI do Databricks atualizada para a versão 0.206.0 (Visualização pública)
- Databricks SDK for Go atualizado para a versão 0.21.0 (Beta)
- As tabelas de inferência para pontos de extremidade de serviço de modelo são Visualização Pública
- Databricks driver ODBC 2.7.5
- Extensão Databricks para Visual Studio Code atualizada para a versão 1.1.3
- Executar trabalhos como uma entidade de serviço é GA
- CLI do Databricks atualizada para a versão 0.205.2 (Visualização pública)
- CLI do Databricks atualizada para a versão 0.205.1 (Visualização pública)
- Databricks SDK for Go atualizado para a versão 0.20.0 (Beta)
- Databricks SDK para Python atualizado para a versão 0.9.0 (Beta)
- Databricks SDK para Python atualizado para a versão 0.7.1 (Beta)
- Databricks Terraform provedor atualizado para a versão 1.26.0
- Databricks Connect para Databricks Runtime 14.0
- Painéis Lakeview na visualização pública
- Databricks Connect V2 é visualização pública para Scala
- Modelo de GPU a servir na Pré-visualização Pública
- Computação de recursos sob demanda agora disponível no Catálogo Unity (Visualização pública)
- Databricks Runtime 14.0 é GA
- Atualização de notificações por e-mail da conta
- Databricks Terraform provedor atualizado para a versão 1.25.1
- Databricks SDK for Go atualizado para a versão 0.19.2 (Beta)
- CLI do Databricks atualizada para a versão 0.205.0 (Visualização pública)
-
Local reservado para
/Workspace
- Databricks Asset Bundles (Visualização pública)
- Databricks Terraform provedor atualizado para a versão 1.25.0
- Extensão Databricks para Visual Studio Code atualizada para a versão 1.1.2
- O Partner Connect suporta Snowplow
- CLI do Databricks atualizada para a versão 0.204.1 (Visualização pública)
- Filtrar dados confidenciais com filtros de linha e máscaras de coluna (Pré-visualização Pública)
- As tabelas do sistema agora incluem o esquema do Marketplace (Visualização pública)
- A tabela do sistema de preços já está disponível (Visualização pública)
- Databricks SDK for Go atualizado para a versão 0.19.1 (Beta)
- Databricks driver ODBC 2.7.3
- CLI do Databricks atualizada para a versão 0.204.0 (Visualização pública)
- O Data Explorer agora é o Catalog Explorer
- Databricks SDK for Go atualizado para a versão 0.19.0 (Beta)
- Databricks SDK para Python atualizado para a versão 0.8.0 (Beta)
- Delegar privilégios de lista de permissões no Catálogo Unity
- A integração de aplicativos GitHub no Repos é GA
-
Agosto de 2023
- As tabelas agora aparecem na pesquisa de navegação
- CLI do Databricks atualizada para a versão 0.203.3 (Visualização pública)
- Driver JDBC Databricks 2.6.34
- Databricks SDK for Go atualizado para a versão 0.18.0 (Beta)
- Databricks SDK para Python atualizado para a versão 0.7.0 (Beta)
- Databricks Terraform provedor atualizado para a versão 1.24.1
- Scripts de inicialização no fim da vida útil do DBFS estendido até 1º de dezembro de 2023
- Databricks Runtime 14.0 (Beta)
- A experiência de navegação unificada é GA
- Databricks Terraform provedor atualizado para a versão 1.24.0
- Configuração do Databricks Runtime for Genomics removida da página de configurações de administração do espaço de trabalho
- Configuração de Serviços de Contêiner removida da página de configurações de administração do espaço de trabalho
- CLI do Databricks atualizada para a versão 0.203.2 (Visualização pública)
- Ir para definição de funções e variáveis em blocos de anotações Python
- Databricks Runtime 13.3 LTS é GA
- Apresentando tags com o Unity Catalog
- A lista de permissões para scripts init, JARs e coordenadas Maven em clusters compartilhados do Unity Catalog está em Visualização Pública
- O suporte a volumes para scripts init e JARs está em Visualização Pública
- Confirmações de saída de arquivo .ipynb Databricks Repos mais fáceis
- Suporte de notebook IPYNB no Databricks Repos é GA
- Databricks SDK for Go atualizado para a versão 0.17.0 (Beta)
- Databricks SDK para Python atualizado para a versão 0.6.0 (Beta)
- CLI do Databricks atualizada para a versão 0.203.1 (Visualização pública)
- O navegador de esquema unificado agora é GA
- As alterações de sub-rede sem servidor podem afetá-lo se você codificar IDs em um script ou modelo
- Databricks SDK for Go atualizado para a versão 0.16.0 (Beta)
- O Partner Connect suporta o Census
- Chaves HSM gerenciadas do Azure Key Vault agora com suporte para chaves gerenciadas pelo cliente
- Databricks SDK para Python atualizado para a versão 0.5.0 (Beta)
- Suporte de gravação programática para arquivos de espaço de trabalho
- CLI do Databricks atualizada para a versão 0.203.0 (Public Preview)
- Databricks Terraform provedor atualizado para a versão 1.23.0
- Os grupos agora podem ser renomeados
- Databricks SDK for Go atualizado para a versão 0.15.0 (Beta)
- Databricks SDK para Python atualizado para a versão 0.4.0 (Beta)
- A definição de configuração de prevenção de iFraming de terceiros foi removida
- Extensão Databricks para Visual Studio Code atualizada para a versão 1.1.1
- LangChain disponível em 13.1 e superior
- Engenharia de recursos no catálogo Unity é visualização pública
- Tratamento de erros melhorado para repetidas falhas contínuas de trabalho
- Armazéns SQL sem servidor agora disponíveis em regiões adicionais
- Compartilhar esquemas usando o Compartilhamento Delta (Visualização Pública)
- Executar tarefas condicionalmente em seus trabalhos do Azure Databricks
- Databricks Terraform provedor atualizado para a versão 1.22.0
- Recursos aprimorados de segurança e conformidade
- Lakehouse Monitoring é visualização pública
- Databricks Runtime 13.3 LTS (Beta)
- Novas operações Git estão geralmente disponíveis: mesclar ramificações, rebasear e puxar com resolução de conflitos
-
Julho de 2023
- Os administradores de espaços de trabalho agora podem criar grupos de contas
- A função de gestor de grupo está na Pré-visualização Pública
- CLI do Databricks atualizada para a versão 0.202.0 (Visualização pública)
- Databricks SDK para Python atualizado para a versão 0.3.0 (Beta)
- Databricks SDK for Go atualizado para a versão 0.14.1 (Beta)
- Databricks SDK for Go atualizado para a versão 0.14.0 (Beta)
- Executar outro trabalho como uma tarefa em um trabalho do Azure Databricks
- A atualização de rede do espaço de trabalho recebe suporte à interface do usuário (GA)
- Todos os usuários podem acessar produtos de dados no Databricks Marketplace por padrão
- Modo de atalhos de teclado clássico
- A Lakehouse Federation permite executar consultas em provedores de banco de dados externos (Visualização pública)
- Mover para a lixeira habilitado para Repos
- Crie alertas para trabalhos lentos ou bloqueados
- Databricks SDK for Go atualizado para a versão 0.13.0 (Beta)
- Databricks SDK para Python atualizado para a versão 0.2.0 (Beta)
- CLI do Databricks atualizada para a versão 0.201.0 (Visualização pública)
- Databricks SDK para Python atualizado para a versão 0.2.1 (Beta)
- O Assistente Databricks está em Pré-visualização Pública
- Desativar utilizadores e entidades de serviço da sua conta
- O provisionamento SCIM no nível da conta agora desativa os usuários quando eles são desativados no provedor de identidade
- Acesso de administrador do diretório da lixeira
- A prevenção de deteção de tipo MIME e renderização de página de ataque XSS agora está sempre ativada
- Os volumes do Catálogo Unity estão em visualização pública
- Experiência simplificada para enviar comentários sobre produtos a partir do espaço de trabalho
- Extensão Databricks para Visual Studio Code atualizada para a versão 1.1.0
- Funções agora exibidas no Catalog Explorer (Visualização pública)
- Databricks Terraform provedor atualizado para a versão 1.21.0
-
O deslocamento máximo para as solicitações e
List all jobs
APIList job runs
agora é limitado - Databricks Runtime 13.2 é GA
- Delta Sharing e Databricks Marketplace suportam compartilhamento de exibição (Visualização pública)
- Os scripts Init no DBFS chegam ao fim da vida útil em 1º de setembro de 2023
-
Junho de 2023
- Databricks Terraform provedor atualizado para a versão 1.20.0
- CLI do Databricks atualizada para a versão 0.200.1 (Visualização pública)
- Databricks SDK for Go atualizado para a versão 0.12.0 (Beta)
- Databricks SDK for Go atualizado para a versão 0.11.0 (Beta)
- Databricks SDK para Python (Beta)
- Databricks SDK para Go (Beta)
- Acessar o log de auditoria, o uso faturável e as tabelas do sistema de linhagem (Visualização pública)
- Modelos no Catálogo Unity (Visualização pública)
- Databricks Marketplace agora é GA
- Databricks Runtime 13.2 (Beta)
- Extensão Databricks para Visual Studio Code (disponibilidade geral)
- Habilite chaves gerenciadas pelo cliente usando a CLI do Azure e o Powershell sem um modelo
- Os armazéns SQL sem servidor funcionam com o Azure Private Link back-end habilitado
- Veja uma visão geral visual das execuções de trabalho concluídas na interface do usuário de Trabalhos do Azure Databricks
- CLI do Databricks (Visualização pública)
-
Paginação melhorada de resultados e
List all jobs
solicitações deList job runs
API - O navegador de espaço de trabalho de página inteira inclui Repos
- Databricks Terraform provedor atualizado para a versão 1.19.0
- Executar trabalhos como entidade de serviço (Pré-visualização Pública)
- A nova interface do usuário da entidade de serviço oferece melhor experiência de gerenciamento
- Pastas base restauradas quando os usuários são adicionados novamente aos espaços de trabalho
- Databricks Marketplace: Bolsas privadas já estão disponíveis
- Databricks Marketplace: os consumidores podem desinstalar produtos de dados usando a interface do usuário
- Databricks Marketplace: os fornecedores podem criar os seus próprios perfis
- Databricks Connect V2 é GA para Python
- Databricks Terraform provedor atualizado para a versão 1.18.0
- Novos fornecedores do Databricks Marketplace
- Databricks Runtime 13.1 é GA
- Exibir dados de blocos de anotações, editor SQL e Gerenciador de Catálogos com o navegador de esquema unificado (Visualização Pública)
-
Maio de 2023
- Criar ou modificar a interface do usuário da tabela suporta Avro, Parquet e uploads de arquivos de texto
- Use a interface do usuário de adição de dados para carregar dados usando locais externos do Catálogo Unity (Visualização pública)
- Executar blocos de anotações Databricks em armazéns SQL (Visualização Pública)
- Impedir que a tecla Enter aceite a sugestão de preenchimento automático
- Nova região: China East 3
- Suporte para tipos de VM de computação confidencial do Azure (Visualização Pública)
- Databricks Terraform provedor atualizado para a versão 1.17.0
- A interface do usuário de carregamento de dados suporta novos tipos de dados de coluna
- Vincular catálogos do Catálogo Unity a espaços de trabalho específicos
- Todos os usuários podem se conectar ao Fivetran usando o Partner Connect (Visualização pública)
- Databricks Terraform provedor atualizado para a versão 1.16.1
- Driver JDBC Databricks 2.6.33
- O Partner Connect suporta Alation
- Novo tema padrão para editor
- Databricks Terraform provedor atualizado para a versão 1.16.0
- O suporte do Catálogo Unity para identidades gerenciadas do Azure agora é GA
- Databricks Runtime 13.1 (Beta)
- Executar consultas SQL baseadas em arquivo em um fluxo de trabalho do Azure Databricks
- Databricks Terraform provedor atualizado para a versão 1.15.0
- As regiões do Azure China agora oferecem suporte ao Catálogo Unity
- Apelidos de conta agora disponíveis no console da conta
- Compartilhar blocos de anotações usando o Delta Sharing
- O Azure Databricks não cria mais um SQL warehouse inicial sem servidor
- Na API do SQL Warehouses, habilitar a computação sem servidor agora deve ser explícito
- Alterações nas configurações do espaço de trabalho para armazéns SQL sem servidor
- Alterações nas configurações de computação sem servidor para contas e espaços de trabalho
- Databricks SQL Serverless é GA
- Atualizar um espaço de trabalho existente com conectividade de cluster segura ou Azure Private Link (Visualização Pública)
- Descontinuação de scripts de inicialização com escopo de cluster no DBFS
- Navegação unificada (Pré-visualização Pública)
-
Abril de 2023
- Databricks Marketplace (Public Preview): um mercado aberto para dados, análises e IA
- Configurar o formatador Python
- Os arquivos do espaço de trabalho são GA
- Os scripts de inicialização com escopo de cluster agora podem ser armazenados em arquivos de espaço de trabalho
- Criar um escopo secreto apoiado pelo Cofre de Chaves do Azure com uma entidade de serviço
- Novos privilégios de compartilhamento delta permitem a delegação de tarefas de gerenciamento de compartilhamento, destinatário e provedor
- Databricks Connect V2 (Pré-visualização Pública)
- Nova interface do usuário de métricas de cluster
- Databricks Runtime 13.0 é GA
- Controlar o acesso ao console da conta por intervalos de endereços IP (Visualização pública)
- Databricks Terraform provedor atualizado para a versão 1.14.3
- Entradas de log de diagnóstico para configurações de administrador alteradas para espaço de trabalho
- Para a chave inicial gerenciada pelo cliente para discos gerenciados, o Azure Databricks agora encerra os recursos de computação
- Databricks Terraform provedor atualizado para as versões 1.14.1 e 1.14.2
- Configurações de usuário SQL combinadas e configurações gerais do usuário
- Visualizações de blocos de anotações herdadas preteridas
- Criar ou modificar tabela a partir da página de carregamento de ficheiros suporta carregamentos de ficheiros JSON
-
Março de 2023
- Databricks Terraform provedor atualizado para a versão 1.14.0
- Termina o suporte ao Databricks Runtime 7.3 LTS ML
- Preparação distribuída com o TorchDistributor
- Databricks Runtime 13.0 (Beta)
- Editor de ficheiros melhorado
- Alterar a redundância de armazenamento raiz do DBFS para espaços de trabalho existentes do Azure Databricks
- Suporte a notebook .ipynb (Jupyter) no Repos (visualização)
- Suporte para reload4j
- Novos endereços IP para a região da Ásia Oriental
- Executar células SQL no bloco de anotações em paralelo
- Criar tarefas de trabalho usando o código Python armazenado em um repositório Git
- Databricks Terraform provedor atualizado para a versão 1.13.0
- Databricks Terraform provedor atualizado para a versão 1.12.0
- Console de administração do SQL e console de administração do espaço de trabalho combinados
- Modelo de Servir é GA
- A pesquisa automática de recursos é GA
- Para novos espaços de trabalho que usam UDRs, o IP de armazenamento do Azure precisa de um UDR adicional
- O armazenamento raiz DBFS do Azure Databricks usa o Azure Data Lake Storage Gen2 para novos espaços de trabalho
- Nova disponibilidade do Catalog Explorer
- Exibir consultas frequentes e usuários de uma tabela usando a guia Informações
- A pesquisa de correspondência exata está disponível na pesquisa global
- Exibir informações de linhagem para seus trabalhos do Azure Databricks
- Databricks Runtime 12.2 LTS e Databricks Runtime 12.2 LTS ML são GA
- Os ficheiros da área de trabalho estão agora em Pré-visualização Pública
-
Fevereiro de 2023
- Suporte para instâncias da série ND A100 v4 (Visualização pública)
- Ray no Azure Databricks (Pré-visualização Pública)
- Aumento do limite de resultados da célula do bloco de notas
- O Azure Databricks Jobs agora oferece suporte à execução de trabalhos contínuos
- Acionar seu trabalho do Azure Databricks quando novos arquivos chegarem
- Databricks Terraform provedor atualizado para a versão 1.10.0
- Scripts de inicialização globais herdados e scripts de inicialização nomeados por cluster desabilitados
- Melhorias na interface do usuário do experimento MLflow
- Databricks Runtime 12.2 (Beta)
- Usar identidades gerenciadas atribuídas pelo usuário para acessar o armazenamento no Unity Catalog (Visualização pública)
- Extensão Databricks para Visual Studio Code (Public Preview)
- Visualização pública de inferência em tempo real sem servidor agora disponível para todos os clientes
- Os armazéns SQL sem servidor estão disponíveis para espaços de trabalho em regiões com suporte (Visualização Pública)
- Databricks Terraform provedor atualizado para a versão 1.9.2
- As chaves gerenciadas pelo cliente ajudam a proteger e controlar o acesso a alguns tipos de dados (GA)
- Explorador de variáveis em blocos de notas do Azure Databricks
-
Janeiro de 2023
- Habilitar a conectividade privada com o Azure Private Link (GA)
- Conta SCIM agora é GA
- Criação e edição mais fáceis de trabalhos do Azure Databricks na interface do usuário
- Melhorias na interface do usuário de Trabalhos do Azure Databricks ao exibir execuções de trabalho
- A nova tela inicial do console de conta oferece uma melhor experiência de gerenciamento de conta
- Databricks Terraform provedor atualizado para a versão 1.9.1
- Os usuários da conta podem atualizar as preferências de e-mail no console da conta
- Suporte à região consolidado em uma página
- Databricks Runtime 12.1 e Databricks Runtime 12.1 ML são GA
- As políticas de cluster agora oferecem suporte à limitação do número máximo de clusters por usuário
- Databricks Terraform provedor atualizado para a versão 1.9.0
- Armazéns SQL sem servidor estão disponíveis nas regiões dos EUA Central e Europa do Norte
- O Partner Connect suporta a ligação à Privacera
- Databricks Terraform provedor atualizado para a versão 1.8.0
- Databricks Runtime 12.1 (Beta)
- O Partner Connect suporta Sigma
- Novas barras laterais esquerda e direita nos notebooks Databricks
-
Dezembro de 2022
- Databricks SQL Driver for Go está geralmente disponível
- Impedir atualizações simultâneas do espaço de trabalho
- Nova região do Azure: China North 3
- Databricks Terraform provedor atualizado para a versão 1.7.0
- Databricks Runtime 12.0 e 12.0 ML são GA
- As vagas já estão disponíveis na pesquisa global (Visualização pública)
- Os gráficos de uso faturáveis agora podem ser agregados por tags individuais
- Use SQL para especificar locais de armazenamento no nível de esquema e catálogo para tabelas gerenciadas do Unity Catalog
- A captura de dados de linhagem com o Unity Catalog agora está disponível para o público em geral
- Databricks driver ODBC 2.6.29
- Driver JDBC Databricks 2.6.32
- O Partner Connect suporta a conexão com o AtScale
-
Novembro de 2022
- Notificações aprimoradas para seus trabalhos do Azure Databricks (Visualização Pública)
- Databricks Runtime 12.0 (Beta)
- Configurar firewalls de armazenamento do Azure para permitir o acesso de armazéns SQL sem servidor
- A interface do usuário de upload de dados agora pode ser desativada por meio das configurações de administrador
- O suporte do Partner Connect para o Unity Catalog é GA
- Trabalhe com grandes repositórios com o Sparse Checkout
- Databricks Terraform provedor atualizado para a versão 1.6.5
- Criar armazéns SQL sem servidor na região Oeste dos EUA
- Databricks Terraform provedor atualizado para as versões 1.6.3 e 1.6.4
- Especifique um local de armazenamento em nuvem para tabelas gerenciadas do Unity Catalog nos níveis de catálogo e esquema
- Aceder a objetos recentes a partir do campo de pesquisa na barra superior da sua área de trabalho
- Criar ou modificar tabela a partir da página de carregamento de ficheiros agora suporta vários ficheiros
- Criar ou modificar tabela a partir da página de upload de arquivo agora suporta substituição
- Pesquise vagas por nome com a API de trabalhos 2.1
- Databricks Terraform provedor atualizado para a versão 1.6.2
- Procurar tabelas no Unity Catalog é GA
-
Outubro de 2022
- GA: Suporte de repositórios para arquivos que não são de notebook
- Chaves gerenciadas pelo cliente para criptografia de disco gerenciado
- Implante modelos para inferência de streaming com notebooks Delta Live Tables
- Conectar-se ao Fivetran a partir da interface do usuário de adicionar dados
- Databricks SQL Driver for Node.js está disponível em geral
- O Partner Connect suporta a ligação ao erwin Data Modeler by Quest
- Suporte do Databricks Feature Store para o Azure Cosmos DB (Visualização Pública)
- Impor tipos de cluster de isolamento de usuário em um espaço de trabalho
- Databricks Runtime 11.3 LTS e 11.3 LTS ML são GA
- Formatar código Python em blocos de notas (Pré-visualização Pública)
- As entidades de serviço fornecem acesso somente de API à conta do Azure Databricks
- A política de cluster de computação pessoal está disponível por padrão para todos os usuários
- Adicionar dados A interface do usuário fornece uma interface do usuário central para carregar dados no Azure Databricks
- Criar ou modificar tabela a partir da página de upload de arquivo unifica a experiência de upload de arquivos pequenos para o Delta Lake
- O Partner Connect suporta a conexão com Hevo Data
- Habilitar a proteção de administrador para clusters compartilhados sem isolamento
- SQL persona integrado com nova experiência de pesquisa
- Herança de privilégios agora suportada no Catálogo Unity
- Barra de navegação superior na interface do usuário
- Databricks Runtime 11.3 (Beta)
- O console da conta está disponível em vários idiomas
-
Setembro de 2022
- Nova solução de referência para processamento de linguagem natural
- Mais regiões para o Catálogo Unity
- Barra de navegação superior na interface do usuário
- Os logs de auditoria agora incluem eventos para o terminal da Web
- Os logs de auditoria agora incluem eventos para gerenciar credenciais para repositórios Git
- Selecione políticas de cluster diretamente na interface do usuário do Delta Live Tables
- Novo cartão de transferência de dados nas páginas de destino do espaço de trabalho
- Orquestre tarefas SQL do Databricks em seus fluxos de trabalho do Azure Databricks (Visualização Pública)
- O cache delta agora é cache de disco
- Capture e visualize dados de linhagem com o Catálogo Unity (visualização pública)
- Pesquisar tabelas usando o Catalog Explorer (Visualização Pública)
- Visualize e organize ativos no navegador de espaço de trabalho entre personas
- Databricks Runtime 11.2 e 11.2 ML são GA
-
Agosto de 2022
- Os usuários da conta podem acessar o console da conta
- Databricks driver ODBC 2.6.26
- Driver JDBC Databricks 2.6.29
- Cliente Databricks Feature Store agora disponível no PyPI
- Unity Catalog é GA
- Delta Sharing é GA
- Databricks Runtime 11.2 (Beta)
- Volume de mensagens reduzido na interface do usuário do Delta Live Tables para pipelines contínuos
- Configuração de cluster mais fácil para seus pipelines Delta Live Tables
- Orquestre tarefas dbt em seus fluxos de trabalho do Databricks (Visualização pública)
- A federação de identidades é GA
- O Partner Connect suporta a ligação ao Stardog
- Integração do Databricks Feature Store com o Serverless Real-Time Inference
- Suporte de tipo de dados adicional para pesquisa automática de recursos do Databricks Feature Store
- Traga sua própria chave: criptografe as credenciais do Git
- O modo de visualização e acesso da interface do usuário do cluster substitui o modo de segurança
- Limitações do Catálogo Unity (Visualização pública)
- Inferência em tempo real sem servidor na visualização pública
- A pesquisa melhorada no espaço de trabalho é agora GA
- Usar colunas geradas ao criar conjuntos de dados Delta Live Tables
- Edição melhorada para cadernos com editor baseado no Mónaco (Experimental)
- Termina o suporte da série Databricks Runtime 10.3
- Habilitar a conectividade privada com o Azure Private Link (Visualização Pública)
- Habilitar armazéns SQL sem servidor para seu espaço de trabalho (Visualização pública)
- Delta Live Tables agora suporta a atualização apenas de tabelas selecionadas em atualizações de pipeline
- A execução do trabalho agora aguarda a conclusão da instalação das bibliotecas de cluster
-
Julho de 2022
- Databricks Runtime 11.1 e 11.1 ML são GA
- Fóton é GA
- Notificação após a conclusão do bloco de notas
- Limite aumentado para o número de trabalhos em seus espaços de trabalho do Azure Databricks
- Os logs de auditoria detalhados agora registram quando as consultas SQL do Databricks são executadas
- Driver JDBC Databricks 2.6.27
- Databricks ODBC driver 2.6.25
- Databricks Runtime 11.1 (Beta)
- Visualizações melhoradas do bloco de notas
-
Junho de 2022
-
ALTER TABLE
alterações de permissão para o Catálogo Unity - O suporte estendido do Databricks Runtime 6.4 chega ao fim do suporte
- Termina o suporte da série Databricks Runtime 10.2
- Databricks driver ODBC 2.6.24
- Databricks Terraform provedor agora é GA
- Databricks Runtime 11.0 e 11.0 ML são GA; 11.0 Photon é visualização pública
- Alterar para o diretório de trabalho padrão do Repos no Databricks Runtime 11.0
- Termina o suporte da série Databricks Runtime 10.1
- Delta Live Tables agora suporta SCD tipo 2
- Criar pipelines Delta Live Tables diretamente na interface do usuário do Azure Databricks
- Selecione o canal Delta Live Tables ao criar ou editar um pipeline
- Comunique-se entre tarefas em seus trabalhos do Azure Databricks com valores de tarefa
- Habilitar a troca de conta na interface do usuário do Databricks
-
-
Maio de 2022
- Copiar e colar células do bloco de notas entre separadores e janelas
- Suporte de tipo de dados adicional para pesquisa automática de recursos do Databricks Feature Store
- Databricks Runtime 11.0 (Beta)
- Pesquisa melhorada no espaço de trabalho (Pré-visualização Pública)
- Explore os resultados da célula SQL em blocos de anotações Python nativamente usando Python
- Databricks Repos: Suporte para mais arquivos em um repositório
- Databricks Repos: Correção para problema com a perda de dados do experimento MLflow
- Nova região do Azure: Centro-Oeste dos EUA
- O assistente de atualização facilita a cópia de bancos de dados e várias tabelas para o Unity Catalog (Visualização pública)
- Suporte a proxy HTTP em todo o sistema do Power BI Desktop
- Os logs de auditoria agora podem gravar quando um comando de bloco de anotações é executado
- Databricks Runtime 10.5 e 10.5 ML são GA; 10.5 Photon é visualização pública
- Driver JDBC Databricks 2.6.25
- Veja o usuário que um pipeline executa como na interface do usuário do Delta Live Tables
-
Abril de 2022
- Nova região do Azure: Suécia Central
- Usar tags para gerenciar melhor seus trabalhos do Azure Databricks
- Termina o suporte da série Databricks Runtime 10.0
- Obtenha uma visão geral visual das execuções do seu trabalho com a nova visualização da matriz de trabalhos
- Economize tempo e recursos quando a execução do trabalho do Azure Databricks não for bem-sucedida
- Exibir o histórico de execução de tarefas de trabalho
- Atribuir um novo cluster na interface do usuário de trabalhos quando o acesso de usuário único não existir mais
- Databricks Runtime 10.5 (Beta)
- A interface do usuário do Delta Live Tables foi aprimorada para desabilitar ações não autorizadas
- O AutoML está disponível em geral
- Usar conjuntos de dados do Unity Catalog com AutoML
- O Delta Live Tables é GA na AWS e no Azure, e no Public Preview no GCP
- Interface SQL do Delta Live Tables: alteração ininterrupta nos nomes das tabelas
-
Março de 2022
- Melhor desempenho e custo para seus pipelines Delta Live Tables com dimensionamento automático aprimorado do Databricks
- Arquivos em repositórios habilitados por padrão em novos espaços de trabalho
- Databricks Feature Store está disponível em geral
- Partilhar uma experiência a partir da página da experiência
- Correção de bug do RStudio Workbench
- Novas opções de idioma do espaço de trabalho
- Databricks Runtime 10.4 LTS e 10.4 LTS ML são GA; 10.4 Photon é visualização pública
- O Catálogo Unity está disponível em Visualização Pública
- O Delta Sharing está disponível na Pré-visualização Pública
- Girar a chave gerenciada pelo cliente para serviços gerenciados
- Controle de acesso aprimorado para pipelines Delta Live Tables
-
Testar a funcionalidade de visualização do Delta Live Tables com a nova
channel
configuração (Visualização pública) - Tratamento de erros melhorado para funções Python do Delta Live Tables (Pré-visualização Pública)
- Melhorias no Databricks Repos
- Log de diagnóstico para alterações de diretiva de cluster
- Databricks Runtime 10.4 (Beta)
-
Fevereiro de 2022
- Agendamento mais fácil para seus pipelines Delta Live Tables (Visualização pública)
- Navegue facilmente pelo histórico das atualizações do pipeline do Delta Live Tables (Visualização pública)
- Garantir a idempotência do trabalho para a solicitação Executar agora da API de Trabalhos
- Melhorias na estabilidade e escalabilidade do serviço de trabalhos
- Comparar execuções MLflow de diferentes experimentos
- Melhorias na exibição de execuções de comparação MLflow
- Visibilidade aprimorada dos proprietários de execução de tarefas na interface do usuário de clusters
- Soltar colunas do conjunto de dados no AutoML
- A página de experiências é GA
- Suporte para tabelas temporárias na interface Python do Delta Live Tables
- Melhorias na interface do usuário para Delta Live Tables (Visualização pública)
- Termina o suporte da série Databricks Runtime 9.0
- Atualizações da página inicial de Ciência de Dados e Engenharia
- O Databricks Repos agora oferece suporte ao AWS CodeCommit para integração com Git
- Visualização aprimorada para seus pipelines Delta Live Tables (visualização pública)
- Analisador Markdown atualizado
- Delta Live Tables agora suporta processamento de captura de dados de alteração (Visualização pública)
- Metastores adicionais agora disponíveis em várias regiões
- Selecionar estruturas de algoritmo para usar com o AutoML
- Os modelos de MLflow hospedados pelo Databricks agora podem procurar recursos de lojas online
- Databricks Runtime 10.3 e 10.3 ML são GA; 10.3 Photon é visualização pública
-
Janeiro de 2022
- Webhooks do Registro do Modelo MLflow no Azure Databricks (Visualização Pública)
- Quebrando a alteração: token de idempotência do cluster limpo na terminação do cluster
- Databricks Runtime 10.3 (Beta)
- Exibir informações sobre execuções de trabalho recentes
- Usar Markdown no editor de arquivos Databricks Repos
- Gerenciamento de cluster aprimorado para trabalhos que orquestram várias tarefas
- Termina o suporte das séries Databricks Runtime 8.3 e Databricks Runtime 8.4
- Driver JDBC Databricks 2.6.22
- Metastores adicionais agora disponíveis em várias regiões
- Novo botão Partilhar substitui o ícone Permissões nos blocos de notas
- Novas opções de idioma do espaço de trabalho
- Metastores adicionais agora estão disponíveis em várias regiões
-
Dezembro de 2021
- Databricks Runtime 6.4 Extended Support series data de fim do suporte estendida
- A série Databricks Runtime 5.5 Extended Support chega ao fim do suporte
- Driver JDBC Databricks 2.6.21
- Conector Databricks para Tableau 2021.4
- Databricks Runtime 10.2 e 10.2 ML são GA; 10.2 Photon é visualização pública
- Suíça Região Oeste agora disponível
- Analisador Markdown atualizado
- Melhorias na interface do usuário para Delta Live Tables
- Metastores adicionais em breve em várias regiões
- Atualizar relé SCC para a região Sudeste da Austrália
- Suporte estendido à série Databricks Runtime 8.3
- Databricks Runtime 10.2 (Beta)
- Reverter a alteração de quebra recente que removeu a fuga e as cotações de $ em valores de variáveis de ambiente para criação de cluster
-
Novembro de 2021
- Criar tags para tabelas de recursos (Visualização pública)
- Realce de sintaxe e preenchimento automático para comandos SQL em células Python
- Renomear, excluir e alterar permissões para experimentos MLflow da página do experimento (Visualização pública)
- Novos perfis de dados em blocos de notas: resumos tabulares e gráficos dos seus dados (Pré-visualização Pública)
- Registro em log aprimorado quando os esquemas evoluem durante a execução de um pipeline Delta Live Tables
- Databricks Partner Connect GA
- Quebrando a alteração: remova a fuga e as cotações de $ em valores de variáveis de ambiente para a criação de clusters
- Melhorias de facilidade de uso para arquivos em repositórios
- O suporte para widgets SQL herdados termina em 15 de janeiro de 2022
- Melhorias na interface do usuário para trabalhos do Azure Databricks
- Conector de compartilhamento delta para Power BI
- Databricks driver ODBC 2.6.19
- Databricks Runtime 10.1 e 10.1 ML são GA; 10.1 Photon é visualização pública
- Databricks Runtime 10.1 (Beta)
- Renomear e excluir experimentos MLflow (Visualização pública)
- Agora você pode criar uma política de cluster clonando uma política existente
- Alterar o idioma padrão de blocos de anotações e células de bloco de anotações com mais facilidade
- Usar arquivos no Repos a partir do terminal da Web
-
Outubro de 2021
- Termina o suporte da série Databricks Runtime 8.2
- Databricks Runtime 10.0 e 10.0 ML são GA; 10.0 Photon é visualização pública
- Melhorias na interface do usuário para Delta Live Tables (Visualização pública)
- Especifique um cluster de tamanho fixo ao criar um novo pipeline no Delta Live Tables (Public Preview)
- Exibir métricas de qualidade de dados para tabelas em pipelines acionados pelo Delta Live Tables (Visualização pública)
- A orquestração de empregos agora é GA
- Conector Databricks para Power BI
- O Repos agora suporta tipos de arquivos arbitrários
- Saída de execução de trabalho mais detalhada com a API de trabalhos
- Melhor legibilidade dos caminhos do bloco de anotações na interface do usuário Trabalhos
- Abra seu pipeline Delta Live Tables em uma nova guia ou janela
-
Nova sequência de escape para
$
widgets de entrada herdados em SQL - Implantação de modelo mais rápida com bloco de anotações de inferência em lote gerado automaticamente
-
Setembro de 2021
- Databricks Runtime 10.0 (Beta)
- Databricks driver ODBC 2.6.18
- Usar chaves gerenciadas pelo cliente para criptografia com espaços de trabalho existentes
- Databricks Runtime 9.1 LTS e 9.1 LTS ML são GA; 9.1 LTS Photon é visualização pública
- Termina o suporte da série Databricks Runtime 8.1
- Driver JDBC Databricks 2.6.19
- Compartilhar tabelas de recursos entre espaços de trabalho
- Disponibilidade geral de vários tipos de instância de GPU do Azure
-
Repos agora suporta
.gitignore
- A interface do usuário de trabalhos aprimorados agora é padrão para todos os espaços de trabalho
- Databricks Runtime 9.1 (Beta)
- Gerenciamento simplificado de configurações para trabalhos do Azure Databricks
- Databricks SQL Public Preview disponível em todos os espaços de trabalho
- Excluir tabelas de recursos do Feature Store
- Conceder permissões de pipeline de exibição na interface do usuário do Delta Live Tables (Visualização pública)
- Reduza o uso de recursos de cluster com Delta Live Tables (visualização pública)
- Usar modelos MLflow em seus pipelines Delta Live Tables (Visualização pública)
- Encontre pipelines Delta Live Tables por nome (Visualização pública)
- O PyTorch TorchScript e outras bibliotecas de terceiros agora são suportados em trabalhos do Azure Databricks
- Termina o suporte da série Databricks Runtime 8.0
-
Agosto de 2021
- Databricks Repos GA
- Maior tempo limite para trabalhos de bloco de anotações de longa duração
- Melhorias na estabilidade e escalabilidade do serviço de trabalhos
- Os direitos de usuário concedidos pela associação ao grupo são exibidos no console de administração
- Gerenciar permissões de experimento MLflow (Visualização pública)
- Criação de emprego melhorada a partir de computadores portáteis
- VMs da série Ddsv4 (Visualização pública)
- Suporte melhorado para cabeçalhos de blocos de notas em colapso
- Databricks Runtime 9.0 e 9.0 ML são GA; 9.0 Photon é visualização pública
- Databricks Runtime 9.0 (Beta)
- Gerencie repositórios programaticamente com a CLI do Databricks (Visualização pública)
- Gerencie repositórios programaticamente com a API REST do Databricks (Visualização pública)
- Termina o suporte da série Databricks Runtime 7.6
- Os eventos de auditoria são registrados quando você interage com o Databricks Repos
- Criação de trabalho e fluxo de trabalho de gerenciamento aprimorado
- Tempos de execução do Photon agora disponíveis (Visualização pública)
- Instruções simplificadas para definir credenciais do Git (Visualização pública)
-
Importar vários blocos de notas em
.html
formato - Melhorias de usabilidade para Delta Live Tables
-
Julho de 2021
- Gerenciar permissões de experimento MLflow com a API REST do Databricks
- A interface Web do Azure Databricks está localizada em português e francês (Pré-visualização Pública)
- Termina o suporte do Databricks Runtime 5.5 LTS for Machine Learning, substituído pela versão de Suporte Estendido
- O suporte ao Databricks Light 2.4 termina em 5 de setembro, substituído pela versão de suporte estendido
- Nova região do Azure: Alemanha Centro-Oeste
- Informações de atualização do recurso disponíveis na interface do usuário do Databricks Feature Store (Visualização pública)
- Exibir até 10.000 linhas de resultados
- Importar e exportar blocos de anotações em massa em uma pasta como arquivos de origem
- O preenchimento automático em blocos de anotações SQL agora usa todas as letras maiúsculas para palavras-chave SQL
- Widgets reordenáveis e redimensionáveis em blocos de anotações
- Correções de usabilidade da interface do usuário do Azure Databricks
- Defina rapidamente as configurações de pipeline ao criar um novo pipeline Delta Live Tables
- Databricks Runtime 8.4 e 8.4 ML são GA; 8.4 Photon é visualização pública
- Usar o Spark SQL com a API Python do Delta Live Tables
- Processamento e análise de dados aprimorados com trabalhos do Azure Databricks (Visualização Pública)
- Custo reduzido para clusters padrão do Delta Live Tables (visualização pública)
- Classificar pipelines por nome na interface do usuário do Delta Live Tables (Visualização pública)
- Alterações na página Computação
- O suporte ao Databricks Runtime 5.5 LTS termina, substituído pelo Databricks Runtime 5.5 Extended Support até o final de 2021
- API de repositórios (Visualização pública)
- Databricks Runtime 8.4 (Beta)
-
Junho de 2021
- Correção: O Repos para Git é ativado por padrão em espaços de trabalho novos e existentes em algumas regiões
- Alterar para permissões do Feature Store
- Acesso melhorado aos resultados na tabela MLflow runs
- Melhor visibilidade de custos para tabelas Delta Live
- Restrições aprimoradas de qualidade de dados para Delta Live Tables
- Alterações de API para atualizar e substituir listas de endereços IP
- Databricks driver ODBC 2.6.17
- Termina o suporte da série Databricks Runtime 7.5
- Otimize o desempenho e controle os custos usando pools diferentes para o nó do driver e os nós de trabalho
- Permissões em todo o Registro para o Registro Modelo
- O diretório base de um usuário não é mais protegido quando você exclui um usuário usando a API SCIM
- Databricks Runtime 8.3 e 8.3 ML são GA; 8.3 Photon é visualização pública
- Controle de acesso à tabela Python e SQL (GA)
- A interface do usuário e a API de trabalhos agora mostram o proprietário de uma execução de trabalho
- Proteja propriedades confidenciais de configuração do Spark e variáveis de ambiente usando segredos (Visualização pública)
- O repositório para Git é habilitado por padrão em espaços de trabalho novos e existentes em algumas regiões
- Interface do usuário de configurações do espaço de trabalho redesenhado
-
Atualizações e
ListTokens
ListAllTokens
consultas de banco de dados de tokens expirados - Confirmação agora necessária ao conceder ou revogar permissões de administrador
- Alterações nos atalhos de teclado na interface do usuário da Web
-
Maio de 2021
- Databricks Mosaic AI: uma solução colaborativa e nativa de dados para o ciclo de vida completo do ML
- SQL Analytics é renomeado para Databricks SQL
- Criar e gerenciar pipelines ETL usando Delta Live Tables (Visualização pública)
- As VMs spot do Azure são GA
- Criptografar consultas SQL do Databricks e histórico de consultas usando sua própria chave (Visualização pública)
- Aumento do limite para o número de clusters polivalentes terminados
- Aumento do limite para o número de clusters fixados
- Gerenciar onde os resultados do bloco de anotações são armazenados (Visualização pública)
- Criptografar notebook e dados secretos no plano de controle com sua própria chave (Visualização pública)
- Termina o suporte da série Databricks Runtime 7.4
- Os usuários do repositório agora podem se integrar ao Azure DevOps usando tokens de acesso pessoal
-
Abril de 2021
- Tempo de execução do Databricks 8.2 (GA)
- Gerenciamento de tarefas mais fácil com a interface de usuário aprimorada de trabalhos
- As alterações da política de cluster são aplicadas automaticamente aos clusters existentes ao reiniciar e editar
- Rastreie novas tentativas em suas tarefas de trabalho quando as tentativas de tarefas falharem
- Visualize rapidamente os detalhes do cluster ao criar um novo cluster
- A barra lateral MLflow reflete a experiência mais recente
-
Alterar para o canal padrão para
conda.yaml
arquivos no MLflow - Autenticação simplificada do Tableau Online para o Azure Databricks usando o Microsoft Entra ID
- Databricks Runtime 8.2 (Beta)
- Nova infraestrutura estendida requer atualização para rotas personalizadas e firewalls de saída
- Limites de usuários e grupos
- Monitoramento mais fácil do status de execução do trabalho
- Os scripts de inicialização global não são mais executados em clusters de serviço de modelo
- Receber notificação por e-mail sobre a atividade no Registro Modelo
- Termina o suporte da série Databricks Runtime 6.4
-
Março de 2021
- O Azure Databricks agora oferece suporte ao modo escuro para exibir blocos de anotações
- Salve seu TCO do Azure Databricks com VMs do Azure Spot (Visualização Pública)
- Tempo de execução do Databricks 8.1 (GA)
- Criação e gestão de trabalhos mais fáceis com a interface de utilizador de trabalhos melhorada (Pré-visualização Pública)
- Rastreie as tentativas de repetição do trabalho com um novo valor sequencial retornado para cada tentativa de execução do trabalho
- Maior limite para o número de trabalhos salvos em espaços de trabalho Premium
- Maneira mais fácil de se conectar ao Azure Databricks a partir de suas ferramentas de BI favoritas e clientes SQL
- O Azure Databricks Repos permite que você use repositórios Git para integrar Databricks com sistemas CI/CD
- Tentativas automáticas de clusters de trabalho com falha revertidas
- Autenticação simplificada do Tableau Desktop para o Azure Databricks usando o Microsoft Entra ID
- Databricks Runtime 8.1 (Beta)
- O Model Serving agora suporta tipos de modelo adicionais
- Novas opções para pesquisar o Registro Modelo
- Aumento do limite para o número de clusters polivalentes terminados
- Maior limite para o número de clusters fixados em um espaço de trabalho
- Tempo de execução do Databricks 8.0 (GA)
-
Fevereiro de 2021
- Novo conector do Azure Databricks Power BI (GA)
- O log de diagnóstico de atividades do usuário no Azure Databricks é GA
- Adicionado modification_time ao status de recebimento e às respostas de lista da API REST do DBFS
- Copie facilmente nomes de experimentos longos no MLflow
- Ajustar o tamanho da memória e o número de núcleos para servir clusters
- O terminal Web agora é GA
- O conector Apache Spark para o Banco de Dados SQL do Azure e o SQL Server dá suporte ao Databricks Runtime 7.x e superior
- Termina o suporte da série Databricks Runtime 7.2
- Tempo de execução do Databricks 7.6 GA
- Databricks Runtime 8.0 (Beta)
- O Databricks Runtime para Genomics foi preterido
- Exibir JSON mais legível na exibição do artefato de execução MLflow
- Fornecer comentários no Registro Modelo usando a API REST
- Especifique facilmente valores de cluster padrão em chamadas de API
- Ajustar a configuração do trabalhador do cluster de acordo com a alocação atual do trabalhador
- Passar informações específicas de contexto para a tarefa de um trabalho com variáveis de parâmetro de tarefa
- As mensagens de erro de falhas de trabalho não contêm mais informações possivelmente confidenciais
-
Janeiro de 2021
- A conectividade segura aos clusters (sem IPs públicos) está em Disponibilidade Geral
- Fim do suporte para a série Databricks Runtime 7.1
- Iniciar clusters mais rapidamente com imagens do Docker pré-carregadas em conjuntos de instância
- A localização e substituição de bloco de notas agora suporta a alteração de todas as ocorrências de uma correspondência
- Clusters de Nó Único (Disponibilidade Geral)
- Nome do tipo de política de cluster de forma livre mudado para Sem Restrições
- Campo de política de cluster não mostrado se um utilizador apenas tiver acesso a uma política
- Fim do suporte para a série Databricks Runtime 7.0
-
Dezembro de 2020
- Databricks Runtime 7.5 Disponibilidade Geral
- A API de Tarefas agora suporta a atualização de tarefas existentes
- Nova arquitetura global de scripts init em Disponibilidade Geral
- Databricks Runtime 7.5 (Beta)
- O campo end_time da API de Tarefas agora utiliza a hora época
- Localizar ficheiros DBFS com o novo navegador visual
- Os controlos de visibilidade para trabalhos, clusters, blocos de notas e outros objetos da área de trabalho estão agora ativados por predefinição nas novas áreas de trabalho
- Apresentação melhorada de execuções aninhadas no MLflow
- Os administradores agora podem bloquear contas de utilizador (Pré-visualização Pública)
- Controlador NVIDIA atualizado
-
Novembro de 2020
- Fim do suporte para a série Databricks Runtime 6.6
- Disponibilidade Geral do Registo de Modelos MLflow
- Filtrar execuções de experimentações dependendo de um modelo registado estar ou não associado
- A galeria de integrações de parceiros está agora disponível através do separador Dados
- As políticas de cluster agora utilizam allowlist e blocklist como nomes de tipo de política
- Repetições automáticas quando a criação de um cluster de trabalhos falha
- Utilizar o índice para navegar por blocos de notas
- Databricks SQL (Visualização pública)
- Os clusters de nó único agora suportam os Serviços de Contentores do Databricks
- Databricks Runtime 7.4 Disponibilidade Geral
- Atualização do controlador JDBC do Databricks
- Databricks Connect 7.3 (Beta)
-
Outubro de 2020
- Novo conector Azure Databricks Power BI disponível no serviço de Power BI online (Pré-visualização Pública)
- Databricks Runtime 7.4 (Beta)
- Utilizar chaves geridas pelo cliente para a raiz do DBFS (Disponibilidade Geral)
- Controlo de acesso (ACLs) de experimentação alargada
- Importação e exportação de alta fidelidade de ficheiros do Jupyter Notebook (ipynb)
- Melhoramento da API SCIM: grupos diretos e indiretos devolvidos na resposta do registo de utilizador
- O ID de pedido do Azure está agora incluído nas exceções
- Fim do suporte para a série Databricks Runtime 6.5
- A conectividade a clusters seguros (sem IPs públicos) está em Pré-visualização Pública
-
Melhoramento da API SCIM: resposta do campo
$ref
- Os registos de diagnóstico (auditoria) são agora fornecidos com baixa latência
- Declaração de Suporte de Longo Prazo (LTS) do Databricks Runtime 7.3, 7.3 ML e 7.3 Genomics
- Compor imagens em resolução mais alta com matplotlib
- Utilizar a CLI ou a API do Databricks para criar âmbitos de segredos apoiados pelo Azure Key Vault
- Use tokens de ID do Microsoft Entra para autenticar na CLI do Databricks
- Novas regiões do Azure (Pré-visualização Pública)
-
Setembro de 2020
- O Databricks Runtime 7.3, 7.3 ML e 7.3 Genomics estão agora em disponibilidade geral
- Clusters de Nó Único (Pré-visualização Pública)
- Limitação de taxa da API REST do DBFS
- Novos ícones da barra lateral
- Aumento do limite de trabalhos em execução
- Listas de controlo de acesso (ACL) de artefactos no MLflow
- Melhoramentos à usabilidade do MLflow
- Novo conector do Power BI do Azure Databricks (Pré-visualização Pública)
- Utilizar chaves geridas pelo cliente para raiz DBFS (Pré-visualização Pública)
- Os novos controladores JDBC e ODBC proporcionam BI mais rápida e com menor latência
- MLflow Model Serving (Pré-visualização Pública)
- Melhorias de IU dos clusters
- Controlos de visibilidade para trabalhos, clusters, blocos de notas e outros objetos da área de trabalho
- A capacidade para criar tokens já não é permitida por predefinição
- O Registo de Modelos do MLflow suporta a partilha de modelos em todas as áreas de trabalho
- Databricks Runtime 7.3 (Beta)
- Alteração de nome do tipo de carga de trabalho do Azure Databricks
-
Agosto de 2020
- A API de Gestão de Tokens está acessível em modo de disponibilidade geral e os administradores podem utilizar a Consola de Administração para conceder e revogar o acesso dos utilizadores aos tokens
- Aumento dos limites de tamanho das mensagens para aplicações Shiny
- Instruções melhoradas para a configuração de um cluster no modo local
- Ver versão de bloco de notas associado a uma execução
- Databricks Runtime 7.2 Disponibilidade Geral
- Databricks Runtime 7.2 ML Disponibilidade Geral
- Databricks Runtime 7.2 Genomics Disponibilidade Geral
- API de Permissões (Pré-visualização Pública)
- Databricks Connect 7.1 (disponibilidade geral)
- Ordem de instalação repetível para bibliotecas de clusters
- Criar um modelo a partir da página de modelos registados do MLflow (Pré-visualização Pública)
- O Databricks Container Services suporta imagens da GPU
-
Julho de 2020
- Terminal Web (Pré-visualização Pública)
- Nova arquitetura de scripts init global mais segura (Pré-visualização Pública)
- Listas de acesso de IP agora em disponibilidade geral
- Nova caixa de diálogo de carregamento de ficheiros
- Melhoramentos à filtragem e ordenação da API do SCIM
- Regiões do Azure Government adicionadas
- Databricks Runtime 7.1 GA
- Databricks Runtime 7.1 ML GA
- Databricks Runtime 7.1 Genomics GA
- Databricks Connect 7.1 (Pré-visualização Pública)
- Atualizações à API da Lista de Acesso de IP
- Os blocos de notas em Python agora suportam várias saídas por célula
- Ver o código do bloco de notas e as células de resultados lado a lado
- Colocar em pausa os agendamentos de tarefas
- Os pontos finais da API de tarefas validam o ID de execução
- Tokens de ID do Microsoft Entra para autorizar a API REST do Databricks GA
- Formato SQL nos blocos de notas automaticamente
- Ordem de instalação reproduzível para bibliotecas Maven e CRAN
- Assuma o controlo dos tokens de acesso pessoal dos seus utilizadores com a API de Gestão de Tokens (Pré-visualização Pública)
- Restaurar células cortadas do bloco de notas
- Atribuir permissões de trabalho CAN MANAGE a usuários não administradores
- Os utilizadores do Azure Databricks que não são administradores podem ver e filtrar por nome de utilizador com a API SCIM
- Ligação para ver especificações de cluster quando está a ver detalhes de execução de trabalho
-
Junho de 2020
- O Databricks Connect suporta agora o Databricks Runtime 6.6
- Disponibilidade Geral do Databricks Runtime 7.0 ML
- Disponibilidade geral do Databricks Runtime 7.0, com tecnologia do Apache Spark 3.0
- Disponibilidade geral do Databricks Runtime 7.0 para o Genomics
- Controlos de acesso dependentes de fase para modelos do MLflow
- Os blocos de notas permitem agora desativar o deslocamento automático
- Os endereços IP do metastore vão ser alterados a 30 de junho de 2020
- O suporte para o Internet Explorer 11 termina a 15 de agosto
- Fim do suporte para a série Databricks Runtime 6.2
- Simplificar e controlar a criação de clusters com políticas de clusters (Pré-visualização Pública)
- O ponto final do SCIM Me devolve agora uma resposta compatível com o SCIM
- Limitar o acesso ao Azure Databricks com listas de acesso de IPs (Pré-visualização Pública)
-
Maio de 2020
- VMs da série Easv4 (Beta)
- Disponibilidade geral do Databricks Runtime 6.6 para o Genomics
- Disponibilidade Geral do Databricks Runtime 6.6 ML
- Disponibilidade Geral do Databricks Runtime 6.6
- Limite de tamanho do ponto final de eliminação da API REST do DBFS
- Ver facilmente grandes números de modelos registados do MLflow
- As bibliotecas configuradas para serem instaladas em todos os clusters não são instaladas em clusters que executam o Databricks Runtime 7.0 e posterior
- Disponibilidade geral do Databricks Runtime 7.0 para o Genomics (Beta)
- Databricks Runtime 7.0 ML (Beta)
- Disponibilidade geral do Databricks Runtime 6.6 para o Genomics (Beta)
- Databricks Runtime 6.6 ML (Beta)
- Databricks Runtime 6.6 (Beta)
- Os clusters de tarefas agora estão identificados com o nome e ID da tarefa
- Restaurar células de blocos de notas eliminadas
- Limite da fila de trabalhos pendentes
-
Abril de 2020
- URLs exclusivos para cada área de trabalho do Azure Databricks
- Melhoramentos à IU de controlo do MLflow
- Melhoramentos à usabilidade dos blocos de notas
- Usar tokens para autorizar a API REST do Databricks (Visualização pública)
- Os utilizadores individuais podem ver os registos do Apache Spark num cluster pass-through
- O Databricks Connect suporta agora o Databricks Runtime 6.5
- Fim do suporte para o Databricks Runtime 6.1 e 6.1 ML
- Disponibilidade Geral do Databricks Runtime 6.5
- Disponibilidade Geral do Databricks Runtime 6.5 para Machine Learning
- Disponibilidade Geral do Databricks Runtime 6.5 para o Genomics
- Fim do suporte para o Databricks Runtime 6.0 e 6.0 ML
-
Março de 2020
- Hub colaborativo do Registo de Modelos do MLflow gerido disponível (Pré-visualização Pública)
- Propagação das etiquetas de área de trabalho, conjunto e cluster para os detalhes de utilização da DBU e para as VMs do Azure para melhorar o reporte da gestão de custos
- Pré-visualizações do Databricks Runtime 7.0 (Beta) para o Apache Spark 3.0
- Databricks Runtime 6.5 ML (Beta)
- Databricks Runtime 6.5 (Beta)
- O feedback do Azure Databricks vai agora diretamente para o portal de feedback do Azure Databricks
- Desenvolver e testar aplicações Shiny no RStudio Server
- Alterar o idioma predefinido dos blocos de notas
- O Databricks Connect suporta agora o Databricks Runtime 6.4
- O Databricks Connect suporta agora o Databricks Runtime 6.3
-
Fevereiro de 2020
- Disponibilidade Geral do Databricks Runtime 6.4 para o Genomics
- Disponibilidade Geral do Databricks Runtime 6.4 ML
- Disponibilidade Geral do Databricks Runtime 6.4
- Novos gráficos interativos, que oferecem interações ricas do lado do cliente
- A nova rede de ingestão de dados acrescenta integrações dos parceiros no Delta Lake (Pré-visualização Pública)
- Adição automática do criador das áreas de trabalho como administrador do Azure Databricks
- Estão agora disponíveis sinalizadores para gerir a segurança das áreas de trabalho e funcionalidades de blocos de notas
-
Janeiro de 2020
- Brevemente: propagação das etiquetas de área de trabalho, conjunto e cluster para os detalhes de utilização da DBU e para as VMs do Azure para melhorar o reporte da gestão de custos
- Agora, o Azure Databricks e o Azure Lighthouse podem residir na mesma subscrição
- Disponibilidade Geral do Databricks Runtime 6.3 para o Genomics
- Disponibilidade Geral do Databricks Runtime 6.3 ML
- Disponibilidade Geral do Databricks Runtime 6.3
- Cache de disco ativado por padrão
- O passo de dimensionamento automático padrão dos clusters é agora configurável
- A API de SCIM suporta a paginação para Get Users e Get Groups (Pré-visualização Pública)
- A largura da pista de diagrama do explorador de ficheiros foi aumentada para 240px
- Fim do suporte para o Databricks Runtime 3.5 LTS
-
Dezembro de 2019
- O Databricks Connect suporta agora o Databricks Runtime 6.2
- Configurar clusters com a sua própria imagem de contentor mediante a utilização do Databricks Container Services (Disponibilidade Geral)
- Disponibilidade Geral do Databricks Runtime 6.2 para o Genomics
- O conector de aprovisionamento do SCIM do Azure Databricks está agora disponível na galeria de aplicações
- Fim do suporte para o Databricks Runtime 5.3 e 5.4
- Disponibilidade Geral do Databricks Runtime 6.2 ML
- Disponibilidade Geral do Databricks Runtime 6.2
- O Databricks Connect suporta agora o Databricks Runtime 6.1
-
Novembro de 2019
- Databricks Runtime 6.2 ML Beta
- Databricks Runtime 6.2 Beta
- Configurar clusters com a sua própria imagem de contentor mediante a utilização do Databricks Container Services
- Os detalhes do cluster mostram agora apenas o ID do cluster no caminho HTTP
- Segredos referenciados pelas propriedades de configuração do Spark e pelas variáveis de ambiente (Pré-visualização Pública)
-
Outubro de 2019
- As métricas de suporte foram movidas para os Hubs de Eventos do Azure
- O pass-through de credenciais do Azure Data Lake Storage em clusters padrão e em Scala está em disponibilidade geral
- Disponibilidade Geral do Databricks Runtime 6.1 para o Genomics
- Disponibilidade Geral do Databricks Runtime 6.1 para Machine Learning
- As chamadas à API do MLflow têm agora limite de taxa
- Os conjuntos de instâncias para início rápido de clusters está em disponibilidade geral
- Disponibilidade Geral do Databricks Runtime 6.1
- Disponibilidade Geral do Databricks Runtime 6.0 para o Genomics
- A capacidade de implantar um espaço de trabalho do Azure Databricks em sua própria rede virtual, também conhecida como injeção de VNet, é GA
- Os utilizadores não administradores do Azure Databricks podem ler nomes e IDs de utilizadores e de grupos com a API de SCIM
- A API de Área de Trabalho devolve IDs de blocos de notas e de objetos de pastas
- Disponibilidade Geral do Databricks Runtime 6.0 ML
- Novas regiões: Brasil Sul e França Central
- Disponibilidade Geral do Databricks Runtime 6.0
-
Setembro de 2019
- Fim do suporte para o Databricks Runtime 5.2
- Iniciar clusters automatizados apoiados por conjuntos que utilizam o Databricks Light (Pré-visualização Pública)
- Os endereços IP do gateway da Base de Dados SQL do Azure vão ser alterados a 14 de outubro de 2019
- O pass-through de credenciais do Azure Data Lake Storage é agora suportado em clusters padrão e em Scala (Pré-visualização Pública)
- Agora, os DataFrames pandas podem ser compostos em blocos de notas sem dimensionamento
- A apresentação do seletor de versão de Python é agora dinâmica
- Databricks Runtime 6.0 Beta
-
Agosto de 2019
- Nova região: UAE North
- Melhoramento à instalação da biblioteca de áreas de trabalho
- Agora, a IU dos clusters reflete uma terminologia de clusters interativos e automatizados mais consistente
- O Databricks Runtime 5.5 e o Databricks Runtime 5.5 ML contam com Manutenção de Longo Prazo (LTS)
- Notificações de alocação de instâncias para conjuntos
- Novos eventos de clusters
- Atualizações do MLflow
-
Julho de 2019
- Em breve: Databricks 6.0 não suportará Python 2
- Pré-carregar a versão do Databricks Runtime em instâncias inativas do conjunto
- As etiquetas personalizadas de clusters e as etiquetas de conjuntos funcionam melhor juntas
- O MLflow 1.1 inclui vários melhoramentos à IU e à API
- A apresentação de DataFrames pandas é composta tal como em Jupyter
- Novas regiões
- Limite de ligação do metastore atualizado
- Definir permissões em conjuntos (Pré-visualização Pública)
- Databricks Runtime 5.5 para Machine Learning
- Databricks Runtime 5.5
- Manter um conjunto de instâncias em espera para iniciar os clusters mais depressa (Pré-visualização Pública)
- Métricas do Ganglia
- Cor global nas séries
- Junho de 2019
- Maio de 2019
-
Abril de 2019
- MLflow no Azure Databricks (Disponibilidade Geral)
- Delta Lake no Azure Databricks
- Barra lateral de execuções do MLflow
- Acesse o Azure Data Lake Storage Gen1 e Gen2 automaticamente com suas credenciais de ID do Microsoft Entra (GA)
- Databricks Runtime 5.3 (Disponibilidade Geral)
- Databricks Runtime 5.3 ML (Disponibilidade Geral)
- Março de 2019
- Fevereiro de 2019
-
Janeiro de 2019
- Próxima alteração: Python 3 para se tornar o padrão quando você cria clusters
- Lançamento do Databricks Runtime 5.2 para Machine Learning (Beta)
- Vista JSON da configuração de clusters
- IU de Clusters
- Implementar o Azure Databricks na sua própria rede virtual do Azure (injeção de VNet)
- IU de Biblioteca
- Eventos de Clusters
- Controlo de Versões dos Blocos de Notas com o Azure DevOps Services
- Dezembro de 2018
-
Novembro de 2018
- IU de Biblioteca
- Definições personalizadas da memória da área dinâmica para dados do Spark ativadas
- Remoção de trabalhos e de contexto de execuções inativas
- Lançamento do Databricks Runtime 5.0 para Machine Learning (Beta)
- Lançamento do Databricks Runtime 5.0
-
Suporte para
displayHTML
para o carregamento sem restrições de conteúdos de terceiros
- Outubro de 2018
- Setembro de 2018
- Agosto de 2018
-
Julho de 2018
- A API de bibliotecas suporta arquivos de roda Python
- Exportação de blocos de Notas de Python
- Âmbitos de segredos apoiados pelo Azure Key Vault
- Áreas de trabalho Premium de Avaliação
- Modo de cluster e clusters de alta simultaneidade
- Controlo de acesso a tabelas
- Os tipos de nós de clusters não disponíveis aparecem a cinzento
- Suporte para R Markdown
- Novo design da home page, com a possibilidade de largar ficheiros para importar dados
- Comportamento predefinido dos widgets
- IU de criação de tabelas
- Importação de dados JSON multilinhas
- Junho de 2018
-
Maio de 2018
- Regulamento Geral Sobre a Proteção de Dados (RGPD)
- Os usuários do Azure Databricks devem pertencer ao locatário do Microsoft Entra ID
- HorovodEstimator
- Exportação de Modelos de ML do MLeap
- Ainda mais tipos de clusters de GPU
- Células dos blocos de notas: ocultar e mostrar
- Pesquisa no site de documentação
- Databricks Runtime 4.1 ML para Machine Learning (Beta)
- Databricks Delta
- Suporte para display() para tipos de dados de imagens
- Tipos de clusters de GPU
- Gestão de Segredos em Disponibilidade Geral
- Alterações ao ponto final da API e aos comandos da CLI de Segredos
- Afixação de clusters
- Início automático de clusters
- Purga das áreas de trabalho
- CLI 0.7.1 do Databricks
-
Abril de 2018
- CLI de Segredos
- Guias de Aprendizagem Aprofundada
- Atualização da API de Segredos para Âmbito de Criação de Segredo
- Sugestões para erros do Spark
- CLI 0.7.0 do Databricks
- Aumento do limite de truncagem da saída dos scripts init
- API de Clusters: tipo de evento UPSIZE_COMPLETED adicionado
- Comandos de preenchimento automático
- Conjuntos sem servidor atualizados para o Databricks Runtime 4.0
-
Março de 2018
- Detalhes da execução de comandos
-
A CLI do Databricks suporta
--profile
- ACLs ativadas por predefinição para os clientes novos do SKU Premium
- O Azure Databricks está agora em disponibilidade geral
- Novo tema do site de documentação
- Dimensionar automaticamente o armazenamento local
- Peering de redes virtuais (VNet)
- Registo de eventos de clusters
- Databricks CLI: versão 0.6.0
- Gestão da execução de trabalhos
- A edição das permissões de clusters exige agora o modo de edição
- Exportação de Modelo do Databricks ML
-
Fevereiro de 2018
- O novo gráfico de linhas suporta dados de séries temporais
- Mais melhoramentos às visualizações
- Eliminar execuções de trabalhos com a API de Trabalhos
- Atualização da biblioteca de matemática KaTeX
- Databricks CLI: versão 0.5.0
- Biblioteca da API de DBUtils
- Filtrar apenas pelos seus trabalhos
- Utilização de spark-submit a partir da página Criar Trabalho
- Selecionar Python 3 a partir da página Criar Cluster
- Melhoramentos à IU de Áreas de Trabalho
- Preenchimento Automático para comandos do SQL e nomes de bases de dados
- Os conjuntos sem servidor suportam agora R
- O XGBoost está disponível como Pacote do Spark
- Controlo de acesso a tabelas para SQL e Python (Beta)
-
Janeiro de 2018
- Pontos de montagem para contentores de armazenamento de Blobs do Azure e para arquivos do Data Lake Storage
- Etiquetas de clusters
- Controlo de Acesso a Tabelas para SQL e Python (Pré-visualização Privada)
- Exportação de resultados de trabalhos de blocos de notas através da API
- O Apache Airflow 1.9.0 inclui integração no Databricks