Partilhar via


Notas de versão do Azure HDInsight no AKS

Nota

Vamos desativar o Azure HDInsight no AKS em 31 de janeiro de 2025. Antes de 31 de janeiro de 2025, você precisará migrar suas cargas de trabalho para o Microsoft Fabric ou um produto equivalente do Azure para evitar o encerramento abrupto de suas cargas de trabalho. Os clusters restantes na sua subscrição serão interrompidos e removidos do anfitrião.

Apenas o apoio básico estará disponível até à data da reforma.

Importante

Esta funcionalidade está atualmente em pré-visualização. Os Termos de Utilização Suplementares para Pré-visualizações do Microsoft Azure incluem mais termos legais que se aplicam a funcionalidades do Azure que estão em versão beta, em pré-visualização ou ainda não disponibilizadas para disponibilidade geral. Para obter informações sobre essa visualização específica, consulte Informações de visualização do Azure HDInsight no AKS. Para perguntas ou sugestões de recursos, envie uma solicitação no AskHDInsight com os detalhes e siga-nos para obter mais atualizações na Comunidade do Azure HDInsight.

Este artigo fornece informações sobre as atualizações de versão mais recentes do Azure HDInsight no AKS. Para obter informações sobre versões anteriores, consulte Notas de versão arquivadas do Azure HDInsight no AKS. Se você gostaria de se inscrever em notas de versão, assista aos lançamentos neste repositório GitHub.

Resumo

O HDInsight no AKS é uma plataforma como serviço (PaaS) moderna, confiável, segura e totalmente gerenciada que é executada no Serviço Kubernetes do Azure (AKS). O HDInsight no AKS permite que você implante cargas de trabalho populares do Open Source Analytics, como Apache Spark™, Apache Flink®️ e Trino, sem a sobrecarga de gerenciar e monitorar contêineres.

Você pode criar aplicativos de Big Data completos e em escala de petabytes que abrangem streaming através do Apache Flink, engenharia de dados e aprendizado de máquina usando o Apache Spark e o poderoso mecanismo de consulta do Trino.

Todos esses recursos combinados com o HDInsight no forte foco do desenvolvedor da AKS permitem que empresas e nativos digitais com profunda experiência técnica criem e operem aplicativos adequados às suas necessidades. O HDInsight no AKS permite que os desenvolvedores acessem todas as configurações avançadas fornecidas pelo software de código aberto e a extensibilidade para incluir perfeitamente outras ofertas do ecossistema. Essa oferta permite que os desenvolvedores testem e ajustem seus aplicativos para extrair o melhor desempenho a um custo ideal.

Nota

Para entender sobre o HDInsight no controle de versão e suporte do AKS, consulte o esquema de controle de versão.

Você pode consultar a página Novidades para obter todos os detalhes dos recursos atualmente em visualização pública para esta versão.

Importante

O HDInsight no AKS usa práticas de implantação seguras, que envolvem a implantação gradual da região. Pode levar até 10 dias úteis para que uma nova versão ou uma nova versão esteja disponível em todas as regiões.

Informações de lançamento

Data de lançamento: 05 Sep 2024

Esta versão aplica-se ao seguinte

  • Versão do pool de clusters: 1.2
  • Versão do cluster: 1.2.1
  • AKS versão: 1.27

Atualizado

A versão mais recente da API é a seguinte.

https://github.com/Azure/azure-rest-api-specs/blob/main/specification/hdinsight/resource-manager/Microsoft.HDInsight/HDInsightOnAks/preview/2024-05-01-preview/hdinsight.json.

Importante

Para aproveitar todos esses recursos mais recentes, é necessário criar um novo pool de clusters com 1.2 e a versão 1.2.1 do cluster

Problemas conhecidos

  • Limitação de identidade da carga de trabalho:
    • Há uma limitação conhecida ao fazer a transição para a identidade da carga de trabalho. Esta limitação deve-se à natureza sensível à permissão das operações FIC. Os usuários não podem executar a exclusão de um cluster excluindo o grupo de recursos. As solicitações de exclusão de cluster devem ser acionadas pelo aplicativo/usuário/principal com permissões FIC/delete. Caso a exclusão FIC falhe, a exclusão de cluster de alto nível também falhará.
    • Suporte a Identidades Gerenciadas Atribuídas pelo Usuário (UAMI) – Há um limite de 20 FICs por UAMI. Você só pode criar 20 credenciais federadas em uma identidade. No HDInsight no cluster AKS, FIC (Federated Identity Credential) e SA têm mapeamento um-para-um e apenas 20 SAs podem ser criadas em relação a um MSI. Se você quiser criar mais clusters, será necessário fornecer MSIs diferentes para superar a limitação.
    • Atualmente, não há suporte para a criação de credenciais de identidade federada em identidades gerenciadas atribuídas pelo usuário criadas nessas regiões

Versão do sistema operacional

  • Mariner OS 2.0

Versões de carga de trabalho

Carga de trabalho Versão
Trino 440
Flink 1.17.0
Faísca Apache 3.4

Versões Java e Scala suportadas

Carga de trabalho Java Scala
Trino Abrir JDK 21.0.2
Flink Abrir JDK 11.0.21 2.12.7
Spark Abra o JDK 1.8.0_345 2.12.15

A pré-visualização está disponível nas seguintes regiões.

Se tiver mais alguma dúvida, contacte o Suporte do Azure ou consulte a página de opções de Suporte. Se você tiver feedback específico do produto, escreva-nos aka.ms/askhdinsight.

Próximos passos