Partilhar via


Guia de início rápido: criar um novo pool do Apache Spark sem servidor usando o portal do Azure

O Azure Synapse Analytics oferece vários mecanismos de análise para ajudá-lo a ingerir, transformar, modelar, analisar e distribuir seus dados. Um pool do Apache Spark fornece recursos de computação de big data de código aberto. Depois de criar um pool do Apache Spark em seu espaço de trabalho Synapse, os dados podem ser carregados, modelados, processados e distribuídos para uma visão analítica mais rápida.

Neste início rápido, você aprenderá a usar o portal do Azure para criar um pool do Apache Spark em um espaço de trabalho Synapse.

Importante

O faturamento de instâncias do Spark é rateado por minuto, independentemente de você usá-las ou não. Certifique-se de desligar sua instância do Spark depois de terminar de usá-la ou definir um curto tempo limite. Para obter mais informações, consulte a secção Limpar recursos deste artigo.

Se não tiver uma subscrição do Azure, crie uma conta gratuita antes de começar.

Pré-requisitos

Inicie sessão no portal do Azure

Inicie sessão no portal do Azure

  1. Navegue até o espaço de trabalho Synapse onde o pool do Apache Spark será criado digitando o nome do serviço (ou nome do recurso diretamente) na barra de pesquisa. Screenshot of the Azure portal search bar with Synapse workspaces typed in.

  2. Na lista de espaços de trabalho, digite o nome (ou parte do nome) do espaço de trabalho a ser aberto. Neste exemplo, usamos um espaço de trabalho chamado contosoanalytics. Screenshot from the Azure portal of the list of Synapse workspaces filtered to show those containing the name Contoso.

Criar novo pool do Apache Spark

Importante

O Azure Synapse Runtime for Apache Spark 2.4 foi preterido e oficialmente não tem suporte desde setembro de 2023. Como o Spark 3.1 e o Spark 3.2 também estão anunciados como o fim do suporte, recomendamos que os clientes migrem para o Spark 3.3.

  1. No espaço de trabalho Synapse onde você deseja criar o pool do Apache Spark, selecione Novo pool do Apache Spark. Screenshot from the Azure portal of a Synapse workspace with a red box around the command to create a new Apache Spark pool.

  2. Insira os seguintes detalhes na guia Noções básicas :

    Definição Valor sugerido Descrição
    Nome do pool do Apache Spark Um nome de pool válido, como contosospark Este é o nome que o pool do Apache Spark terá.
    Tamanho do nó Pequeno (4 vCPU / 32 GB) Defina isso para o menor tamanho para reduzir os custos deste início rápido
    Dimensionamento Automático Desativado Não precisamos de dimensionamento automático para este início rápido
    Número de nós 5 Use um tamanho pequeno para limitar os custos deste início rápido

    Screenshot from the Azure portal of the Apache Spark pool create flow - basics tab.

    Importante

    Há limitações específicas para os nomes que os pools do Apache Spark podem usar. Os nomes devem conter apenas letras ou números, devem ter 15 ou menos caracteres, devem começar com uma letra, não conter palavras reservadas e ser exclusivos no espaço de trabalho.

  3. Selecione Seguinte: definições adicionais e reveja as predefinições. Não modifique nenhuma configuração padrão. Screenshot from the Azure portal that shows the 'Create Apache Spark pool' page with the 'Additional settings' tab selected.

  4. Selecione Next: tags. Considere usar marcas do Azure. Por exemplo, a tag "Owner" ou "CreatedBy" para identificar quem criou o recurso e a tag "Environment" para identificar se esse recurso está em Produção, Desenvolvimento, etc. Para obter mais informações, consulte Desenvolver sua estratégia de nomenclatura e marcação para recursos do Azure. Screenshot from the Azure portal of Apache Spark pool create flow - additional settings tab.

  5. Selecione Rever + criar.

  6. Certifique-se de que os detalhes parecem corretos com base no que foi inserido anteriormente e selecione Criar. Screenshot from the Azure portal of Apache Spark pool create flow - review settings tab.

  7. Neste ponto, o fluxo de provisionamento de recursos será iniciado, indicando quando estiver concluído. Screenshot from the Azure portal of that shows the 'Overview' page with a 'Your deployment is complete' message displayed.

  8. Após a conclusão do provisionamento, navegar de volta para o espaço de trabalho mostrará uma nova entrada para o pool do Apache Spark recém-criado. Screenshot from the Azure portal of Apache Spark pool create flow - resource provisioning.

  9. Neste ponto, não há recursos em execução, não há cobranças para o Spark, você criou metadados sobre as instâncias do Spark que deseja criar.

Clean up resources (Limpar recursos)

As etapas a seguir excluem o pool do Apache Spark do espaço de trabalho.

Aviso

A exclusão de um pool do Apache Spark removerá o mecanismo de análise do espaço de trabalho. Não será mais possível se conectar ao pool e todas as consultas, pipelines e notebooks que usam esse pool do Apache Spark não funcionarão mais.

Se você quiser excluir o pool do Apache Spark, execute as seguintes etapas:

  1. Navegue até o painel de pools do Apache Spark no espaço de trabalho.
  2. Selecione o pool do Apache Spark a ser excluído (neste caso, contosospark).
  3. Selecione Eliminar. Screenshot from the Azure portal of a list of Apache Spark pools, with the recently created pool selected.
  4. Confirme a exclusão e selecione o botão Excluir . Screenshot from the Azure portal of the Confirmation dialog to delete the selected Apache Spark pool.
  5. Quando o processo for concluído com êxito, o pool do Apache Spark não será mais listado nos recursos do espaço de trabalho.