Configurando pools iniciais no Microsoft Fabric

Neste artigo, explicamos como personalizar pools iniciais no Microsoft Fabric para suas cargas de trabalho de análise. Os pools iniciais são uma maneira rápida e fácil de usar o Spark na plataforma Microsoft Fabric em segundos. Você pode usar as sessões do Spark imediatamente, em vez de esperar que o Spark configure os nós para você, o que ajuda você a fazer mais com dados e obter insights mais rapidamente.

As piscinas iniciais têm clusters Spark que estão sempre ligados e prontos para os seus pedidos. Eles usam nós de tamanho médio e podem ser ampliados com base em seus requisitos de carga de trabalho.

Você pode especificar os nós máximos para dimensionamento automático com base nos requisitos de carga de trabalho de engenharia de dados ou ciência de dados. Com base nos nós máximos configurados, o sistema adquire e desativa dinamicamente os nós à medida que os requisitos de computação da tarefa mudam, o que resulta em dimensionamento eficiente e melhor desempenho.

Você também pode definir o limite máximo para executores em pools iniciais e, com a Alocação Dinâmica habilitada, o sistema ajusta o número de executores dependendo do volume de dados e das necessidades de computação no nível do trabalho. Esse processo permite que você se concentre em suas cargas de trabalho sem se preocupar com otimização de desempenho e gerenciamento de recursos.

Configurar pools iniciais

Para gerenciar o pool inicial associado ao seu espaço de trabalho:

1. Vá para o seu espaço de trabalho e escolha as configurações do espaço de trabalho.

   

2. Em seguida, selecione a opção Engenharia de Dados/Ciência para expandir o menu.

   

3. Selecione a opção StarterPool .

   

4. Você pode definir a configuração máxima do nó para seus pools iniciais para um número permitido com base na capacidade comprada ou reduzir a configuração padrão do nó máximo para um valor menor ao executar cargas de trabalho menores.

   

A seção a seguir lista várias configurações padrão e os limites máximos de nós suportados para pools iniciais com base em SKUs de capacidade do Microsoft Fabric:

Conteúdos relacionados

• Saiba mais na documentação pública do Apache Spark.
• Introdução às configurações de administração do espaço de trabalho do Spark no Microsoft Fabric.