Nota
O acesso a esta página requer autorização. Pode tentar iniciar sessão ou alterar os diretórios.
O acesso a esta página requer autorização. Pode tentar alterar os diretórios.
A filtragem de itens de trabalho é uma capacidade de encaminhamento no Durable Task Scheduler que entrega cada item de trabalho apenas aos trabalhadores que declaram alojar a orquestração ou atividade correspondente. Os fluxos de trabalho de produção frequentemente combinam etapas com diferentes necessidades computacionais, como coordenação leve, atividades de grande escala e processamento especializado. Sem uma forma de encaminhar cada etapa de forma independente, essas etapas competem pela mesma capacidade ou obrigam-te a construir uma infraestrutura de coordenação separada para cada uma.
Este encaminhamento baseia-se numa topologia de rede plana : cada trabalhador liga-se de saída ao agendador em vez de diretamente a outros trabalhadores. Como resultado, o orquestrador coordena o roteamento por si, sem necessidade de descoberta de serviços, portas de entrada ou de uma camada de comunicação dedicada que tenha de criar e operar por si.
Neste artigo, irá aprender quando utilizar a filtragem de itens de trabalho e como o agendador encaminha cada etapa para os recursos de computação adequados.
Quando usar filtragem de itens de trabalho
A filtragem de itens de trabalho é mais útil quando as etapas de um único fluxo de trabalho têm requisitos de execução diferentes. Sem isso, cada etapa corre no mesmo pool de computação, por isso dimensionas todo o fluxo de trabalho para a sua etapa mais exigente, e componentes especializados ou sempre ativos competem com todos os outros em termos de capacidade. Os cenários seguintes mostram como encaminhar cada etapa para os recursos computacionais mais adequados a cada uma resolve esse problema.
Combine capacidade de computação sempre ativa e com escalabilidade até zero
Algumas partes de uma aplicação permanecem a funcionar continuamente, enquanto outras não devem custar nada quando estão ociosas. Ao usar a filtragem de itens de trabalho, pode colocar cada etapa na camada de computação mais adequada à respetiva carga de trabalho.
- Execute componentes sempre ativos em ready compute, como o Azure Kubernetes Service (AKS), para que as orquestrações comecem imediatamente.
- Execute componentes com picos de atividade e orientados por eventos em plataformas de computação sem servidor, como o Azure Container Apps ou o Funções do Azure, que escalam de zero quando surgem pedidos de processamento e regressam a zero quando estes deixam de existir.
A filtragem garante que cada camada processa apenas as cargas de trabalho que aloja, para que os componentes com picos de atividade nunca monopolizem os recursos dos que estão sempre ativos, e a capacidade de computação com escalonamento até zero só é ativada para as atividades pelas quais é responsável. Para detalhes sobre autoescalonamento, veja Configurar autoescalabilidade para Azure Container Apps.
Um processo de trabalho de orquestração sempre ativo no Azure Kubernetes Service e um processo de trabalho de atividade com escala até zero no Azure Container Apps ou no Funções do Azure estabelecem, cada um, uma ligação de saída ao Durable Task Scheduler.
Dimensione adequadamente os recursos de computação para cada etapa da atividade
Quando um passo consome muito mais memória ou CPU do que o resto, dimensionar toda a implementação desse passo desperdiça recursos. A filtragem de itens de trabalho permite-lhe alocar recursos por etapa dentro de um único fluxo de trabalho.
- Dê à atividade exigente – por exemplo, uma etapa de agregação de dados que carrega um grande conjunto de dados na memória – o seu próprio trabalhador num SKU maior, e regista apenas essa atividade aí.
- Execute passos alternados em workers mais pequenos e mais baratos.
Dimensiona-se cada trabalhador de acordo com o trabalho que realiza, em vez de escalar um único desdobramento uniforme para satisfazer os requisitos do maior passo.
Os trabalhadores SKU pequenos tratam de atividades leves e um trabalhador SKU grande gere uma atividade que consome muita memória, com todos os trabalhadores a serem encaminhados através do Agendador de Tarefas Durável.
Trabalho de roteamento para hardware especializado
Um único passo num fluxo de trabalho pode precisar de hardware especializado que o resto da aplicação não precisa. Por exemplo, um fluxo de trabalho corre principalmente no Funções do Azure, mas uma etapa requer que uma GPU execute um modelo de IA. O agendador despacha essa etapa para um trabalhador a correr no Azure Container Apps numa infraestrutura com GPU, e o fluxo de trabalho continua depois no Funções do Azure.
Implemente um worker com GPU que registe apenas a atividade da GPU e mantenha o resto do fluxo de trabalho na sua infraestrutura de computação padrão. O agendador encaminha os itens de trabalho de cada atividade para o trabalhador criado para ela, por isso a infraestrutura da GPU executa apenas o trabalho que precisa.
Um cliente inicia um fluxo de trabalho no Durable Task Scheduler. Funções do Azure gere a orquestração e as atividades da CPU, e um processo de trabalho do Azure Container Apps com suporte para GPU gere a atividade da GPU.
Como funciona a filtragem de itens de trabalho
O Durable Task Scheduler divide a execução da orquestração em unidades de trabalho distintas chamadas itens de trabalho. Existem três tipos principais de itens de trabalho:
- Itens de trabalho de orquestração: Execute código orquestrador que coordene o fluxo de trabalho.
- Itens de trabalho da atividade: Executam funções de atividade individuais que realizam o trabalho efetivo, como validar uma encomenda ou expedi-la.
- Itens de trabalho da entidade: Execute operações em entidades duráveis que o agendador encaminhe pelo nome da entidade registada.
Um trabalhador é qualquer processo que se liga ao agendador para puxar e executar itens de trabalho. Um trabalhador pode hospedar orquestrações, atividades, entidades e qualquer combinação delas.
Entregar qualquer item de trabalho a qualquer trabalhador ligado funciona bem quando um único trabalhador, ou um grupo de trabalhadores idênticos, regista todas as tarefas no fluxo de trabalho. A filtragem de itens de trabalho dá-te uma alternativa: podes encaminhar itens específicos para trabalhadores específicos. Cada trabalhador regista apenas as tarefas que hospeda, e o agendador encaminha apenas itens de trabalho correspondentes a ele.
Quando um trabalhador inicia, regista as suas tarefas locais e ativa a filtragem. O SDK gera uma lista de filtros a partir das tarefas registadas e envia-a para o agendador quando o trabalhador se liga. O agendador cria filas por filtro e encaminha cada item de trabalho para a fila que corresponde ao tipo de tarefa. Um trabalhador retira apenas de filas que correspondem aos seus filtros.
Por exemplo, num fluxo de trabalho de processamento de encomendas:
- O trabalhador Orchestrator regista
OrderProcessingOrchestratione recebe apenas itens de trabalho de orquestração. - O trabalhador de validação regista
ValidateOrdere recebe apenasValidateOrderitens de trabalho de atividade. - O trabalhador expedidor regista-se
ShipOrdere recebe apenasShipOrderos itens de trabalho da atividade.
O encaminhamento é estrito. Não há alternativa para outro trabalhador:
- Se nenhum trabalhador registar uma determinada tarefa, os itens de trabalho permanecem
Pendingaté que um trabalhador correspondente se ligue. - A orquestração que depende dessa tarefa permanece no estado
Runningaté que o item de trabalho pendente esteja concluído.
Esta rigor garante que o agendador nunca entregue um item de trabalho a um trabalhador que não o consiga processar.
Suporte à filtragem de itens de trabalho por Durable Task SDK
| SDK de Tarefas Duráveis | Filtragem de itens de trabalho |
|---|---|
| .NET | Available |
| Java | Available |
| Python | Available |
| Go (beta) | Available |
| JavaScript | Ainda não está disponível |
| PowerShell | Ainda não está disponível |
Ativar filtragem de itens de trabalho
Cada trabalhador regista apenas as tarefas que hospeda, e o SDK usa esse registo para gerar os filtros de itens de trabalho do trabalhador. Ativar a filtragem de itens de trabalho difere ligeiramente entre SDKs.
O sistema gera automaticamente filtros de itens de trabalho a partir do que cada trabalhador regista no seu registo de tarefas, por isso não precisa de fazer uma chamada explícita.
builder.Services.AddDurableTaskWorker()
.AddTasks(registry =>
{
registry.AddAllGeneratedTasks();
})
.UseDurableTaskScheduler(connectionString);
Observação
No .NET Durable Task SDK, o registo de tarefas gera automaticamente filtros de itens de trabalho. Para sobrescrever os filtros gerados ou optar por não filtrar, chame UseWorkItemFilters(customFilters) ou UseWorkItemFilters(null), respetivamente.
Considerations
- O encaminhamento rigoroso não tem alternativa. Se nenhum trabalhador ligado registar uma tarefa, os itens de trabalho da tarefa permanecem pendentes e a orquestração dependente mantém-se no
Runningestado. Garante que pelo menos um trabalhador hospeda todas as tarefas que um fluxo de trabalho chama. - Discrepâncias de registo durante as atualizações. Ao dividir ou renomear tarefas, implemente os workers que executam as novas tarefas antes de agendar orquestrações que dependam delas.
- Monitoriza o atraso pendente. Use o painel de monitorização para observar trabalhos pendentes que indiquem um trabalhador desaparecido ou com doença de saúde.
- Dimensionamento automático. Quando hospeda trabalhadores em Azure Container Apps, uma regra de escala KEDA (Kubernetes Event-driven Autoscaling) pode escalar cada trabalhador com base no backlog dos tipos de itens de trabalho que registou. Para mais informações, veja Configurar autoescalabilidade para Azure Container Apps.