Em 9 de novembro de 2026, o Google anunciou que o Cloud Pathways passou à disponibilidade geral (GA) no Google Kubernetes Engine (GKE). Na mesma data, anunciou separadamente como Preview a integração com clusters TPU de Slurm pelo Cluster Director. Para criar o ambiente de GKE descrito pela empresa, é preciso ter as ferramentas de linha de comando, acesso à API do Kubernetes Engine e quota de TPU suficiente ou uma reserva. Os recursos provisionados pelo exemplo são cobrados. (Anúncio do Google Cloud; guia de implantação no GKE)
O que o Cloud Pathways faz
Também chamado de Pathways on Cloud, o Cloud Pathways é um runtime distribuído de aprendizado de máquina para coordenar cargas de trabalho em várias grandes fatias de TPU. A ideia central é permitir que um único cliente JAX controle o trabalho e tenha uma visão unificada dos dispositivos, em vez de organizar a execução a partir de processos separados em cada host. (Documentação do Google Cloud sobre Pathways)
O Google informou que a disponibilidade geral no GKE abrange regiões do Google Cloud com suporte a Cloud TPU v5e, TPU v5p, Trillium (TPU v6e) e Ironwood (TPU 7x). As imagens versionadas do Cloud Pathways anunciadas pela empresa são compatíveis com JAX 0.10.1 ou posterior. (Anúncio do Google Cloud)
Como o controlador único muda a execução
No JAX multi-controlador padrão, vários processos Python participam da execução, e cada um enxerga os dispositivos conectados ao próprio host. Com o Cloud Pathways, um cliente JAX coordena o trabalho e recebe uma visão conjunta dos dispositivos distribuídos pelas fatias de TPU. O JAX padrão é descrito principalmente como SPMD, modelo em que os dispositivos executam o mesmo programa; o Google diz que o Pathways também dá suporte a padrões como paralelismo de pipeline assimétrico e esparsidade computacional. (Documentação técnica do Google Cloud)
| Aspecto | JAX multi-controlador padrão | Cloud Pathways de controlador único |
| Controle | Vários processos participam; cada um tem seu próprio interpretador Python. | Um cliente JAX coordena o trabalho no sistema. |
| Visibilidade dos dispositivos | Cada processo vê os dispositivos conectados localmente. | O cliente JAX tem uma visão unificada dos dispositivos nas fatias de TPU. |
| Padrões de programação | A documentação descreve o modelo como principalmente SPMD. | Além de SPMD, dá suporte a padrões como paralelismo de pipeline assimétrico e esparsidade computacional. |
O runtime se apoia no Interim Framework Runtime (IFRT), uma estrutura de execução de código aberto. Entre os recursos anunciados pelo Google estão processos auxiliares Python junto às TPUs, cache persistente de compilação no Cloud Storage e envio assíncrono de operações XLA HLO. A empresa também descreve treinamento elástico: após uma falha de hardware, snapshots na memória do host podem permitir redistribuir a carga para N−1 fatias de TPU sem derrubar o cliente. (Anúncio do Google Cloud)
Antes de iniciar uma implantação de exemplo, confira a quota ou a reserva de TPU e planeje a exclusão do cluster quando terminar: os recursos provisionados geram cobranças.
O que a configuração de GKE exige
O guia do Google lista como pré-requisitos a CLI gcloud, o kubectl, o gke-gcloud-auth-plugin, a API Kubernetes Engine habilitada e quota de TPU suficiente ou uma reserva para as fatias que serão criadas. (Guia de implantação do Google Cloud)
No exemplo manual, a configuração inclui pools de nós de TPU e de CPU; o pool de CPU hospeda o cabeçalho do Pathways. O guia também orienta aplicar os manifestos da API JobSet e verificar se o controlador JobSet está em execução antes de enviar cargas de trabalho. Os parâmetros de TPU v6e, topologia 2x4 e dois nós por fatia são valores desse exemplo, não mínimos universais.
O exemplo usa o Cloud Storage para arquivos temporários e cache de código compilado. Na configuração de metadados de nó indicada pelo guia, a conta de serviço dos nós precisa da função roles/storage.objectAdmin no bucket. O cluster e os pools de nós de TPU e CPU criados são recursos cobrados; o Google recomenda excluir o cluster ao terminar para evitar cobranças contínuas. (Guia de implantação do Google Cloud)