O Okteto AI usa um mecanismo inteligente de alocação de GPU para resolver o desperdício de recursos:
- alocação dinâmica: em
okteto.yml
Declare os requisitos da GPU em (por exemplogpu: 1
), a plataforma aloca recursos apenas durante o treinamento - recuperação automáticaApós a conclusão do treinamento, execute
okteto down
Liberação imediata da GPU para evitar consumo ocioso - Monitoramento de recursosPainel de controle do administrador: o painel de controle do administrador exibe o uso da GPU em tempo real, as temperaturas e muito mais!
- controle de custosEnterprise Edition: suporta a definição de cotas de uso de GPU e regras de alerta
Os testes mostram que o método economiza 471 TP3T em custos de computação em nuvem em comparação com os métodos tradicionais de alocação fixa.
Essa resposta foi extraída do artigoOkteto AI: uma plataforma de desenvolvimento baseada em nuvem que executa agentes de IA confiáveisO