Opportunity Description

Responsabilidades e atribuições

  • Operar, otimizar e evoluir o runtime de agentes e a infraestrutura de inferência de LLMs em produção;
  • Definir e implementar arquitetura de endpoints de modelo com foco em SLOs de latência e disponibilidade;
  • Projetar e manter pipelines completos de observabilidade: métricas, logs estruturados, traces distribuídos e alertas inteligentes;
  • Conduzir otimizações avançadas de performance: batching dinâmico, caching semântico, quantização e gestão de contexto;
  • Liderar resposta a incidentes e análises de causa raiz em falhas do ambiente de inferência;
  • Definir padrões de resiliência e estratégias de failover para workloads de LLM em produção;
  • Produzir runbooks, playbooks e documentação operacional de referência para o ambiente;

Requisitos e qualificações

Habilidades Necessárias
  • Expertise em operação de modelos de linguagem em produção com foco ...
Full-time Arquitetura e design de software

Interested in this opportunity? Apply now through Expertini.

Apply for this Position