Engenheiro(a) de IA PJ | Remoto | Atuação em engenharia de IA aplicada a software. Foco em agentes, qualidade, avaliação e plataforma de desenvolvimento com LLMs. Estamos em busca de uma pessoa Engenheira de IA Sênior para atuar na construção e evolução da plataforma que sustenta o uso de agentes e LLMs no desenvolvimento de software. A posição exige uma combinação sólida entre engenharia de software e IA aplicada em produção. O desafio vai além da criação de prompts: envolve estruturar harnesses, orquestração de agentes, avaliações automatizadas, gates de qualidade, telemetria e mecanismos que tornem o uso de IA previsível, mensurável e escalável para todo o time. O que você vai encontrar no desafio: <ul> <li>Projetar e evoluir harnesses para execução e controle de agentes de IA</li> <li>Estruturar padrões de orquestração, uso de ferramentas e contexto</li> <li>Criar e versionar prompts com critérios claros de qualidade</li> <li>Desenvolver testes de regressão para comportamentos baseados em LLM</li> <li>Construir avaliações automatizadas (evals) para medir a qualidade das saídas</li> <li>Implementar telemetria e acompanhamento de performance e custos</li> <li>Transformar critérios de qualidade em gates automatizados</li> <li>Estruturar ferramentas reutilizáveis para os times de engenharia</li> <li>Investigar falhas e comportamentos inesperados dos modelos</li> <li>Contribuir para a evolução contínua da qualidade da frota de agentes</li> </ul> Requisitos técnicos: Engenharia de Software e IA <ul> <li>5+ anos de experiência em Engenharia de Software</li> <li>1+ ano de experiência construindo aplicações baseadas em LLM em produção</li> <li>Orquestração de agentes</li> <li>Tool use</li> <li>RAG</li> <li>Design e gerenciamento de contexto</li> </ul> Prompt Engineering <ul> <li>Engenharia de prompt estruturada e disciplinada</li> <li>Versionamento de prompts</li> <li>Testes e regressão</li> <li>Avaliação sistemática de alterações</li> </ul> Avaliação e Observabilidade <ul> <li>Construção de avaliações automatizadas (evals)</li> <li>Telemetria de aplicações baseadas em IA</li> <li>Monitoramento da qualidade das respostas</li> <li>Controle e acompanhamento de custo de tokens</li> </ul> Qualidade e Automação <ul> <li>Construção de gates automatizados</li> <li>Tradução de critérios de qualidade em verificações objetivas</li> <li>Automação de validações capazes de bloquear entregas fora do padrão</li> <li>Desenvolvimento de ferramentas reutilizáveis para outros times</li> </ul> Benefícios FMX: <ul> <li>Wellhub</li> <li>Starbem</li> <li>Avus (extensível para até 4 dependentes)</li> <li>Clube iFood</li> <li>Recesso remunerado conforme acordado</li> <li>Premiação mensal por desempenho e resultados via iFood Benefícios</li> </ul> Faça parte da FMX: Conectamos pessoas, tecnologia e inovação para criar soluções que geram valor. Venha fazer parte de um time que acredita no aprendizado contínuo, na colaboração e no protagonismo profissional.