Engenheiro(a) de Qualidade Sr | IA + Python

Estamos em busca de um(a) Engenheiro(a) de Qualidade Sr com sólida experiência em qualidade, IA e desenvolvimento com Python para atuar na evolução de produtos baseados em Inteligência Artificial, garantir a qualidade das aplicações e contribuir para a confiabilidade de soluções que utilizam LLMs, agentes de IA e pipelines inteligentes.

• Construir e evoluir a estratégia de testes para produtos de Inteligência Artificial.
• Desenvolver e manter testes automatizados (unitários, integração, regressão e end-to-end).
• Definir estratégias de testes para aplicações que utilizam LLMs, agentes e pipelines de IA.
• Estruturar processos, ferramentas e boas práticas de qualidade.
• Apoiar a evolução da arquitetura de testes e observabilidade das aplicações.
• Desenvolver código em Python para automação, validação e suporte aos testes.
• Validar APIs, integrações e regras de negócio.
• Trabalhar em conjunto com o time de desenvolvimento para garantir entregas com alta confiabilidade.

• Vivência com automação de testes.
• Experiência com desenvolvimento em Python.
• Experiência com testes unitários, integração, regressão e end-to-end.
• Capacidade de validar fluxos de negócio e integrações.
• Interesse genuíno por Inteligência Artificial e produtos baseados em IA.
• Experiência com testes de APIs REST.
• Conhecimento em Git.
• Conhecimento em SQL.

• Experiência com observabilidade de LLMs utilizando Phoenix (Arize), Langfuse ou LangSmith.
• Conhecimento do JEV, modelo de inteligência artificial focado em tomada de decisões e classificação.
• Conhecimento em LangGraph.
• Experiência com frameworks de avaliação de LLMs, como RAGAS e DeepEval.
• Experiência com testes de carga utilizando k6.
• Vivência com monitoramento utilizando Datadog.
• Experiência com GitHub Actions ou CircleCI.
• Conhecimento em arquitetura de aplicações distribuídas e em integrações.