🎁 Antes de se candidatar, treine esta entrevista. Crie sua conta grátis no WorkMundi e ganhe um Treinamento de Entrevista no HelpsYouSpeak — sem custo, sem cartão. Quero meu treinamento →
Principais responsabilidades: 1. Definir a estratégia e os casos de teste dos agentes de IA (testes funcionais e de qualidade de resposta). 2. Avaliar acurácia, relevância, tom, alucinações e aderência aos guardrails dos agentes. 3. Criar datasets de avaliação e métricas de qualidade (ex.: groundedness, precisão e cobertura). 4. Testar fluxos construídos no Copilot Studio e no Power Automate. 5. Conduzir testes de segurança e de conteúdo (red-teaming básico). 6. Documentar defeitos, acompanhar correções e validar as entregas antes de cada publicação. 7. Criar documentação técnica e funcional. 8. Avaliar novas tecnologias (OpenAI, Anthropic, LangChain, CrewAI, etc.). Requisitos Técnicos: 1. Experiência com QA / testes de software (manual e/ou automatizado). 2. Conhecimento em LLMs, orquestração de agentes e desenvolvimento low-code. 3. Entendimento de IA generativa e das limitações dos LLMs. 4. Experiência com frameworks de agentes (LangChain, LangGraph ou similares). 5. Experiência com arquiteturas multiagentes. 6. Capacidade de estruturar critérios de avaliação e casos de teste. 7. Disponibilidade para modelo híbrido em São Paulo. Diferencial: 8. Conhecimento em Azure AI Foundry (recursos de avaliação de modelos). 9. Vivência com ferramentas de avaliação de LLM (evals) e automação de testes. 10. Noções de prompt engineering e experiência com Databricks. Habilidades Comportamentais: 1. Perfil consultivo e colaborativo. 2. Pensamento Crítico: Capacidade de questionar respostas geradas pela IA, identificar inconsistências e antecipar possíveis riscos antes da publicação.
Here's where they are and how to stand out in your applications.
19.149Jobs
10.110BR
2%EN
Brazil alone has 10,110 of them. Colombia has 4,664. If you're job hunting in Latin America, the analista role is everywhere—which means competition is real. But scale cuts both ways: more jobs means more chances to find the right fit.
Before you apply, map the geography. The top five countries by volume are BR, CO, CL, PE, and AR. Check whether the role you want exists in your region or whether you need to look across borders. Some positions may offer remote work; others won't say until you ask.
When you interview, expect questions about your process. Hiring managers for analista roles almost always ask: 'Walk me through how you'd approach a problem you've never seen before.' They want to hear your method, not just your answer. Show them you think systematically, that you ask clarifying questions, and that you break complex work into steps.
The employers posting most are COMPUTRABAJO, Confidencial, LEADERSEARCH SAS, and MAGNETO GLOBAL S.A.S. Research these companies before you apply. Understand their hiring patterns and what they value in candidates.