mercor
DevOps Engineer- AI Model Evaluator
Vaga remota de Site Reliability Engineering com fit claro de localização do candidato.
Publicada19 de jul. de 2026
Países elegíveis1 país aceito
Sinal de senioridadeMiddle
Modelo de trabalhoRemoto
Locais aceitos para candidatos
Alemanha
Resumo da vaga
DevOps Engineer- AI Model Evaluator
Requisitos e responsabilidades
Conteúdo da vaga extraído em seções para revisão mais rápida.
Role Responsibilities
- Use frontier AI coding agents to complete and evaluate complex infrastructure engineering tasks.
- Review model-generated implementations involving cloud platforms, Kubernetes, CI/CD systems, and infrastructure automation.
- Identify bugs, edge cases, reliability issues, and failure modes in model outputs.
- Compare outputs from multiple frontier models to assess strengths and weaknesses.
- Apply professional engineering judgment to realistic infrastructure engineering scenarios.
QualificationsMust-Have
- 2+ years of professional DevOps, SRE, or Cloud Engineering experience.
- Experience with AWS, Azure, GCP, Kubernetes, Terraform, CI/CD pipelines, or observability tooling.
- Regular use of AI coding agents like Cursor, Claude Code, Codex, Windsurf, Gemini CLI, or similar tools.
- Ability to evaluate model-generated infrastructure and reliability engineering solutions.
Preferred
- Experience supporting production-scale systems.
Compensation & Legal
- $400 per accepted task.
- Compensation is tied to accepted work.
Application Process (Takes 20–30 mins to complete)
- Upload resume
- AI interview based on your resume
- Submit form
Resources & Support
- For details about the interview process and platform information, please check: https://talent.docs.mercor.com/welcome
- For any help or support, reach out to: [email protected]
Vagas similares
Mantenha uma lista reserva.
AWS, Azure 6 países aceitos
Senior Technical Program ManagerMorgan StanleyVer vaga CI/CD, Kubernetes 1 país aceito
Senior Software Engineer (Java)AppianVer vaga AWS, Kubernetes 1 país aceito
Lead Platform EngineerAppianVer vaga AWS, CI/CD 13 países aceitos
Senior QA Automation EngineerSubway EcommerceVer vaga Stack
Use estas tags para comparar vagas remotas similares.
Elegibilidade de localização
Candidatos devem aplicar apenas quando o país do perfil estiver listado aqui.
Seu perfilPaís não definidoEntre para comparar seu país com esta vaga.
Fluxo de contratação
O WithMira mostra a vaga e depois envia candidatos para a aplicação da empresa.
1Confira fit da vaga, stack e elegibilidade de localização no WithMira.
2Abra a página de aplicação da empresa pelo link rastreado.
3Salve a vaga ou assine oportunidades similares antes de sair.