English-Speaking AI Data Evaluation Specialist | Large Language Models
Onde
Sabes onde fica? Indica o local (4 empresas confirmadas = 1 mês de Plus)
Entra e indica onde moras para ver o tempo de viagem.
Em resumo IA
Avaliação e anotação de respostas geradas por modelos de linguagem (LLM) para uma empresa global de experiência do cliente, em regime presencial em Lisboa. Horário rotativo 24/7 com dois dias de folga rotativos. Inclui formação inicial especializada.
Descrição
anúncio longo (3 044 caracteres): a IA resumiu-o; o texto integral está no separador ao lado.
- Função
- Rever, avaliar e anotar respostas geradas por IA segundo guias detalhados de anotação e qualidade, avaliando qualidade, relevância, exatidão factual, segurança e conformidade com políticas. Identificar inconsistências, casos limite e possíveis problemas dos modelos, escalando quando necessário, e contribuir para o treino e melhoria de sistemas de IA através de avaliações e feedback detalhados.
- Requisitos
- Português nativo não indicado; inglês nativo (native-level fluency) obrigatório
- Inglês de nível B2 ou superior
- Compreensão sólida de IA generativa, LLMs e metodologias de avaliação de IA
- Capacidade de interpretar e aplicar de forma consistente guias escritos complexos
- Boa capacidade analítica, atenção ao detalhe e compreensão de leitura
- À vontade com texto estruturado, conjuntos de dados e conteúdos gerados por IA
- Confidencialidade e discrição no tratamento de informação
- Valorizado
- experiência em anotação de dados de IA, avaliação de LLMs, RLHF, SFT, garantia de qualidade, moderação de conteúdos ou Trust & Safety
- experiência em funções analíticas semelhantes
- Condições
- Contrato: não indicado
- Salário: não indicado
- Horário: rotativo 24/7, de segunda a domingo, com 2 dias de folga rotativos
- Local: Lisboa, Portugal (presencial)
- Benefícios
- Seguro de saúde privado
- Subsídio de refeição
- Formação inicial e especializada em avaliação de IA
- Desenvolvimento profissional e formação contínua
- Ambiente de trabalho internacional e multicultural
Workster is partnering with a leading global customer experience company to recruit English-speaking AI Data Evaluation Specialists for an innovative artificial intelligence project based in Lisbon, Portugal.
If you’re passionate about AI, language technology, and data quality, this is a unique opportunity to contribute to the development of next-generation Large Language Models (LLMs). You’ll work with cutting-edge AI systems by reviewing, evaluating, and improving AI-generated responses, helping create safer, more accurate, and more reliable conversational experiences for millions of users worldwide.
Your Role
Review and evaluate AI-generated responses using detailed annotation and quality guidelines
Label and annotate language model outputs with accuracy and consistency
Assess AI-generated content for quality, relevance, factual accuracy, safety, and policy compliance
Apply complex annotation guidelines across a wide variety of scenarios and content types
Identify inconsistencies, edge cases, and potential model issues, escalating when appropriate
Analyze structured text, datasets, and AI-generated content to support model improvement
Deliver high-quality work while consistently meeting productivity, quality, and accuracy targets
Maintain strict confidentiality and comply with all project standards, security requirements, and internal procedures
Contribute directly to the ongoing training and improvement of advanced AI systems through detailed evaluations and feedback
24/7 rotating schedule (Monday to Sunday) with 2 rotational days off
Your Qualifications
Native-level fluency in English
Good command of English (B2 level or above)
Strong understanding of Generative AI, Large Language Models (LLMs), and AI evaluation methodologies
Previous experience in AI data annotation, LLM evaluation, Reinforcement Learning from Human Feedback (RLHF), Supervised Fine-Tuning (SFT), Quality Assurance, Content Labeling, Trust & Safety, or similar analytical roles is highly desirable
Excellent analytical thinking and attention to detail
Ability to interpret and consistently apply complex written guidelines and policies
Strong reading comprehension and written communication skills
Comfortable working with structured text, datasets, and AI-generated content
Ability to work efficiently in a fast-paced, quality-driven environment while meeting performance targets
Professional, objective, and capable of handling confidential information with discretion
The Offer
Office-based position in Lisbon, Portugal
Comprehensive onboarding and specialized training in AI evaluation processes
Opportunity to work on one of the world’s most advanced artificial intelligence projects
International and multicultural working environment
Career development opportunities within the rapidly growing AI industry
Private health insurance
Meal allowance
Ongoing learning and professional development
Modern office facilities with a collaborative team culture
Unique opportunity to shape the future of generative AI and language technologies
Como me candidatar
Candidatar no anúncio original ↗
Preparar candidatura
Uma carta de apresentação e uma apresentação curta para esta oferta, escritas a partir do teu perfil, e o que aprender a seguir.
Entra e cria o teu perfil a partir do CV. É privado: não o partilhamos com ninguém.
Algo errado ou ilegal neste anúncio? Reportar
Ofertas semelhantes
- German AI Evaluation Agent | Generative AI & LLMs | Lisbon Oriente | Start 9.11ProRekruter · Lisboa
- French AI Evaluation Agent | Generative AI & LLMs | Lisbon Oriente | Start 9.11ProRekruter · Lisboa
- AI Labeling & Evaluation Agent (German-Speaking)Concentrix · Lisboa
- AI Labeling & Evaluation Agent (French-Speaking)Concentrix · Lisboa
- English-Speaking AI Platform Support Advisor – Lisbon365 Recruitment · Lisboa
- Junior AI ScientistWorkster Jobs
Salário comparado
Este anúncio não indica salário. As 165 ofertas de Analistas de sistemas com salário no distrito de Lisboa anunciam:
mediana 2600 € · metade entre 1929 € e 3329 €
ver as que pagam mais →Salários brutos mensais anunciados em ofertas abertas a tempo inteiro, da mesma profissão. Não é uma estimativa para esta oferta.
Formação para esta vaga
- a Inteligência Artificial no QuotidianoServiço de Formação Profissional de Viana do Casteloonline · pós-laboral · 8 h · gratuito · início 03/12/2026Pedido neste anúncio: Inteligência artificial e machine learning
- Utilizar Ferramentas de Inteligência Artificial na Organização (UC00248)CICCOPNonline · pós-laboral · 25 h · gratuitoPedido neste anúncio: Inteligência artificial e machine learning
- Utiliz. Ferramentas de Inteligência Artificial - Pós-laboralServiço de Emprego de Portimãoonline · pós-laboral · 25 h · gratuito · início 23/11/2026Pedido neste anúncio: Inteligência artificial e machine learning
Idiomas IA
Publicado em (1)
- Workster visto 31 out – 15 nov
Vista pela primeira vez a 31 out, 13:44 · última vez a 15 nov, 20:53