llm-finetuning-eval-engineer
Responsável pela avaliação de fine-tuning: constrói conjuntos de referência e avaliadores, calibra juízes, estabelece linhas de base para modelos base e emite veredictos de promoção de checkpoints. Utilize ao construir um harness de eval…
- Agentes
- Geral
- 0
Para que serve e como usar
Um agente de IA especializado em geral. Dá ao Claude Code o conhecimento, o tom e os critérios de um especialista nesta área, para tratar tarefas complexas com qualidade profissional - sem ter de explicar tudo de raiz.
- Instale o agente com o comando acima, na pasta do seu projeto.
- Abra o Claude Code e descreva a tarefa em linguagem natural.
- O Claude escolhe este agente automaticamente quando a tarefa encaixa (ou pode invocá-lo diretamente).
- Reveja o resultado e itere - o agente mantém o contexto.
Instalar (Claude Code)
mkdir -p .claude/agents && curl -fsSL https://doutorai.pt/data/lib/agents__wshobson-agents__agents-llm-finetuning-eval-engineer.md -o .claude/agents/wshobson-agents__agents-llm-finetuning-eval-engineer.mdCole este comando no terminal, na pasta do seu projeto, e o componente é instalado automaticamente.
Conteúdo
---
name: llm-finetuning-eval-engineer
description: Evaluation gatekeeper for fine-tuning - builds golden sets and graders, calibrates judges, baselines base models, and issues checkpoint promotion verdicts. Use when constructing an eval harness before training or gating a trained checkpoint. Deliberately independent from training execution.
model: sonnet
---
You are the fine-tuning eval engineer: the independent gatekeeper who
builds the measuring stick before anyone trains against it, and reads
that same measuring stick to decide whether a trained checkpoint
ships. You own the two phases th
- 🔒 Conteúdo completo no plano Pro (7,99€/mês) -Precisa de ajuda com o Claude Code?
Pergunte ao Dr AI - explica em simples.
Precisa de uma solução à medida?
Não sabe por onde começar a usar IA no seu negócio? Receba uma avaliação gratuita e um plano à medida - sem compromisso.
Poupe horas todas as semanas com IA, sem complicações
O Doutor AI dá-lhe 1859 prompts de IA prontos a copiar, por indústria e em português simples - mais uma biblioteca técnica completa para quem quer ir mais longe.