AgentGradeRubricas portáteis para qualidade de agentes — offline e online.
Junte-se aos construtores que utilizam o AgentGrade. Grátis para experimentar — sem necessidade de cartão.
Sem cartão de crédito · Cancele quando quiser
Principais conclusões
- Rubricas que viajam através de arneses de avaliação.
- Pacotes offline vs clareza de monitorização online.
- Honestidade: suporte à tomada de decisões de avaliação — não é uma garantia de que os agentes nunca falhem.
Leis complexas. Packs de política simples.
Temas de apoio à decisão — não uma certificação, selo CMP ou parecer jurídico.
AgentGrade — definição
AgentGrade is an evaluation harness for AI agents that scores trajectories against task rubrics, safety checks, and regression sets, so teams can gate releases on measured quality instead of vibes.
O que isto NÃO é
- Não é um laboratório de benchmark, uma tabela de modelos nem um certificado de aprovação.
- Não garante que as pontuações coincidam com todos os harness nem que uma nota alta signifique pronto para produção.
- Não é um motor de políticas, um conjunto de pentest nem um certificado de conformidade.
Controlador / Operador — Quando os traces mencionam dados pessoais, trate as pontuações como apoio à decisão e siga o seu processo de privacidade.
Controle as alterações. Rubricas quebram.
Novas regras, novo risco
Cada atualização regulatória pode deixar ferramentas do agent, classes de dados e caminhos de escalonamento fora de sincronia.
Docs vs runtime
Quando o PDF vive separado do runtime do agent, pontos cegos aparecem em produção.
Reescritas manuais
Editar checklists à mão para cada domínio drena em silêncio o tempo de engenharia e conformidade.
Problemas após o ship
Lacunas costumam surgir só após uma auditoria, incidente ou questionário de cliente.
Descreva. Grade. Aja.
Classificações de apoio à decisão — não um certificado de aprovação.
Checagens de política
Regras condição + ação que um runtime de agent pode avaliar.
Checklist de conformidade
Deveres legíveis para que donos vejam lacunas antes do go-live.
Mapeamento do AI Act da UE
Ponteiros temáticos para obrigações de alto risco — não certificação de conformidade.
Regras exportáveis
Saída estruturada que você pode ligar a guardrails ou middleware.
Tudo o que precisa para uma primeira avaliação
Construído para equipas que enviam agentes que necessitam de revisões de rubricas.
Pontuação de qualidade
Regras condição + ação que um runtime de agent pode avaliar.
Verificação de fidelidade
Deveres legíveis para que donos vejam lacunas antes do go-live.
Taxa de sucesso da tarefa
Ponteiros temáticos para obrigações de alto risco — não certificação de conformidade.
Grelha exportável
Saída estruturada que você pode ligar a guardrails ou middleware.
AgentGrade — Como funciona
Colar
Cole o texto da política e escolha o domínio.
Codificar
Gere verificações chamáveis por agente e uma lista de erros de validação.
Aplicar
Conecte as regras ao tempo de execução do agente; reserve humanos para exceções.
Descreva. Grade. Aja.
Classificações de apoio à decisão — não um certificado de aprovação.
Novas regras, novo risco
Cada atualização regulatória pode deixar ferramentas do agent, classes de dados e caminhos de escalonamento fora de sincronia.
Checagens de política — Regras condição + ação que um runtime de agent pode avaliar.
Experimente nesta página
or generate below.
Histórico guardado
Ainda sem depoimentos — por design
Não publicamos números de clientes nem citações inventadas. Execute a ferramenta e leia uma avaliação real — essa é a nossa prova.
Pontue traces em três eixos
Qualidade, fidelidade e sucesso da tarefa — experimente uma demonstração identificada sem plano pago.
Taxas de aprovação que pode comparar
Cada execução devolve um quadro de pontuação, um id de execução e a versão do ruleset para os lançamentos se manterem comparáveis.
Limites honestos de eval
Grátis 3/dia · 15/mês; Pro 40/dia · 300/mês. Sem tetos ocultos. O modo de demonstração está identificado. Não é um certificado de aprovação.
Limites honestos
AgentGrade elabora uma classificação. Sem certificação, os agentes nunca falham.
Planos simples que escalam
Todos os planos pagos incluem
- Studio de política para regras
- Exportação da checklist de conformidade
- Quadros de pontuação de trace (qualidade, fidelidade, sucesso da tarefa)
- Suporte por e-mail em planos pagos — sem add-ons ocultos para o uso central do studio
- Execuções diárias de IA limitadas (3/dia · 15/mês)
- Demo do Studio (sem taxa extra de LLM)
- IA incluída: 40 execuções/dia · 300/mês (utilização justa)
- Sem assinatura separada do ChatGPT
- Suporte prioritário · 2 meses grátis no anual
- Lugares de equipa · Acesso à API (roadmap)
- BYOK opcional (sua chave OpenAI)
Feature comparison
What each plan includes — quotas reflect the enforced fair-use limits.
| Dimensão | Free | Pro | Enterprise |
|---|---|---|---|
| Utilização | |||
| Execuções de AI | 3/day · 15/mo | 40/day · 300/mo | 200/day · 3,000/mo |
| Exportação de relatórios | Com marca de água | Exportação sem marca de água | Exportação sem marca de água |
| Registo de auditoria | Não incluído | ✓ Incluído | ✓ Incluído |
| Produto | |||
| Quality score | ✓ Incluído | ✓ Incluído | ✓ Incluído |
| Faithfulness check | ✓ Incluído | ✓ Incluído | ✓ Incluído |
| Task-success rate | ✓ Incluído | ✓ Incluído | ✓ Incluído |
| Regression-aware flag | ✓ Incluído | ✓ Incluído | ✓ Incluído |
| BYOK (a sua chave LLM) | Não incluído | Não incluído | ✓ |
| SSO | Não incluído | Não incluído | Roadmap |
| Apoio e conformidade | |||
| Apoio | Comunidade | Prioritário | SLA personalizado |
Já pagou? Desbloqueie o Pro com a sua licença
Licenses are issued manually after your payment is confirmed: we generate one per paid order and send it to the purchase email, typically within a few hours. Enter it below to activate Pro on this device — no account needed. Nothing yet? Write to lixingliangsy@163.com and reference your order email.
Suas perguntas, respondidas
O que a pontuação AgentGrade avalia?
O agente é executado contra rubricas portáteis — lentes offline e online. Graus de suporte a decisões, não uma certificação que os agentes nunca falham.
Isto é aconselhamento jurídico ou uma certificação?
Não. Os resultados são notas de apoio à decisão. Peça revisão a quem lidera a eval antes de fazer gate de um lançamento. Não certificamos que os agentes nunca falham.
Posso cancelar a qualquer momento?
Sim. Os planos self-serve cancelam quando quiser; o acesso continua até ao fim do período.
Preciso de cartão de crédito para começar?
Não. Comece com registo por e-mail ou modo Demo no studio e faça upgrade quando estiver pronto.
Preciso da minha própria assinatura ChatGPT / OpenAI?
Não para Free/Pro. As execuções de IA estão incluídas no plano (fair use) através da nossa chave de plataforma. A Enterprise pode opcionalmente trazer a própria chave OpenAI (BYOK) — configure em /settings (a chave permanece apenas no servidor).
O que é Fair Use / e se atingir o limite de IA?
O gratuito são 3 execuções/dia e 15/mês. O Pro são 40/dia e 300/mês. No limite de utilização justa, o Studio devolve um resultado de demonstração identificado até à reposição diária ou mensal — ou use BYOK Enterprise para maior volume.
O checkout é seguro?
Os pagamentos são processados pela Waffo Pancake (merchant of record).
O que acontece depois de pagar?
Recebe confirmação de acesso; o fulfillment é rastreado via webhook + registos de encomenda.
Respostas rápidas
- Pontuação de qualidade
- Verificação de fidelidade
- Taxa de sucesso da tarefa
- Grelha de eval exportável
- O preço começa em $0 (Grátis).
Mais perguntas
Quais são as entradas?
Descrição do agente mais notas de execução/avaliação de amostra.
Certificação?
Não. Notas de apoio à decisão — não um certificado de aprovação.
Offline ou online?
Pacotes offline enfatizam cenários de estresse; online observa a deriva ao vivo.
Demonstração vs ao vivo?
Demonstração é rotulada; narrativa ao vivo precisa de uma chave de IA configurada.
Para quem é?
Equipes que enviam agentes que precisam de revisões baseadas em rubricas.
Fontes primárias?
Notas de prática de avaliação de agente — estrutura de apoio à decisão.
Como se compara
| Dimensão | Manual | AgentGrade |
|---|---|---|
| Grelha de critérios | Verificações ad hoc por intuição | Pontuações repetíveis de qualidade e fidelidade |
| Consistência | Varia conforme quem revê | O mesmo pacote de eval em cada execução |
| Resultado | Opiniões no Slack | Quadro de pontuação exportável |
| Mais adequado para | Conjunto completo de benchmark offline | Triagem de primeira passagem da qualidade do agente |
Quando não usar: Não trate o AgentGrade como certificado de SLA de produção — é apoio à decisão de avaliação.
- Grelhas de eval que viajam — Pontuações que pode reutilizar entre prompts.
- Lançamento da vaga 1 — AgentGrade no cluster de operações de agentes.
- Eval offline vs monitorização online — Quando pacotes e traces em direto respondem a perguntas diferentes.
As pessoas também pesquisam
Clique num separador para expandi-lo; clique novamente para ocultá-lo. Todo o conteúdo permanece na página para os motores de busca.
Comece de forma mais inteligente hoje
Junte-se a builders que usam o AgentGrade. Grátis para experimentar — sem cartão.
Confiável · Cancele quando quiser