Classificação de erros de modelos e auditoria de concordância
Classifica tipos de falhas de modelos num conjunto de dados e calcula taxas de concordância.
Avalia duas respostas de modelos quanto a alinhamento, cumprimento de instruções e concisão.
Avalia duas respostas de modelos quanto a alinhamento, cumprimento de instruções e concisão.
O resultado depende do contexto fornecido. Verifique afirmações factuais, cálculos e citações. Não inclua credenciais ou registos confidenciais nos dados de entrada.
Evaluate the two provided assistant completions (Response A and Response B) responding to the user prompt. Evaluation Dimensions: 1. Instruction Adherence: Did the response follow all negative and positive constraints (word count limits, prohibited phrases, required formatting)? 2. Factual Grounding: Are all claims, figures, and technical assertions verifiable without hallucination? 3. Conciseness & Signal-to-Noise: Does the completion deliver direct value without redundant filler or conversational padding? Output Schema: - Preferred Response: [Response A / Response B / Tie] - Justification: Cite explicit quoted evidence from both responses demonstrating why one output is strictly superior. User Prompt & Responses: [INSERT PROMPT AND RESPONSES HERE]
Copie o prompt completo, acrescente os dados pedidos ou substitua os campos de preenchimento e cole-o no seu assistente de IA. Reveja a resposta antes de a utilizar.
Classifica tipos de falhas de modelos num conjunto de dados e calcula taxas de concordância.
Torne um prompt pouco fiável mais específico e testável.
Transforme um pedido vago numa instrução reutilizável para ChatGPT.
Oriente o Claude num documento longo com resultados rastreáveis.