context relevancy

Categoria: avaliação e qualidade

Métrica que avalia se os trechos de contexto recuperados e fornecidos ao modelo são realmente relevantes para a pergunta, antes mesmo de avaliar a resposta. Contexto irrelevante desperdiça tokens e pode induzir o agente a respostas incorretas.