Usa este artículo para agregar una Tarjeta de puntuación a una Evaluación, crear una nueva Tarjeta de puntuación, añadir criterios y establecer la ponderación y configuración Crítica de cada criterio.
Cómo agregar una Tarjeta de puntuación a una Evaluación
Una Tarjeta de puntuación añade puntuación de calidad a una Evaluación, como Clarificación o Eficiencia, además de sus verificaciones de aprobado/reprobado. Hasta que una Evaluación tenga una Tarjeta de puntuación, solo muestra resultados de Simulación y no evaluación de Calidad. Una Tarjeta de puntuación se aplica a cada Simulación en la Evaluación, con los mismos criterios para cada una.
Ve a Fin AI Agent > Test > Evals y abre la Evaluación.
Haz clic en Agregar tarjeta de puntuación en la parte superior derecha de la Evaluación, junto a Nueva simulación.
Después de agregar una Tarjeta de puntuación, aparece una sección Evaluación de calidad en la parte superior de la Evaluación, junto a Resultados de simulación. Los criterios mostrados provienen de la Tarjeta de puntuación que agregaste, por lo que la sección lista los criterios que contiene esa Tarjeta. Muestra la Puntuación de revisión general y el promedio de cada uno de esos criterios. La lista de conversaciones simuladas también obtiene una columna de Puntuación de revisión y una columna para cada criterio.
También puedes agregar una Tarjeta de puntuación desde Configuración de la Evaluación. Para abrir Configuración de la Evaluación en una Evaluación existente, haz clic en el menú de opciones (...) junto a Nueva simulación, luego haz clic en Editar evaluación. En Configuración de la Evaluación, abre el desplegable Evaluación de calidad, luego elige una Tarjeta de puntuación existente o haz clic en Crear nueva tarjeta de puntuación. El valor predeterminado es Sin tarjeta de puntuación.
Nota: Las Tarjetas de puntuación se comparten con Monitores, por lo que los cambios en una Tarjeta de puntuación se aplican en todas partes donde se use. Para escribir criterios que puntúen de forma confiable, consulta Cómo escribir criterios efectivos para Monitores y Tarjetas de puntuación.
Cómo crear una Tarjeta de puntuación para una Evaluación
Para crear una Tarjeta de puntuación para una Evaluación, nómbrala y añade los criterios en los que se puntúa a Fin. Las Tarjetas de puntuación de Evaluación siempre evalúan a Fin, por lo que la configuración Quién es evaluado está fija en Fin AI Agent, y Compañeros humanos asignados no está disponible.
En Configuración de la Evaluación, abre el desplegable Evaluación de calidad y haz clic en Crear nueva tarjeta de puntuación. El desplegable mostrará entonces Nueva tarjeta de puntuación, y el formulario de Nueva tarjeta de puntuación aparecerá debajo.
En Nombre de la tarjeta de puntuación, ingresa un nombre.
En Criterios de evaluación, haz clic en + Criterio. Se abrirá el panel Editar tarjeta de puntuación > Nuevo criterio. Para completarlo, consulta Cómo agregar criterios a una Tarjeta de puntuación.
Después de agregar criterios puntuados, la sección Puntuación de revisión (%) muestra un promedio ponderado de ellos. Se calcula multiplicando la puntuación (%) de cada criterio por su peso, sumando los resultados y dividiendo por el peso total. Hasta entonces, muestra No puntuado.
El interruptor de Tarjeta de puntuación de autoevaluación está disponible solo cuando todos los criterios usan evaluación por IA.
Cómo agregar criterios a una Tarjeta de puntuación
En el panel Editar tarjeta de puntuación > Nuevo criterio, en Nombre del criterio, ingresa un nombre claro para referencia, por ejemplo Sentimiento.
En Descripción, describe qué debe evaluarse, en hasta 255 caracteres. El revisor de IA usa esta descripción para decidir qué calificación aplicar.
En Opciones de calificación, haz clic en Agregar opción hasta que el criterio tenga al menos 2 opciones de calificación. La opción No aplicable siempre está presente y no cuenta.
Opcionalmente, activa Razones de calificación.
Haz clic en Guardar para guardar el criterio, luego haz clic en Guardar cambios en Configuración de la Evaluación para adjuntar la Tarjeta de puntuación a la Evaluación.
Las Evaluaciones puntúan automáticamente cada criterio con IA, usando la descripción del criterio y la transcripción de la Simulación (todos los mensajes, excluyendo eventos). Puntuación manual no está disponible, porque las Simulaciones no tienen revisor humano. El contenido, Procedimientos y guías de Fin aún no están disponibles para el revisor de IA como contexto.
Cómo establecer la ponderación de la puntuación y la configuración Crítica para un criterio
En la tabla Criterios de evaluación, cada criterio tiene una Ponderación de puntuación y una configuración Crítica:
Ponderación de puntuación: cuánto cuenta el criterio para la Puntuación de revisión (%). Los criterios que muestran No puntuado no tienen ponderación.
Crítica: si un criterio Crítico falla, toda la tarjeta de puntuación falla, sin importar la puntuación de revisión. La casilla Crítica no está disponible para criterios que muestran No puntuado.
Cómo leer los resultados de la Tarjeta de puntuación para una Simulación
Para ver cómo Fin puntuó en una sola conversación, abre una Simulación de una Evaluación que tenga una Tarjeta de puntuación. Junto a su verificación de Transferencia y verificaciones de Simulación, la Simulación muestra su Puntuación de revisión y, para cada criterio, la calificación que dio el juez LLM (modelo de lenguaje grande). Si Razones de calificación está activado para un criterio, también verás la razón del juez, para que puedas entender por qué una respuesta obtuvo esa puntuación y convertir eso en una corrección.