Ir al contenido

Rúbricas de Evaluación

Las rúbricas de evaluación definen los criterios utilizados para calificar llamadas en la Evaluación COPC. Cada rúbrica contiene una lista de criterios ponderados contra los cuales se evalúan las llamadas.

No necesita reescribir su formato de calidad antes de empezar. El camino habitual es:

  1. Importar el formato que ya usan sus supervisores — Excel, Word, PDF, CSV o texto pegado — o partir de una plantilla
  2. Recorrer la revisión: señala la redacción que haría que la IA puntúe de forma inconsistente y sugiere una corrección para cada caso
  3. Calibrar: calificar algunas llamadas que sus supervisores ya calificaron y ver dónde coincide la IA con ellos antes de salir en vivo

Haga clic en Configuración en la navegación izquierda y abra la pestaña Rúbricas de Evaluación (COPC).


  1. Haga clic en Nueva Rúbrica (o importe su rúbrica, o parta de una plantilla)
  2. Complete los detalles de la rúbrica:
    • Nombre — Un nombre descriptivo (ej. “Evaluación Servicio al Cliente Q2”)
    • Descripción — Nota opcional para su propio equipo sobre cuándo usar esta rúbrica. No se muestra al evaluador y no afecta la puntuación
  3. Agregue criterios de evaluación (ver abajo)
  4. Haga clic en Guardar

Cada criterio en una rúbrica tiene los siguientes campos:

CampoRequeridoDescripción
IDSíIdentificador único (ej. saludo, verificacion_datos)
NombreSíNombre visible (ej. “Protocolo de Saludo”)
DescripciónNoQué debe buscar el evaluador
Puntos MáximosSíPuntuación máxima para este criterio (debe ser > 0)
SecciónNoEtiqueta de grupo (ej. “Apertura”, “Cuerpo”, “Cierre”)
Error CríticoNoSi está marcado, obtener 0 en este criterio reprueba toda la llamada
Objetivo de la llamadaNoMarca el criterio que registra el resultado de la llamada. Su resultado completa Objetivo alcanzado en los informes; vea El objetivo de la llamada
Se exime si el cliente cuelga antes de la despedidaNoPara los pasos del guion de cierre. No se descuenta en las llamadas que el cliente abandonó antes de la despedida del agente; vea Pasos de cierre cuando el cliente cuelga

Errores críticos: Cuando un criterio marcado como crítico recibe una puntuación de 0, toda la llamada automáticamente obtiene 0% independientemente de las demás puntuaciones. Use esto para requisitos no negociables como verificación de identidad o divulgaciones de cumplimiento.


La mayoría de los criterios califican lo que el agente hizo. El objetivo de la llamada indica lo que la llamada logró: una venta cerrada, una promesa de pago, un problema resuelto. Marque Objetivo de la llamada en el criterio que registra ese resultado, y cada llamada calificada con la rúbrica obtiene una respuesta de Objetivo alcanzado, sin ningún análisis adicional.

Un criterio marcado como objetivo de la llamada

El criterio objetivo…Objetivo alcanzado
obtuvo la puntuación máximaSí
obtuvo menos que la puntuación máximaNo
no aplicó a la llamadadesconocido

Objetivo alcanzado aparece en la tabla de desempeño de agentes, en las llamadas ejemplares del Informe del Centro de Atención —donde las llamadas que alcanzaron su objetivo se listan primero— y en la exportación a PDF.

Cómo redactar un buen criterio objetivo:

  • Describa el resultado, no el esfuerzo. «El cliente acepta la oferta» es un objetivo; «el agente intenta cerrar la venta» es una conducta y corresponde a un criterio común.
  • Hágalo de todo o nada. Cualquier puntuación por debajo del máximo cuenta como no alcanzado, así que el crédito parcial solo vuelve confusa la respuesta.
  • Dele poco peso. El criterio objetivo suma a la puntuación de la llamada como cualquier otro. Un cliente que dice que no reduce la puntuación del agente en los puntos del criterio, así que un peso bajo —por ejemplo, 5 puntos de 100— evita que el resultado opaque la calidad del trabajo.

Reglas:

  • Uno por rúbrica. Marcarlo en un segundo criterio lo traslada a ese criterio.
  • Nunca crítico. Un criterio objetivo no puede ser también un error crítico, porque una venta rechazada reprobaría toda la llamada. Marcar uno desmarca el otro.
  • Se aplica de inmediato. Marcar, trasladar o quitar el objetivo actualiza Objetivo alcanzado en todas las llamadas ya calificadas con esta rúbrica, sin volver a analizar nada. Las puntuaciones no cambian.

El evaluador ya omite los pasos a los que la llamada nunca llegó cuando la transcripción se corta de forma visible; vea Llamadas que terminan antes de tiempo. El cuelgue real más común no se ve así. El cliente dice “bueno, gracias” y cuelga mientras el agente todavía está cerrando. Nada en la transcripción dice quién terminó la llamada, y un paso como la encuesta de satisfacción o “¿le quedó clara la información?” siempre puede atribuirse a algún turno anterior en el que el agente pudo hacerlo, así que se descuenta.

Si su marcador registra quién colgó primero, dos pasos lo resuelven:

  1. Envíe quién colgó primero con cada llamada, como ended_by; vea Quién colgó primero
  2. Marque Se exime si el cliente cuelga antes de la despedida en cada paso del guion de cierre

En cada llamada en la que el cliente colgó primero y el agente nunca se despidió, cada criterio marcado que perdió puntos recibe sus puntos completos y queda como N/A, con la etiqueta El cliente colgó al lado.

Qué pasóCriterios marcados
El cliente colgó primero, antes de la despedida del agentePuntos completos, marcados N/A
El cliente colgó primero, después de la despedida del agenteSe califican con normalidad
El agente colgó primeroSe califican con normalidad
No se sabe quién colgó primero en esa llamadaSe califican con normalidad

Una despedida es el agente despidiéndose o deseándole un buen día al cliente, o transfiriéndolo a la encuesta. “De acuerdo”, “bueno” o “listo” en respuesta al agradecimiento del cliente no es una despedida, y tampoco lo es una frase que quedó sin terminar.

Por qué importa la despedida. En la mayoría de las llamadas que cierran con normalidad, también es el cliente quien cuelga, después de la despedida del agente. Un agente que llegó a la despedida tuvo la oportunidad de hacer cada paso de cierre antes de ella, así que en esas llamadas los pasos se califican como siempre. Sin esa comprobación, ended_by por sí solo eximiría los pasos de cierre de casi todas las llamadas.

Qué marcar. Los pasos que pertenecen al cierre de la llamada: el resumen de lo acordado, los recordatorios y ofertas finales, los canales de pago o de autogestión, “¿hay algo más en lo que le pueda ayudar?”, la despedida y la encuesta. Deje sin marcar la apertura, los pasos de la mitad de la llamada y la conducta que se juzga en toda la llamada, como el tono o las interrupciones.

Reglas:

  • Nunca crítico. Un cuelgue no exime una conducta prohibida. El lenguaje ofensivo sigue reprobando la llamada, sea quien sea el que colgó primero. Marcar Error Crítico desmarca la casilla, y una rúbrica que tenga ambas en un mismo criterio se rechaza.
  • Solo cambian los puntos perdidos. Un paso marcado que el agente completó antes de que el cliente se fuera conserva su puntuación y sigue evaluado, así que el conteo Aplicó en del cuadro de calidad sigue mostrando que se hizo.
  • La justificación se conserva tal como se escribió. El evaluador informa dónde se despidió el agente; luego la plataforma aplica la regla. Por eso una justificación puede seguir describiendo el paso como no realizado. Las etiquetas N/A y El cliente colgó son las que indican que se eximió.
  • Se aplica a las llamadas que se califiquen después. A diferencia del objetivo de la llamada, marcarla o desmarcarla no cambia las llamadas ya calificadas. Vuelva a analizarlas para aplicarla.

Sugerir exenciones por cuelgue, en el editor de rúbricas, lee las descripciones de sus criterios y marca las que muestran ser pasos del guion de cierre. Una línea bajo cada criterio, Sugerencia: eximir. o Sugerencia: no eximir., da el motivo.

  • Solo marca casillas. Nunca desmarca una, nunca marca un criterio crítico y no guarda nada. Revise el resultado y haga clic en Guardar.
  • Se ejecuta sola después de una importación en la que ningún criterio queda eximido por cuelgue.
  • Solo se guía por lo que dice el texto. Un criterio descrito como algo que ocurre “en cualquier parte de la llamada” no se sugiere, aunque en la práctica sea una pregunta de cierre. Márquelo usted.

La Descripción es lo que el evaluador realmente lee. Los puntos siguientes separan un criterio que puntúa como usted pretende de uno que no. La revisión comprueba la mayoría de estos puntos por usted.

1. Diga qué obtiene la puntuación completa, en proporción al peso. Aquí es donde rinde el esfuerzo invertido en la rúbrica. Una rúbrica con la que trabajamos describía su criterio más pesado — 35 de 110 puntos — en una sola frase de 196 caracteres sobre “responder coherentemente a las objeciones”. Nada en ella decía dónde estaba la línea entre crédito parcial y completo, así que la puntuación oscilaba. Reescrita a 826 caracteres, con las conductas detalladas, puntuó de forma consistente. Un criterio que carga un tercio de sus puntos merece más de una línea.

2. Ponga la aplicabilidad en su propia frase. Es lo más valioso que puede hacer, y el único lugar donde la ambigüedad hace daño de verdad:

Ambiguo — Ofrecer el descuento de retención, o explicar las consecuencias de la cancelación (aplica para llamadas en las que el cliente no acepta la oferta)

¿El paréntesis rige todo el criterio, o solo la cláusula que tiene al lado? Ambas lecturas son gramaticales, y el evaluador no se decide por una. En una muestra de 30 llamadas, el mismo criterio escrito así se tomó como no aplicable 10 veces en una ejecución y 14 en la siguiente.

Claro — Explicar las consecuencias de la cancelación. Este criterio aplica únicamente a llamadas en las que el cliente no acepta la oferta. Cuando el cliente acepta, se evalúa el criterio 4 en su lugar.

Un criterio ambiguo no produce una puntuación incorrecta. Produce una inestable, que es mucho más difícil de defender ante un agente que reclama su resultado.

3. Nombre cualquier exención específica de su proceso. Los cuelgues, las caídas de línea y las situaciones que nunca se produjeron se manejan automáticamente: vea Cómo Funciona la Puntuación. Los pasos de cierre de una llamada que el cliente abandona antes de la despedida necesitan la marca de cuelgue. Si su proceso exime un criterio por otra razón — una transferencia a otra cola, una caída del sistema, un guion que el agente no tiene permitido leer — dígalo, en su propia frase.

4. Cuando lo que juzga es el orden, dígalo. Si un criterio es en realidad “X debe ocurrir antes que Y” — verificar la identidad antes de dar datos de la cuenta, informar el costo antes de tomar el pedido — listar los pasos en orden no hace que el orden forme parte del criterio. Diga que el orden cuenta y cuál es el puntaje cuando no se respeta:

Verificar la identidad de quien llama con al menos dos datos. El orden es parte del criterio: la verificación debe ocurrir antes del primer dato de la cuenta que entrega el asesor. 20 puntos: dos o más datos verificados antes. 10 puntos: un solo dato verificado antes. 0 puntos: no hay verificación, o la verificación ocurre después de entregar datos de la cuenta.

5. En una prohibición, diga qué no es la falta. Las prohibiciones solo se descuentan con evidencia, pero el evaluador igual tiene que distinguir la acción prohibida de una permitida que se le parece. Una regla contra pedir la clave del cliente está justo al lado de la verificación de identidad obligatoria — en ambas el asesor pide un número — así que nombre lo permitido: “Pedir el número de documento, el nombre completo, la fecha de nacimiento o los últimos cuatro dígitos de la tarjeta SÍ está permitido y no debe penalizarse.” Del mismo modo, negar un descuento que el cliente pide no es una promesa fuera de política, y una espera anunciada no es abandonar la llamada, por larga que sea.

6. Diga qué criterio asume una falla compartida. Cuando un mismo error podría descontarse en dos criterios — un precio omitido es a la vez una oferta incompleta y, discutiblemente, una tergiversación del precio — diga cuál lo asume. Si no, la misma omisión se descuenta dos veces, y si el segundo criterio es crítico, reprueba toda la llamada.

7. No ponga reglas de puntuación en el campo Descripción de la rúbrica. Al evaluador solo se le muestran el nombre, la descripción, la sección, los puntos y la marca de crítico de cada criterio; la marca de objetivo no, así que marcar un objetivo nunca cambia cómo se califica una llamada. Tampoco la marca de cuelgue: la plataforma la aplica después de que el evaluador calificó la llamada. La Descripción a nivel de rúbrica es para su propia referencia: una nota sobre cuándo usar esta rúbrica, visible para su equipo y para nadie más. Las reglas escritas ahí no tienen ningún efecto sobre la puntuación.


  1. Haga clic en Agregar Criterio en el editor de rúbricas
  2. Complete los campos para cada criterio
  3. Repita para cada criterio que desee agregar
  4. Opcionalmente, marque Objetivo de la llamada en el criterio que registra el resultado
  5. Opcionalmente, marque Se exime si el cliente cuelga antes de la despedida en los pasos del guion de cierre, o haga clic en Sugerir exenciones por cuelgue
  6. El editor muestra un total actualizado de cantidad de criterios, puntos totales y criterios críticos

Haga clic en Importar rúbrica en el editor de rúbricas y elija un archivo o pegue el texto:

  • Excel (.xlsx), Word (.docx), PDF, texto plano o texto pegado en el recuadro — el formato que usan sus supervisores, tal como está. Cada ítem que otorga o descuenta puntos se convierte en un criterio. Su redacción, niveles de puntaje y notas se copian palabra por palabra; en este paso no se reescribe nada. Los títulos pasan a ser secciones, y los ítems que el formato marca como críticos o fatales pasan a ser errores críticos.
  • CSV con el formato de columnas de abajo — se lee exactamente como está escrito, sin intervención de la IA.

Un PDF escaneado solo contiene imágenes y no se puede leer; exporte el formato desde el programa en que se creó. Los archivos están limitados a 10 MB y unas diez páginas de texto.

Valores que el formato no indica. Un ítem sin peso recibe 10 puntos, o 1 punto si es un error crítico (incumplirlo deja la llamada en 0% de todos modos). Un ítem cuya marca solo podría significar crítico se deja como no crítico. En ambos casos el criterio muestra Valor ausente en el documento: revíselos antes de guardar.

La importación reemplaza los criterios del editor. No se guarda nada hasta que haga clic en Guardar.

Una fila por criterio. La fila de encabezado es opcional: el importador la reconoce y la omite.

id,name,description,max_points,is_critical,section,is_goal,excused_on_customer_hangup

Ejemplo de CSV:

saludo,Protocolo de Saludo,El agente saluda al cliente y se identifica,10,false,Apertura
verificacion,Verificación de Datos,El agente verifica la identidad del llamante,15,true,Seguridad
escucha_activa,Escucha Activa,El agente demuestra habilidades de escucha activa,10,false,Cuerpo
resolucion,Resolución del Problema,El agente resuelve o escala apropiadamente el tema,20,false,Cuerpo
cierre,Protocolo de Cierre,El agente resume y cierra apropiadamente,10,false,Cierre,false,true
resuelto,Consulta Resuelta,El cliente termina con su consulta resuelta o una solución acordada,5,false,Cierre,true

Notas:

  • is_critical, is_goal y excused_on_customer_hangup aceptan true, 1, yes, si, sí o x para sí, y false, 0, no o vacío para no
  • is_goal y excused_on_customer_hangup son opcionales y pueden omitirse en todas las filas
  • Un archivo que marca más de un objetivo, un objetivo que también es crítico o dos criterios con el mismo ID se rechaza con un error
  • Cuando después de importar ningún criterio queda eximido por cuelgue, el editor ejecuta Sugerir exenciones por cuelgue
  • Los archivos guardados por Excel con la codificación de Windows se leen correctamente

Las filas que el importador no puede usar se listan sobre los criterios, con el número de fila y el motivo: menos columnas de las necesarias, un ID o nombre faltante, puntos que no son un número entero positivo, o una marca como todo o pendiente que no es ni sí ni no, que se lee como no.


Después de una importación, el editor revisa cada criterio por su cuenta. Haga clic en Revisar redacción para repetirlo cuando quiera. Los criterios con algo que corregir muestran un recuadro Revisión con lo encontrado y, por lo general, una descripción sugerida.

HallazgoQué significa
No queda claro qué otorga los puntosUn criterio de mucho peso no dice qué obtiene el puntaje completo, parcial o cero, así que su puntaje puede caer en cualquier punto del rango
No queda claro cuándo aplicaEl criterio solo cubre algunas llamadas, pero no lo dice en una frase propia
No indica el ordenLo que se juzga es que algo ocurra antes que otra cosa, pero el texto no dice que el orden cuenta
No queda claro qué está permitidoUna prohibición está al lado de una acción permitida que se le parece, sin nada que diga cuál es cuál
Misma falla en dos criteriosUn mismo error podría descontarse en este criterio y en otro, y ninguno dice cuál lo asume
Sin regla para el cuelgue del clienteUn paso del guion de cierre no tiene regla para un cliente que se despide y cuelga primero

La descripción sugerida conserva cada estándar, umbral y valor de puntos suyo. Cuando su rúbrica deja una elección abierta — cuál de dos lecturas quiere decir, qué criterio asume una falla compartida, qué obtiene puntaje parcial — la sugerencia la hace, siguiendo el resto de su rúbrica, los puntajes de sus supervisores si ya calibró y la práctica habitual de calidad. Cada elección aparece debajo de la sugerencia con su alternativa principal. No hay nada que completar: solo revisar.

  • Aceptar sugerencia reemplaza la descripción; Descartar conserva la suya. Ver el original de tu documento recupera la redacción importada después de un cambio.
  • Aceptar todas las sugerencias, sobre los criterios cuando dos o más tienen una, las acepta todas a la vez.
  • Antes de aceptar, lea las elecciones indicadas y verifique que la sugerencia siga diciendo lo que sus supervisores quieren decir: la revisión solo lee el texto. Si sus supervisores califican un caso de otra forma, acepte la sugerencia y cambie esa frase, o descártela.

Partir de una plantilla en la página de rúbricas copia una rúbrica lista en su equipo: servicio al cliente entrante en banca y ventas salientes. Ambas se redactaron para calificación con IA siguiendo los consejos de esta página y se probaron con llamadas de ejemplo, y ambas están en español. Adapte los criterios a su proceso como en cualquier otra rúbrica.

Para basar una rúbrica nueva en una propia, haga clic en el ícono Duplicar de su tarjeta.


Antes de apuntar toda la operación a una rúbrica, compárela con las personas que hoy califican las llamadas. Abra una rúbrica guardada y haga clic en la pestaña Calibrar:

  1. Llamadas que calificaron tus supervisores — elija un proyecto de llamadas y hasta 30 llamadas que ya tengan transcripción. Elija llamadas que sus supervisores calificaron a mano, e incluya algunas malas, no solo buenas.
  2. Sus puntajes — haga clic en Descargar hoja, anote cada puntaje del supervisor bajo su criterio (deje en blanco lo que no se calificó) y suba la hoja como CSV o Excel. Se listan las llamadas y los criterios de la hoja que no coinciden.
  3. Comparar — haga clic en Calificar las llamadas con la versión N. Cada llamada se califica dos veces. La página muestra cuántos minutos faltan, y puede salir de ella mientras la ejecución continúa.

El resultado muestra:

  • Coincidencia con los supervisores — la proporción de puntajes en que la IA dio exactamente lo mismo que el supervisor, en total y por criterio. Los criterios por debajo de 80% se resaltan.
  • Puntajes que cambiaron entre las dos pasadas — un criterio que en la misma llamada se puntúa distinto cada vez tiene una redacción que admite dos lecturas. Corríjalos primero: un puntaje inestable es más difícil de defender ante un agente que uno estricto.
  • Puntajes que difieren de los supervisores — para cada uno, la llamada, ambos puntajes y la justificación y cita de la IA, para que vea si la IA leyó mal el criterio o si es el puntaje del supervisor el que hay que revisar.

Sugerir correcciones de redacción envía los desacuerdos a la revisión y coloca sus sugerencias en los criterios. Estas sugerencias siguen los puntajes de sus supervisores, ya que son su estándar. Acepte lo que corresponda, haga clic en Guardar para crear una nueva versión y vuelva a ejecutar la calibración. Comparar con una ejecución anterior muestra la coincidencia de cada criterio con ambas versiones lado a lado.

Las ejecuciones de calibración no se descuentan de su plan y nunca cambian los puntajes de sus informes.


Una rúbrica también puede quedar guardada en el propio proyecto. Esto ocurre al guardar una configuración COPC para el análisis automático: la rúbrica seleccionada pasa a ser la rúbrica del proyecto y todas las llamadas que lleguen después se califican con ella sin volver a preguntar.

La rúbrica del proyecto también determina el Informe del Centro de Atención: el cuadro de calidad lista los criterios en el orden de la rúbrica en lugar de por peso, de modo que el informe se lee como su documento de rúbrica.


  • Editar: Haga clic en el ícono de edición en cualquier tarjeta de rúbrica para modificar su nombre, descripción o criterios
  • Duplicar: Haga clic en el ícono de copiar para crear una copia que puede cambiar sin tocar la original
  • Eliminar: Haga clic en el ícono de eliminar para borrar permanentemente una rúbrica

Cada vez que guarda un cambio en los criterios se crea una nueva versión de la rúbrica; cambiar solo su nombre o descripción no la crea. La tarjeta de la rúbrica muestra la versión actual y, si las hay, cuántas llamadas se calificaron con una versión anterior.

Editar una rúbrica nunca modifica las puntuaciones ya producidas: cada llamada conserva la versión con que se calificó hasta que la vuelva a analizar. La única excepción es el objetivo de la llamada: cambiarlo actualiza Objetivo alcanzado en las llamadas ya calificadas, porque se lee de sus puntuaciones guardadas. La marca de cuelgue no es una excepción: vuelva a analizar las llamadas para aplicarla.

Cuando los resultados COPC combinados de un proyecto incluyen llamadas calificadas con distintas versiones, la página de resultados lo indica: los promedios mezclan entonces dos redacciones, así que vuelva a analizar las llamadas anteriores antes de comparar en igualdad de condiciones.


Mejores Prácticas para Diseño de Rúbricas

Sección titulada «Mejores Prácticas para Diseño de Rúbricas»
  • Mantenga los criterios enfocados — Cada criterio debe evaluar un comportamiento específico
  • Use IDs significativos — Los IDs aparecen en exportaciones e informes, así que hágalos descriptivos, y manténgalos estables una vez que existan resultados
  • Equilibre los pesos de puntos — Asigne más puntos a los criterios que más importan, y describa los más pesados con el mayor detalle
  • Use errores críticos con moderación — Resérvelos para requisitos verdaderamente no negociables
  • Marque el objetivo de la llamada — Un criterio de poco peso y de todo o nada para el resultado permite que los informes separen las llamadas que lograron su propósito de las que no
  • Marque el cuelgue en los pasos de cierre — Si envía quién colgó primero, los pasos del guion de cierre dejan de descontarse en las llamadas que el cliente cortó
  • Agrupe con secciones — Use secciones para organizar criterios lógicamente (ej. Apertura, Cuerpo, Cierre)
  • Declare la aplicabilidad de forma explícita — Un criterio que solo cubre algunas llamadas debe decirlo en su propia frase
  • Calibre antes de salir en vivo — Compare la IA con sus supervisores en llamadas que ya calificaron, y corrija los criterios que no coinciden o que cambian entre pasadas

Antes de redactar las descripciones, lea Cómo Funciona la Puntuación. Cubre las reglas que el evaluador aplica por su cuenta a toda rúbrica — cuelgues, criterios que no aplican y cómo se juzgan las prohibiciones — que es la mayor parte de lo que los clientes solían escribir a mano.