1. Escribe la decisión que necesitas tomar
«Queremos usar IA» no define una prueba. Una pregunta más útil sería: «¿Podemos revisar las omisiones de condiciones de nuestra campaña de ventas, con evidencia que el supervisor pueda comprobar?». Así puedes evaluar un resultado concreto y evitar una demostración que solo recorra pantallas.
Delimita una campaña, una versión de pauta, un período de grabaciones y el trabajo que realizará cada responsable. Calidad valida las interpretaciones; operaciones comprueba si puede actuar sobre el resultado; tecnología revisa el origen de los audios y los accesos. Identifica también a quien aprobará la decisión comercial.
Esta guía propone un método de evaluación. La disponibilidad, duración, volumen, acompañamiento y condiciones de una prueba con VoxKPI se acuerdan en la demostración y la propuesta. La guía no ofrece un piloto gratuito ni un alcance de servicio predeterminado.
2. Prepara una muestra que pueda revelar problemas
Combina una selección que refleje el trabajo habitual con un conjunto de casos difíciles identificados por calidad. Consérvalos separados al informar resultados: una colección deliberada de excepciones ayuda a encontrar fallos, pero no permite estimar por sí sola su frecuencia en toda la operación.
No hay una cantidad universal de llamadas que valide cualquier campaña. Acuerda el tamaño según la variedad de criterios, los casos que necesitas observar, la frecuencia de situaciones críticas y la incertidumbre que puede aceptar el negocio. Una muestra sin errores críticos conocidos no demuestra que el sistema los detecte.
- Conversaciones habituales de distintos horarios y duraciones, sin elegirlas solo por su nota previa.
- Llamadas con cumplimiento y con omisiones confirmadas por el responsable de la pauta.
- Casos donde una obligación no corresponde porque la gestión terminó antes o siguió otro recorrido.
- Audio con ruido, voces superpuestas, interrupciones o una parte de la conversación ausente.
- Nombres de archivo y variantes que permitan comprobar la asignación a la campaña correcta.
- Registro de autorización y condiciones de transferencia y tratamiento antes de compartir grabaciones reales. El contacto inicial puede describir la operación sin adjuntarlas.
3. Construye una referencia por criterio, con evidencia
Antes de ver el resultado automático, pide a los revisores designados que apliquen la misma pauta a los audios seleccionados. Deben registrar criterio, aplicabilidad, conclusión y tramo que la sostiene. Resuelvan sus diferencias y conserven tanto las decisiones iniciales como la interpretación acordada.
Esa referencia humana también puede contener errores. Cuando la IA y el equipo difieran, vuelve al audio y al documento vigente; no clasifiques automáticamente toda diferencia como un fallo del software. Separa problemas de grabación, transcripción, pauta, interpretación y asignación de campaña.
VoxKPI procesa llamadas ya grabadas de forma asíncrona; esta evaluación no prueba asistencia en vivo. Su pauta parte de un script PDF con texto extraíble: un documento compuesto solo por imágenes requiere preparación, porque ese flujo no incluye OCR. Los criterios propuestos por la IA deben revisarse antes de evaluar.
La evaluación incluye puntajes, justificación y cita con minuto cuando existe evidencia textual. La cita o el minuto pueden faltar; una omisión no tiene necesariamente una frase que citar. Comprueba entonces que la etapa correspondía, que el audio estaba completo y que la conclusión explica qué obligación faltó.
4. Acuerda la matriz de aceptación antes de medir
La siguiente matriz es una plantilla metodológica. Sustituye las preguntas por condiciones verificables de tu campaña y acuerda sus límites antes de revisar los resultados. Un buen promedio no compensa automáticamente un fallo crítico para el negocio.
En la hoja descargable, registra el requisito, la forma de comprobarlo, el criterio de aceptación acordado, el resultado observado, la evidencia, el responsable y la decisión. No es un archivo de importación ni una función de aceptación automática de VoxKPI.
| Aspecto | Qué comprobar | Quién valida |
|---|---|---|
| Recepción | ¿Los audios previstos llegaron completos y a la campaña correcta? Registrar faltantes y excepciones. | Tecnología y operaciones |
| Pauta | ¿Los criterios aplicados corresponden al documento y a la versión acordada? | Responsable de calidad |
| Evidencia | ¿La conclusión se puede contrastar con el contexto del audio? Revisar también las omisiones. | Revisores designados |
| Casos críticos | ¿Qué hallazgos se omitieron o se señalaron por error frente a la referencia revisada? | Responsable del riesgo de la campaña |
| Trabajo del supervisor | ¿Cuánto tiempo real requiere revisar, resolver diferencias y documentar acciones? | Supervisión |
| Continuidad | ¿Están acordados responsables, excepciones, volumen, condiciones y costo del servicio? | Operaciones y comprador |
5. Explica qué pasó con cada grabación
Mantén el registro del lote original. Distingue audios recibidos, grabaciones únicas, archivos utilizables, evaluaciones terminadas y casos revisados por personas. Documenta exclusiones y reintentos: eliminar del informe los casos difíciles produce una lectura demasiado favorable.
Ejemplo ficticio, ajeno al rendimiento de VoxKPI: se reciben 60 archivos; 4 son duplicados, quedan 56 grabaciones únicas y 6 tienen problemas de audio que impiden evaluarlas. De las 50 utilizables, 47 terminan la evaluación en el corte observado y 3 siguen pendientes. La finalización sobre utilizables es 47 ÷ 50 × 100 = 94%; sobre las 56 grabaciones únicas recibidas es aproximadamente 83,9%. Ambas cifras necesitan su denominador y no miden la corrección de las conclusiones.
Registra aparte las discrepancias en criterios críticos, incluidos los casos que el sistema dio por correctos. Revisar solo las alertas puede revelar falsas alarmas, pero deja sin observar los incumplimientos que no fueron señalados.
6. Cierra con una decisión y pendientes concretos
Clasifica cada requisito como comprobado, pendiente o incumplido, con una evidencia accesible para el equipo autorizado. Si hace falta un ajuste, registra qué cambiará y qué conjunto se volverá a evaluar. Conserva una parte de la muestra sin usar para esos ajustes: permite comprobar si la mejora se extiende a llamadas que no guiaron la corrección.
La salida puede ser continuar con un alcance definido, repetir una parte tras corregirla o detener la evaluación. Identifica al responsable de esa decisión y las condiciones que quedan abiertas. Haber completado el recorrido técnico no equivale a aprobación del negocio.
El marco voluntario AI RMF de NIST propone elegir mediciones apropiadas al uso y documentar límites y riesgos. Aquí sirve como referencia metodológica; no acredita a VoxKPI ni convierte esta matriz en una certificación.
Preguntas frecuentes
¿Cuántas llamadas necesita un piloto de auditoría con IA?
Depende de la variedad de la campaña, los criterios y los casos que necesitas comprobar. Acuerda la muestra y sus límites antes de medir. Un número de llamadas, sin saber cómo se seleccionaron, no demuestra representatividad ni capacidad para detectar errores poco frecuentes.
¿Una coincidencia alta con un supervisor basta para contratar?
No por sí sola. Revisa la referencia humana, las diferencias por criterio, los casos críticos, las exclusiones de audio y el trabajo posterior del equipo. La decisión debe responder al alcance y a los criterios de aceptación acordados.
¿VoxKPI ofrece automáticamente el piloto descrito en esta guía?
La guía es una herramienta de preparación para el comprador. En la demostración se revisa el encaje y se acuerdan, cuando corresponda, alcance, condiciones, responsabilidades y costo de una evaluación.