Puntuación de confianza

Una puntuación de confianza es un valor entre 0 y 1 con el que un modelo de IA expresa cuán seguro está de su respuesta. En los chatbots, la puntuación decide si la IA responde por sí misma, hace una pregunta de aclaración o transfiere a un agente humano.

¿Qué es una puntuación de confianza?

Una puntuación de confianza es la autoevaluación cuantificada de un modelo de IA: ¿qué tan seguro estoy de esta respuesta? Los valores van típicamente de 0 (incierto) a 1 (muy seguro) y representan una probabilidad, no una medida absoluta.

En un contexto de bot de messaging, la puntuación de confianza decide qué pasa tras una pregunta del usuario: alta confianza → el bot responde; media → repregunta de aclaración; baja → traspaso a un agente humano.

Cómo surge una puntuación de confianza

Distintos tipos de bots producen puntuaciones de forma distinta:

Tipo de botCómo se mide la confianza
Bot por palabras clave (autoresponder)Coincidencia o no — sin puntuación real de confianza. La regla se dispara o no.
Bot NLU (clasificación de intención)Probabilidad de que la entrada del usuario pertenezca a la intención X. Salida: distribución de probabilidad sobre todas las intenciones.
Bot RAG (retrieval-augmented generation)Similitud entre la pregunta del usuario y el mejor fragmento de la base de conocimiento, combinada con la autoevaluación del modelo.
Agente IAMultietapa: confianza en la elección de la herramienta, confianza en el resultado, total ponderado.

Umbrales

En la práctica se trabaja con umbrales que dirigen el comportamiento del sistema:

  • ≥ 0,80 — la IA responde por sí misma. Alta certeza.
  • 0,50 a 0,80 — la IA hace una repregunta de aclaración («¿Quiso decir X o Y?»).
  • < 0,50 — traspaso a un agente humano.

Los umbrales exactos dependen del modelo y del caso de uso. Para temas críticos (salud, legal, finanzas) los umbrales son más altos.

Puntuación de confianza y lógica de traspaso

Los bots de IA de SendSeven soportan una lógica de escalado configurable: tras max_failed_attempts respuestas seguidas con baja confianza, el bot traspasa automáticamente a un humano. El valor por defecto suele ser 2 o 3 — para que el cliente no quede atrapado en un bucle.

Importante: los bots por palabras clave (autoresponders) no usan esta lógica de escalado porque no tienen una puntuación real de confianza. O coinciden o devuelven un texto de fallback.

Causas habituales de confianza baja

  • Pregunta fuera de la base de conocimiento: El cliente pregunta sobre un tema no ingerido.
  • Redacción ambigua: «Tengo un problema con la app» encaja en 15 temas.
  • Idioma equivocado: El usuario escribe en inglés, el bot está entrenado en español.
  • Ortografía/jerga: Erratas o jerga que el modelo no reconoce.
  • Multi-intención: El cliente hace dos preguntas a la vez — el modelo no sabe cuál responder primero.

Visibilidad de la confianza

En la vista del agente, SendSeven muestra la puntuación de confianza que el bot asignó a una respuesta. Las respuestas de baja confianza se marcan como advertencias — los agentes pueden corregir en línea y reportar la laguna al responsable de la base de conocimiento. Así el sistema aprende de cada traspaso.

Confianza vs corrección

Lección importante: alta confianza no significa alta corrección. Un modelo puede estar muy confiado y aún así equivocarse («alucinación»). La confianza es una señal, no una garantía. Por eso un montaje productivo siempre incluye: un conjunto de test con ground truth, muestreo regular y un bucle de feedback de los agentes a los responsables de la base de conocimiento.