Contexto
Cuando entra alguien nuevo a tu equipo, no le das las llaves de todo el primer día. Revisas lo que entrega, le sueltas responsabilidades poco a poco y confías más cuando ves resultados. Con un agente de IA pasa lo mismo.
Un agente es un programa que recibe una tarea, usa herramientas (tu correo, tu sistema contable, una hoja de cálculo) y entrega un resultado. Y se equivoca. A veces lee mal un documento. A veces inventa un dato que suena razonable. A veces entiende una instrucción distinta a la que tenías en mente.
Por eso la supervisión no es un trámite técnico que se delega y se olvida. Es parte del diseño del puesto, y quien dirige decide cuánta hay y quién la hace. El modelo del proveedor procesa lo que se le envía, así que también decides desde el inicio qué información toca el agente.
La idea central
Supervisar no es mirar todo. Es dar a cada tipo de trabajo la revisión que merece según lo que cuesta equivocarse en él. Hay tres niveles, y un mismo agente suele usar los tres en tareas distintas.
- Aprobar antes. El agente prepara y una persona autoriza antes de que algo ocurra. Sirve para lo que sale de la empresa o mueve dinero, como un pago, un correo a un cliente o un contrato.
- Revisar una muestra. El agente actúa y una persona revisa una parte de lo hecho, elegida al azar. Sirve para trabajo repetitivo y de riesgo medio, como clasificar facturas.
- Revisar excepciones. El agente actúa y solo llama a una persona cuando algo se sale de lo normal. Sirve para trabajo de bajo riesgo y mucho volumen, y solo después de haber pasado por los otros dos niveles.
Empiezas casi siempre en el primer nivel y bajas hacia los otros cuando hay evidencia de que el agente lo hace bien.
Cómo se hace
La supervisión se apoya en cuatro piezas concretas.
Bitácora. Cada acción del agente queda registrada con fecha, qué hizo, qué información usó y qué decidió. Sin bitácora, un error es un misterio. Con ella, quien revisa reconstruye en minutos qué pasó y por qué.
Límites. Defines por escrito qué puede hacer el agente y qué no. Puede leer el estado de cuenta, pero no ejecutar transferencias. Puede redactar un correo, pero no enviarlo a clientes sin tu visto bueno. Los límites los das con permisos reales en los sistemas, no solo con instrucciones en un texto, porque una instrucción se puede interpretar mal y un permiso que no existe no se puede usar.
Escalamiento. El agente necesita reglas claras para detenerse y avisar a una persona. Por ejemplo, cuando la diferencia supera cierto monto, cuando le falta un documento o cuando dos fuentes se contradicen. Un buen agente dice que no está seguro, y eso lo diseñas desde el principio.
Medición. Para saber si el agente trabaja bien necesitas pocos números, y todos se entienden sin ser técnico:
- Porcentaje de acierto en la muestra revisada.
- Cuántas veces hubo que corregir y qué tipo de error fue.
- Cuántas cosas escaló el agente y cuántas de esas realmente lo ameritaban.
- Cuánto tiempo tarda la persona en revisar, comparado con hacerlo desde cero.
Antes de medir, acuerda qué cuenta como error. Un monto mal capturado es un error. Una descripción redactada distinto a como lo haría tu contador, quizá no. Sin esa definición, dos revisores darán dos calificaciones.
Un caso ilustrativo
Ejemplo ilustrativo, no es un cliente real: imagina una distribuidora de materiales con una contadora, Marcela, que cada semana concilia los movimientos del banco contra los registros de cobranza. Los números y tiempos de este ejemplo son inventados, y en la práctica los resultados varían. En el ejemplo, la tarea le toma casi dos días.
Omni Agent instala un agente que hace el primer cruce.
En las primeras cuatro semanas, el agente trabaja en el primer nivel. Prepara la conciliación completa y Marcela revisa cada renglón antes de cerrar. Anota los errores. El agente confundió dos clientes con nombres parecidos y tomó un depósito duplicado como dos cobros distintos. Esas notas se vuelven reglas nuevas para el agente.
Marcela comprueba que el agente acierta en los renglones de rutina, que en este ejemplo son la mayoría. Pasan al segundo nivel. El agente concilia todo, Marcela revisa una muestra de cada diez renglones y revisa completos los que el agente marcó como dudosos. La regla de escalamiento dice que cualquier diferencia mayor a un monto que ella fijó, o cualquier depósito sin factura asociada, va directo a su escritorio.
Los pagos y las transferencias siguen en el primer nivel. El agente nunca los ejecuta, solo los propone, y Marcela los autoriza uno por uno.
El cambio para Marcela es de oficio. Antes cruzaba renglones a mano. Ahora atiende los casos raros, habla con cobranza sobre los depósitos que no cuadran, afina las reglas y dedica parte de su semana a revisar al agente. Es la misma persona con más alcance. Cada semana revisa la bitácora, cuenta cuántos errores encontró en la muestra y decide si conviene ampliar o reducir lo que revisa.
Para llevarte
- Supervisas a un agente como a un colaborador nuevo. Empiezas cerca y sueltas con evidencia.
- Elige el nivel de revisión según lo que cuesta equivocarse. Aprobar antes, revisar una muestra o revisar excepciones.
- Pide bitácora, límites reales en los sistemas y reglas claras de escalamiento.
- Mide con pocos números simples y define antes qué cuenta como error.
- Los errores que encuentras sirven para mejorar al agente. Nada garantiza cero errores, y por eso quien revisa sigue siendo parte del trabajo.