Oraclum Evals
¿Esta regla todavía es el trabajo?
Oraclum Evals revisa si lo que un agente ya hace bien sigue haciendo falta para el oficio que se le asignó. Si la tarea cumplió la instrucción pero ya no sirve al trabajo, se cambia el mandato. El sistema no solo pregunta «¿siguió las reglas?». Pregunta «¿esta regla todavía es el trabajo?».
/01
Qué es una evaluación
Una evaluación es una prueba con respuesta conocida. Se toma algo que ya pasó en tu operación, se le pide al agente que lo resuelva y se compara con lo que tu gente decidió en su momento. Así se sabe si el agente sirve antes de confiarle lo que viene.
/02
Dos preguntas a cada agente
- ¿Cumplió la instrucción?
- ¿Eso que hizo sigue haciendo falta para el oficio que se le asignó?
- Si la primera es sí y la segunda es no, el problema no es el agente. Es el mandato.
- El mandato se cambia con firma de quien sabe del tema.
/03
Qué se evalúa
- Si el agente cumplió la instrucción.
- Si lo que hizo sigue haciendo falta para su oficio.
- Si un hallazgo que se repite merece volverse regla escrita.
- Si una regla vigente dejó de servir.
/04
Cuándo entra
- Cuando la operación ya corre y un hallazgo se repite.
- El primer día no hay nada que revisar todavía. Primero se monta la ontología y se ve el cruce.
/05
Lo que se repite se vuelve regla
Un hallazgo que se repite puede volverse una regla escrita, probada y firmada por tu gente.
- 01El sistema detecta que un hallazgo se repite.
- 02Propone un patrón: una regla, un ajuste al mandato de un agente o un dato que conviene capturar.
- 03El patrón se prueba contra casos que ya pasaron en tu operación.
- 04Quien sabe del tema lo revisa y lo firma.
- 05Entra en funcionamiento con número de versión.
- 06Se mide. Si deja de servir, se retira y su historia se queda.
/06
Qué cambia y qué no
- Cambian reglas y mandatos.
- No cambia quién decide.
- No cambia el significado de las cosas sin pasar por la ontología y su firma.
/07
Por qué con versiones
- Puedes ver qué regla estaba vigente cuando se tomó cada decisión.
- Puedes regresar a la versión anterior.
- Si alguien pregunta por una fecha, la respuesta existe.
/08
Qué no es
- No es una IA que aprende sola con tus datos.
- No es un botón que ajusta todo por su cuenta.
- No automatiza el criterio. Revisa si el criterio que tu gente firmó sigue siendo el trabajo.
Solicita tu demo
Te contestamos en un día hábil para definir fecha y platicar sobre tu operación.
