MortarBench: Evaluación de Agentes de Originación de Préstamos Hipotecarios

La originación de préstamos hipotecarios es un proceso crítico que combina evaluación de riesgos, cumplimiento normativo y eficiencia operativa. En los últimos años, el uso de agentes de inteligencia artificial para asistir o incluso reemplazar tareas tradicionales de los oficiales de crédito ha ganado tracción, pero la falta de benchmarks públicos dificulta medir su verdadero desempeño. En este contexto surge MortarBench, un benchmark diseñado para evaluar agentes de originación de préstamos, que expone tanto las capacidades como las limitaciones de los modelos de lenguaje de última generación. Los resultados revelan que incluso los sistemas cerrados más avanzados apenas alcanzan un 77,1 % de precisión exacta, y lo que es más preocupante: muestran sesgos sistemáticos relacionados con la percepción de extranjería, especialmente ante nombres no anglosajones. Este hallazgo subraya la necesidad de incorporar estrategias de calibración de confianza como CRIT, que no solo mejora la exactitud hasta el 80,5 %, sino que también refuerza la gestión de riesgos y reduce sesgos. Para las empresas que buscan implementar soluciones de ia para empresas en procesos financieros, contar con agentes IA robustos y éticos es fundamental. En Q2BSTUDIO desarrollamos aplicaciones a medida y software a medida que integran inteligencia artificial con altos estándares de ciberseguridad, apoyados en servicios cloud aws y azure para escalabilidad. Además, ofrecemos servicios inteligencia de negocio con power bi para monitorear el desempeño de estos sistemas. La lección de MortarBench es clara: no basta con tener modelos potentes; su implementación responsable requiere herramientas de validación, transparencia y mejora continua. Desde la consultoría hasta el despliegue, ayudamos a las organizaciones a construir plataformas de originación que sean precisas, justas y alineadas con la regulación, transformando la tecnología en una ventaja competitiva real.