Uso de inteligencia artificial para evaluar fidelidad de implementación: aprendizajes desde la experiencia de PMTO Chile
Conference | Online
-
Organized by:
Fundación San Carlos de Maipo
About the Event
Esta conferencia presenta la experiencia de la Fundación San Carlos de Maipo en el desarrollo y pilotaje de una herramienta basada en inteligencia artificial (LLM) para automatizar la evaluación de fidelidad de implementación del programa Parentalidad que Motiva con Ternura y Optimismo (PMTO), como un complemento a la evaluación de fidelidad realizada actualmente por el equipo de expertos en el programa
Tradicionalmente, la evaluación de fidelidad requiere evaluadores expertos y un proceso intensivo en tiempo y recursos. En este contexto, el proyecto exploró la factibilidad de utilizar modelos de lenguaje para analizar transcripciones de sesiones y evaluar el desempeño de facilitadores en los cinco ejes del sistema FIMP: conocimiento, enseñanza, proceso, estructura y evaluación global. El prototipo desarrollado mostró resultados prometedores como herramienta de evaluación, además de ser probado tanto en español como inglés.
Los participantes conocerán una aplicación concreta de IA en evaluación, así como reflexiones clave sobre sus alcances, limitaciones, riesgos y condiciones necesarias para su uso en contextos reales de implementación.
Tradicionalmente, la evaluación de fidelidad requiere evaluadores expertos y un proceso intensivo en tiempo y recursos. En este contexto, el proyecto exploró la factibilidad de utilizar modelos de lenguaje para analizar transcripciones de sesiones y evaluar el desempeño de facilitadores en los cinco ejes del sistema FIMP: conocimiento, enseñanza, proceso, estructura y evaluación global. El prototipo desarrollado mostró resultados prometedores como herramienta de evaluación, además de ser probado tanto en español como inglés.
Los participantes conocerán una aplicación concreta de IA en evaluación, así como reflexiones clave sobre sus alcances, limitaciones, riesgos y condiciones necesarias para su uso en contextos reales de implementación.
Speakers
| Name | Title | Biography |
|---|---|---|
| Luz Cantizano Rioseco | Coordinadora Programa Parentalidad que Motiva con Ternura y Optimismo (PMTO), Fundación San Carlos de Maipo | Psicóloga | Psicóloga y Coordinadora en Fundación San Carlos de Maipo, con experiencia implementación y evaluación de programas de crianza basados en evidencia. Especialista en parentalidad, con interés y foco en la escalabilidad de intervenciones preventivas de alto impacto social. |
| Paulina Peña | Supervisora Programa Parentalidad que Motiva con Ternura y Optimismo (PMTO), Fundación San Carlos de Maipo | Psicóloga. | Psicóloga y terapeuta familiar. Supervisora en la Fundación San Carlos de Maipo, con experiencia en implementación y supervisión del programa de parentalidad PMTO, además de entrenamiento de evaluadores de fidelidad del programa. |
| Rubén Parra-Cardona | Académico en la Universidad de Tennessee y Roger and Carol Nooe Endowed Chair. | Rubén Parra Cardona es académico en la Universidad de Tennessee y Roger and Carol Nooe Endowed Chair. Previamente fue profesor y Associate Dean for Global Engagement por más de 7 años en la Universidad de Texas en Austin. Investiga adaptación cultural de intervenciones en crianza y prevención del maltrato infantil. |
| Karol Sandoval | Senior Data Scientist, Artefact | Estadística. | Data Scientist en Artefact, con experiencia desarrollando modelos de machine learning y soluciones analíticas para diversas industrias, con interés en el uso de los datos para optimizar procesos y apoyar la toma de decisiones de alto impacto. |
Moderators
| Name | Title | Biography |
|---|---|---|
| Constanza Ruiz | Coordinadora de Estudios, Fundación San Carlos de Maipo | Socióloga, MPP. | Socióloga y Coordinadora de Estudios en Fundación San Carlos de Maipo, con experiencia en diseño, monitoreo y evaluación de programas sociales. Ha trabajado en investigación aplicada en educación y primera infancia. Es Magíster en Políticas Públicas. |