Integración de Agentes de IA para Procesamiento Semántico y Animación Procedural en Simulaciones del ECOE con Realidad Virtual

Resumen

El siguiente articulo aborda el desarrollo de una herramienta de realidad virtual (RV) de bajo costo diseñada para el entrenamiento inmersivo y dinámico del Examen Clínico Objetivo Estructurado (ECOE) en estudiantes de medicina. La plataforma posiciona al usuario ante un paciente virtual dentro de un entorno 3D, gestionando su comportamiento mediante Oculus LipSync y los componentes de animación procedural y audio de Unity para permitirle hablar, gesticular y moverse. Como núcleo cognitivo, se integró la plataforma Wit.ai para el reconocimiento de voz, cuya transcripción es procesada por la API de Gemini 1.5 Flash para detectar intenciones clínicas. El modelo devuelve una respuesta estructurada en formato JSON que se expresa verbalmente mediante el motor de texto a voz Google TTS. Para la simulación del caso y la personalidad del paciente, se diseñó un archivo JSON con datos de su historia clínica y examen físico (H&P), síntomas y temperamento. Este archivo actúa como prompt de sistema restrictivo para el modelo de lenguaje, logrando interacciones más orgánicas y complejas que los árboles de comportamiento tradicionales. Se concluye que este framework constituye una propuesta moderna, accesible y funcional que democratiza la simulación médica virtual de alta fidelidad, permitiendo configurar escenarios clínicos más complejos y flexibles, con menos esfuerzo.

Palabras clave: realidad virtual, inteligencia artificial, procesamiento semántico, animación procedural, simulación médica.