Jiménez, M. et al.

, III Congreso Colombiano de Computación, Medellín, Abril de 2008

1

Evaluación en Línea para Cursos Tutoriales Inteligentes Adaptativos usando el Modelo de Sistema Multi-Agente On line Assessment for Adaptive Intelligent Tutoring Courses using Multi-Agent System Model
Marcela Jiménez Sánchez, Ing, MSc (c), Jovani Jiménez Builes, PhD, Demetrio A. Ovalle C., PhD. GIDIA: Grupo de Investigación y Desarrollo en Inteligencia Artificial Escuela de Ingeniería de Sistemas Universidad Nacional de Colombia – Sede Medellín. {mjimene, jajimen1, dovalle}@unalmed.edu.co
Recibido para revisión 28 de Noviembre de 2007, aceptado 14 de Febrero de 2008, versión final 28 de Febrero de 2008

Resumen—La evaluación es el mecanismo a través del cual se verifica el cumplimiento de los objetivos instruccionales de un curso y se determina el nivel de conocimientos logrado por el estudiante. Además de la función de diagnóstico, la evaluación debe motivar al alumno a que desarrolle un conjunto de habilidades asociadas al dominio de conocimiento que se está impartiendo, mediante la realimentación de los resultados obtenidos y la exposición clara de los criterios de evaluación. El propósito del presente artículo es exponer un modelo de evaluación en línea que se pueda integrar apropiadamente a un curso tutorial inteligente que exhibe características adaptativas y adopta la estructura de los Sistemas Multi-Agente. CIA (Curso Inteligente Adaptativo) es el prototipo que permite validar esta investigación y se viene desarrollando en la Universidad Nacional de Colombia – Sede Medellín. Acorde a las características del sistema tutorial, el mecanismo de evaluación también debe adoptar comportamientos adaptativos que permitan ajustar el método de diagnóstico del nivel de conocimiento a las preferencias (estilos de aprendizaje) y a las características del estudiante que condicionen su proceso de aprendizaje. Palabras Clave—E-Learning, Sistemas Tutoriales Inteligentes, Sistemas Adaptativos, Evaluación de nivel de conocimientos, Sistemas Multi-Agente. Abstract—Assessment is the mechanism through which verifies the accomplishment of a course instructional objectives and

determines the level of knowledge achieved by the student. In addition to the role of diagnosis, evaluation should motivate the student to develop a set of skills associated with the domain knowledge that is taught using the results feedback and the clear statement of the evaluation criteria. The purpose of this article is present an online assessment model that can be integrated properly to an intelligent tutorial course that exhibit adaptive characteristics and adopts a MultiAgent System structure. CIA (Adaptive Intelligent Course) is a prototype that allows validation of this research and is being developed at the Universidad Nacional de Colombia - Sede Medellin. According to the tutorial system characteristics, the assessment mechanism should also consider adaptive behaviors that enable diagnostic method to adjust the level of knowledge to the preferences (learning styles) and the features student that determines the learning process. Keywords— Adaptive Systems, E-Learning, Intelligent Tutoring Systems, , Knowledge level assessment, Multi-Agent System.
I.

INTRODUCCIÓN

T

AN importante como es el proceso de enseñanza lo es el proceso de evaluación, este se debe ejecutar continuamente para que actúe como un mecanismo de autorregulación que se basa en la verificación del

etc.). psicología (hemisferio del cerebro dominante). estilos de aprendizaje (visual. que pueden ser soportados por las tecnologías que hoy sirven de base para la creación de programas que autónomamente realizan la calificación. sistema operativo. cada UBA tiene asociados unos temas más específicos y por cada tema unos OI (Objetivo Instruccional). Fig. es decir. Medellín. siendo la principal diferencia el uso de técnicas de la Inteligencia Artificial. textual. La información contenida en los modelos previamente definidos. auditivo). La estructura de los STI se define principalmente por los siguientes tres componentes: modelo del dominio. También se considera que el proceso de evaluación puede llegar a ser más efectivo si además de identificar los objetivos alcanzados por el estudiante. Adicionalmente se presentarán las conclusiones y los trabajos futuros. El nodo raíz es el curso y cada curso se compone de UBA (Unidad Básica de Aprendizaje) o ejes temáticos principales. visión. es necesario un sistema de calificación de las respuestas y un sistema de gestión de dicha información. 2 diseñados para impartir instrucción y apoyar inteligentemente los procesos de enseñanza/aprendizaje mediante la interacción con el estudiante [2]. el modelo pedagógico contiene la información que permite decidir qué actividades se le deben proponer al estudiante y cuáles estrategias pedagógicas son las más adecuadas para ser propuestas en el curso. . En el modelo del dominio. Sumado a esto. M. de las cuales se han escogido las más importantes o las más significativas. historial (actividades realizadas. se representa el modelo del dominio en una jerarquía. logros académicos (OI aprobados) y trabajo en grupo [4]. Se denominan “inteligentes” para diferenciarlos de los sistemas tradicionales de enseñanza asistida por computador. 2. la medición del rendimiento de los alumnos y la validación de la estrategia pedagógica. fecha de nacimiento. La estructura del modelo del estudiante se puede ver en la Fig. Con el fin de superar las limitaciones que impiden llevar la evaluación tradicional al nivel del aprendizaje activo. Para esto. sin la posibilidad de obtener ningún tipo de realimentación [1]. se propone un método de evaluación que posibilite el desarrollo de las competencias correspondientes al dominio del conocimiento. es decir. etc. posteriormente se presentará el modelo de evaluación en línea propuesto y finalmente se realizará el análisis de los resultados obtenidos. El propósito de la evaluación de nivel de conocimientos es en principio. el modelo del estudiante recoge los datos que describen al alumno desde perspectivas diferentes tales como aspectos psicopedagógicos. los cuales señalan los logros que debe haber alcanzado el alumno al finalizar el estudio del tema. el sistema de evaluación del nivel de conocimientos debe estar diseñado para construir los tests de acuerdo a esta información. Estructura del Modelo del Dominio II. tiempos de estudio). Aún cuando se tiene acceso a las tecnologías de la información y las comunicaciones. estas categorías son: datos personales (nombre. La estructura de los modelos del STI que se proponen en este trabajo se presenta a continuación: A. Modelo del Dominio En la Fig. El contenido de este artículo se presentará de la siguiente forma: inicialmente se presentará el marco teórico asociado a los Cursos Tutoriales Inteligentes y a los Sistemas MultiAgentes.Jiménez. Por último. lograr la motivación de los alumnos a que realicen actividades y amplíen lo visto en el curso mediante la solución de preguntas y problemas prácticos a través de un diagnóstico consciente de su estado académico. verificar el cumplimiento de los objetivos trazados para el curso (Objetivos Instruccionales) a través del análisis de las respuestas dadas por los estudiantes a un conjunto de preguntas. modelo del estudiante y modelo pedagógico. que sea transparente para el alumno. análisis y presentación de los resultados de evaluación.). [3]. etc. para lo cual se puede implementar un formato adecuado para la presentación de resultados. que exponga claramente los procedimientos y criterios de evaluación y que además sirva de soporte para el proceso de enseñanza/aprendizaje. es usada para todas las acciones que se llevan a cabo en el STI. fisiología (audición. la evaluación del nivel de conocimientos cobra especial importancia puesto que tiene como responsabilidad. 1. et al.). al conjunto de preferencias y características que definen el aprendizaje del usuario (Estilos de Aprendizaje) para la generación de los tests o cuestionarios. En el ámbito de los entornos de aprendizaje activo. CURSOS TUTORIALES INTELIGENTES En la literatura se conocen como STI (Sistemas Tutoriales Inteligentes) a aquellos sistemas asistidos por computador B. como en el caso del elearning (cursos virtuales). Abril de 2008 cumplimiento de los objetivos. la evaluación se puede ver limitada por la utilización de tests o cuestionarios estáticos que abarcan solo conceptos vistos en el curso y que sirven únicamente como instrumento de clasificación de estudiantes que aprueban o reprueban el curso. etc. el sistema también está en capacidad de señalar las fallas que el estudiante debe superar. el sistema almacena todo el conocimiento del tema que se imparte en el curso. características contextuales (dispositivo de acceso. III Congreso Colombiano de Computación. 1. la propuesta presentada en este trabajo considera que la evaluación en línea en entornos de aprendizaje activo se debe adaptar al modelo o perfil del estudiante.. características de su entorno. Por su parte. estado de la red. Modelo del Estudiante Se propone una estructura muy completa que clasifica la información del estudiante en varias categorías. preferencias. sexo.

que cada OI tiene asociadas unas actividades para alcanzarlo y a su vez esas actividades se relacionan a uno o varios objetos de aprendizaje. Abril de 2008 3 Fig. un OA (Objeto de Aprendizaje) se define como un componente de instrucción que puede ser reutilizado varias veces en contextos de estudio diferentes [5]. para lo cual se deben tener los OA de lectura.Jiménez. III Congreso Colombiano de Computación. Una muestra de esto es la revisión del estado del arte realizada sobre la situación de los TAI. los problemas suscitados y las soluciones que se han planteado [9]. Estructura presentada por el modelo pedagógico III. En términos generales. Este conocimiento se adquiere a través de un test adaptativo que se basa en la Teoría de Respuesta al Ítem. se comunican por medio del protocolo de paso de mensajes y realizando sus acciones concurrentemente. Cada uno de los agentes de software del SMA son programas que actúan en representación de sus usuarios humanos o dueños para realizar tareas complicadas de manejo de información. et al. Poseen un conjunto de metas de enseñanza. “Los SMA provienen de las áreas de investigación de la Inteligencia Artificial Distribuida (Distributed Artificial Intelligence. en 2007 [10]. este proceso continúa hasta que se cumpla un criterio de finalización preestablecido [8]. es decir. et al. Un TAI es necesariamente administrado por computador y consiste en un algoritmo iterativo que realiza una estimación inicial del nivel de conocimiento del estudiante a partir de una pregunta introductoria y según la respuesta escoge la siguiente pregunta. problemas o en la consecución de una serie de objetivos individuales o colectivos. 3. y recursos asociados en los ambientes de aprendizaje. es necesario resaltar las investigaciones realizadas sobre TAI por el Equipo de Desarrollo e Investigación en Medición (EDIM) de la Universidad Autónoma de Madrid. una actividad puede consistir en leer. escuchar o ver diagramas sobre un tema específico. el modelo pedagógico hace uso del modelo del estudiante para conocer el estado en el curso (qué temas ha estudiado) y le propone las actividades a realizar para alcanzar cierto objetivo. En la Fig. proporcionando realimentación continua durante las sesiones de trabajo. cuyos investigadores responsables han venido publicando importantes artículos sobre el tema en cuestión. Medellín. Otro producto notable del EDIM. ya sea para colaborar en la solución de un conjunto de . PAI)” [6]. Modelo Pedagógico Este modelo parte de la estructura de los cursos. se muestra un ejemplo de la asociación entre los OI. 2. De esta manera. proactividad movilidad. continuidad temporal. Este trabajo se diferencia porque considera varios tipos de Fig. Los agentes de software pueden representar conocimiento pedagógico y/o desempeñar tareas de tutoría para soportar y facilitar el aprendizaje humano. M. ayudando a los estudiantes en la superación de sus dificultades y en el aprovechamiento de las oportunidades de aprendizaje. A nivel internacional. DPS) y la Inteligencia Artificial Paralela (Parallel Artificial Intelligence. planes instruccionales para la ejecución de esas metas (p. es el trabajo de Guzmán. Un SMA es una sociedad organizada compuesta por agentes semiautónomos que interactúan entre sí. Estructura del Modelo del Estudiante C.. habilidad social. En él se propone un modelo del estudiante en el cual el conocimiento está representado por medio de distribuciones de probabilidad asociadas a un árbol de conceptos. estrategias pedagógicas o de enseñanza). De esta forma. sabe cuáles UBA corresponden al curso. las actividades y los OA. Poseen propiedades como: autonomía. reactividad. Es claro entonces. DAI). ESTADO DEL ARTE DE LA EVALUACIÓN EN LÍNEA ADAPTATIVA Una de las técnicas actuales más importantes de evaluación adaptativa se conoce como TAI (Tests Adaptativos Informatizados) y son ampliamente usados en el campo de la educación. Los agentes informáticos pueden ser homogéneos o heterogéneos y pueden tener metas comunes o no. cuáles Temas componen cada UBA y cuáles OI se deben alcanzar por cada Tema. Ellos colaboran con los aprendices y con otros agentes. Los objetos de aprendizaje presentan el contenido del curso en distintos formatos con el propósito de facilitarle el aprendizaje al estudiante. Los agentes pedagógicos pueden adaptar sus interacciones instruccionales a las necesidades de los aprendices y al estado actual del ambiente de aprendizaje. SISTEMAS MULTI-AGENTE Los SMA (Sistemas Multi-Agente) se dan a conocer en la década de los 80s a partir de las investigaciones de los agentes de software y es hasta la década de los 90s que se destacan. Los SMA son considerados paradigmas de la ingeniería de software creados para el diseño y desarrollo de programas complejos [7]. la Solución de Problemas Distribuidos (Distributed Problems Solving. de esta manera se imparte el curso.e. IV. 3. de escucha o gráficos. adaptabilidad y aprendizaje. pero siempre involucrarán algún grado de comunicación entre ellos.

por cada pregunta hay una o más respuestas y cada respuesta tiene una validez de 1 si es correcta o 0 si es incorrecta. Así mismo. se específica para cada pregunta un atributo pretest de tipo binario. A continuación se describe un tipo estructura para el banco de preguntas. SMUR (Selección Múltiple . 5. Fig. A nivel local. Medellín. el profesor del curso es quien construye los tests (escoge las preguntas). el sistema autónomamente construye los tests y los califica. se ilustra la relación del elemento concepto básico con los componentes del modelo de dominio. tienen un concepto básico asociado que se refiere al concepto o unidad más pequeña de conocimiento que se evalúa. que permiten diagnosticar el nivel de conocimiento y las preferencias del estudiante con el fin de sugerir estrategias pedagógicas a desarrollar en aplicaciones e-learning. además es necesario que todo el contenido del curso esté completamente estructurado y definido porque del material se formularán las preguntas de evaluación..Única Respuesta). En la Fig. Se considera que el banco de preguntas es suficientemente completo si abarca todos los temas del curso y por cada tema existen preguntas de varios niveles de dificultad y de diferentes tipos de presentación [13]. el tomar en cuenta el estilo de aprendizaje del estudiante para adaptar la presentación de los ítems de la evaluación según sus preferencias. que puede ser de: SMMR (Selección Múltiple . Relación Pregunta-Respuesta V. 4 importantes en el desarrollo del mecanismo de evaluación adaptativa del nivel de conocimientos del estudiante en STI. se espera que el interés en estos programas sea cada vez mayor y que su uso se extienda a otros ambientes educativos. como se puede ver en la Fig. en otras situaciones. Las preguntas además de tener un OI correspondiente. por lo tanto debe ser lo más completo posible. no sólo respuestas correctas e incorrectas.Juego. Se reconoce como una fortaleza de esta propuesta. es a través de cuestionarios o tests. De acuerdo a lo anterior. es decir que las preguntas a formular se escogen dinámicamente. una propuesta de un sistema de evaluación es presentada en el trabajo de Duque y Agudelo en 2004 [12]. la construcción del banco de preguntas requiere de un esfuerzo considerable. Gamboa & Fred en 2001 [11]. esta medida se relaciona en gran medida con el tipo de pregunta. et al. Banco de Preguntas La creación del banco de preguntas es una de las etapas más Fig. se identifica como debilidad el hecho de que no se modela el aspecto colaborativo del usuario. Abril de 2008 resultados. PROPUESTA DE EVALUACIÓN DEL NIVEL DE CONOCIMIENTO DEL ESTUDIANTE Con el propósito de determinar cuál es el nivel de conocimiento del estudiante en un momento dado. sin embargo podría darse el caso en el cual la pregunta aborda varios conceptos básicos. En cuanto a la estructura de las preguntas de evaluación. En algunos casos. A través del análisis de los resultados de la evaluación. 4. El modelamiento de este trabajo se realiza mediante la metodología de Sistemas Multi-Agente MASCommonKADS. proponen el modelo y la arquitectura para el diseño de STI usando redes bayesianas. además genera los resultados. lo cual se resalta como una fortaleza de este trabajo. el cual indica si la pregunta es de evaluación (pretest=0) o si es de pretest (pretest=1). donde se aprovecha la información que se recoge del estudiante (perfil del estudiante) para crear automáticamente evaluaciones individualizadas. 4. 5. Ya que la evaluación se lleva a cabo mediante tests. Esto con el fin de que al evaluar se abarque la mayor parte del conocimiento limitado por un OI y no se repitan preguntas sobre un mismo concepto. en ese caso se asocia la pregunta solo a uno de ellos. Estas preguntas de pretest se crean con el propósito de que el estudiante refuerce los conocimientos adquiridos al realizar las actividades . es posible decidir acerca de las estrategias pedagógicas usadas en el curso y de esta forma mejorar continuamente el proceso de enseñanza/aprendizaje. Las aplicaciones que existen de evaluación adaptativa y TAIs han sido desarrolladas principalmente para las Universidades. El sistema de inferencia bayesiano toma en consideración el estilo de aprendizaje del estudiante. A. Las preguntas de evaluación se formulan de acuerdo al concepto básico que evalúan. Asociación del Concepto Básico a los elementos del modelo de dominio También se define el tiempo de respuesta.Múltiple Respuesta). recibe las respuestas y las califica manualmente. sin embargo. La estrategia más común para determinar el nivel de conocimiento del estudiante en cursos asistidos por computador. el cual es un promedio del tiempo que tardaría el estudiante en responder la pregunta si estudió el tema. es necesario llevar a cabo la evaluación. se debe dar gran importancia a la forma de las preguntas que componen estos tests y a su cantidad. III Congreso Colombiano de Computación. permitiendo obtener un diagnóstico del nivel de conocimiento del estudiante más preciso. Este trabajo enfatiza en la importancia del modelo del estudiante ya que proporciona la información necesaria para la adaptación. M.Jiménez. FV (Falso o Verdadero) y correspondencia entre columnas o Actividad .

..Secuenciales: Aprenden por pasos incrementales lógicamente relacionados. el test indica que tan fuerte es la preferencia por una u otra categoría.) mientras que otros se sienten más cómodos al aprender conceptos abstractos (teorías.Activos: Comprenden mejor la información cuando la ponen en práctica. interactúa y responde al entorno educativo el estudiante. recuerdan mejor lo que ven. Por otro lado están quienes aprenden más al poner en práctica las cosas y analizar que pasa mientras que otros prefieren reflexionar en las cosas que van a hacer y entender lo más que puedan de ellas antes de hacerlas. prácticos. etc. pueden resolver problemas complejos rápidamente. esto se puede ver en la Tabla 1. Se ha determinado que conocer el estilo de aprendizaje del estudiante puede ser de gran ayuda para el STI a la hora de tomar las decisiones respecto a la forma como se deben presentar los contenidos del curso y al momento de escoger el tipo de pregunta que se va a formular. por lo tanto. También se identifican personas que prefieren la información gráfica (fotos. modelos matemáticos. Por lo tanto se define con objeto=1 cuando existe el OA respectivo y con objeto=0 cuando solo se tiene el texto de la pregunta. Estilos de Aprendizaje por tipo de pregunta Características de las preguntas Imágenes o fotografías Diagramas de flujo Líneas de tiempo Videos Demostraciones gráficas Demostraciones verbales Ver Mapas conceptuales Explicaciones habladas o escritas Definiciones de memoria Aplicaciones de los temas X X X X X X X X X X X X X Act Ref X Sen X X X X X X X X X X X X X Int Vis X X X X X X X X X X X X Ver Sec Gl X . se definieron las características de las preguntas que se pueden formular y los estilos a los cuales se pueden asociar. . Según la clasificación que se ha establecido.Visuales: Prefieren representaciones visuales de la información como diagramas de flujo.Intuitivos: Conceptuales.Reflexivos: Tienden a retener y comprender nueva información pensando y reflexionando sobre ella. Existen varias herramientas que permiten caracterizar los estilos de aprendizaje.Cómo prefiere el estudiante procesar la información que percibe: ¿Activamente o reflexivamente? . Por último. prefieren trabajar solos o con alguien de confianza. porque de esta manera se facilita al examinando la comprensión de lo que se le está evaluando y se evita su falta de concentración y motivación [15]. memorizan hechos con facilidad. orientados hacia teorías y significados.A través de qué modalidad percibe más efectivamente la información sensorial: ¿Visual o verbal? .Jiménez.) a diferencia de quienes captan mejor las explicaciones verbales. se formulan al terminar de estudiar cada contenido asociado a un objetivo. etc. sonidos. Abril de 2008 propuestas para alcanzar el objetivo. .). les gusta el trabajo de experimentación. Estilos de Aprendizaje Otro atributo que se define para cada pregunta de evaluación es el Estilo de Aprendizaje. Tabla 1.Cómo logra entender el estudiante: ¿Secuencialmente o globalmente? El modelo de Felder-Silverman clasifica a los estudiantes de acuerdo a las preferencias que tienen por una u otra categoría: . et al. etc.Globales: Aprenden en grandes saltos visualizando la totalidad. datos experimentales. . el atributo con objeto de tipo binario señala cuando la pregunta tiene asociado un OA para facilitar la comprensión de la pregunta por parte del estudiante a través de imágenes. innovadores. este término se refiere a las diferentes fortalezas y preferencias que tiene cada estudiante al momento de adquirir y procesar la información [14]. son ordenados y lineales cuando tratan de solucionar un problema. información simbólica. Para cada dimensión. . una de ellas es el test que se originó a partir del modelo desarrollado por Richard Felder y Linda Silverman en 1988 (Test de Felder-Silverman). El test de Felder-Silverman es una de las pruebas iniciales que realiza el estudiante al empezar un curso. etc. Para realizar la selección de las preguntas según los estilos de aprendizaje. diagramas. mapas. diagramas. discuten.Qué tipo de información percibe mejor el estudiante: ¿Sensorial o intuitiva? . 5 . B. Este test ha ido evolucionando con el tiempo y actualmente se puede responder y recibir los resultados en línea. algunas personas prefieren trabajar con información concreta (hechos. El índice de estilos de aprendizaje es un instrumento compuesto por 44 preguntas de dos opciones (a ó b) que permite categorizar a cada persona de acuerdo a las dimensiones mostradas anteriormente. comprende rápidamente nuevos conceptos. recuerdan mejor lo que leen o lo que oyen. orientados hacia hechos y procedimientos.Verbales: Prefieren obtener la información en forma escrita o hablada (explicaciones). . etc. Medellín. Este modelo fue creado para conocer las principales diferencias en estilo de aprendizaje entre estudiantes de ingeniería y de esta manera proveer buenas bases a los profesores para implementar estrategias pedagógicas ajustadas a las necesidades de los alumnos. Prefieren aprender ensayando y disfrutan el trabajo en grupo. M. La aplicación del modelo busca dar respuesta a los siguientes interrogantes: .. con ella se recopila información de las características cognitivas y los comportamientos afectivos y psicológicos que sirven de indicadores de cómo percibe.Sensoriales: Concretos. aplican y explican a otros. III Congreso Colombiano de Computación.

Cerebro izquierdo o inteligencia lógica: Se relaciona con la ciencia. esto con el fin de realizar otro filtro sobre el conjunto de preguntas. . . Medellín. .ciberneticasociale. . el sistema está verificando cuando el estudiante termina de revisar todas las actividades que le fueron programadas para un objetivo específico y una vez se produce este evento.Se realiza un filtro sobre las preguntas. El proceso de calificación de la evaluación realizada por el estudiante se describe en Fig. El análisis tricerebral contribuye de forma importante al análisis de las personas ya que no se concentra solo en la inteligencia y su relación con la habilidad matemática y la lógica. la experiencia. presentadas al estudiante y calificados por el agente evaluador. se selecciona una pregunta para cada concepto básico que posea una actividad. SMUR.Se recupera el estilo de aprendizaje del estudiante. . .6 (60%) se aprueba el OI evaluado. Cuando el estudiante envía las respuestas de la evaluación. . Se determinan que estrategias de enseñanza son apropiadas y qué recursos están disponibles dentro de cada comportamiento . . C.Se genera un formulario de evaluación con las preguntas seleccionadas.Se recupera desde la base de datos las respuestas correctas para cada una de las preguntas de la evaluación. se genera una evaluación teniendo en cuenta los siguientes pasos: . el pensamiento concreto y la administración.Se recupera desde la base de datos un conjunto de preguntas que estén relacionadas con las actividades que se encuentran planificadas. et al. . el cual busca describir el comportamiento de las personas a partir de la identificación de los hemisferios cerebrales (ver Fig. M. Fig.. si la puntuación resultante es mayor a 0. etc. Este test se origina a partir del modelo de cerebro triádico desarrollado por Waldemar de Gregori en 1999. Del análisis del RCMT se pueden crear modelos pedagógicos para el ámbito educativo con el fin de ajustar el trabajo en grupo según el cerebro triádico de los integrantes.Se revisa si las respuestas dadas por el estudiante concuerdan con la respuestas correctas de la pregunta. las relaciones con los demás. se realiza una petición. define jerarquías y crea visiones para sacar el mejor provecho de las debilidades y las oportunidades [17]. solicitando la calificación de la evaluación e inmediatamente se llevan a cabo las siguientes acciones: .Jiménez.Se presenta la evaluación y se recuperan las respuestas del estudiante. en el caso de que concuerden. los criterios para evaluar el arte y en general. .php) El RCMT es un modelo cuantitativo que de manera proporcional (no puntual) determina las inclinaciones del cerebro triádico de acuerdo con: las posiciones frente al mundo. la emotividad. se almacenan las respuestas como correctas. Abril de 2008 Memorización de detalles Resolver problemas Ejercicios prácticos Sonidos o audio Relaciones entre conceptos Originar ideas a partir de conceptos Realizar mapas conceptuales Resaltar las ideas más importantes Redactar síntesis o resumen Comprensión de ecuaciones o símbolos Seguir secuencias de pasos para llegar a la solución de un problema Profundizar en las particularidades del tema Conceptos básicos X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X X 6 para sacar el mejor provecho. Del análisis del cerebro triádico pueden surgir estrategias para la administración y la pedagogía. 7. en caso contrario se almacenan como incorrectas. ya sea: SMMR.Se remiten los resultados de evaluación al estudiante.Del conjunto restante de preguntas. el arte y la religión. los temores. III Congreso Colombiano de Computación.Cerebro derecho o inteligencia emocional: Se asocia a la intuición. la matemática y el saber. motores y lúdicos. .Se realiza la calificación total por cada tipo de pregunta.Se realiza una calificación total por OI. la fe.Cerebro central o inteligencia operativa: Se asocia con la acción. los cuales incluyen las respuestas incorrectas y los conceptos básicos asociados a estas preguntas para que el estudiante pueda reforzar el concepto. Para la Otro instrumento que también permite obtener información para la construcción del modelo del estudiante es el RCMT (Revelador del Cociente Mental Triádico) [16]. Es importante mencionar que las evaluaciones son efectuadas a través de pruebas que son generadas. su actuar en los contextos lógicos. 6. Cerebro Triádico (Tomado de: http://www. 6): .org/Il_Cervello. . se realiza una solicitud de replanificación de actividades para el/los OIs que no se aprobaron. FV.En caso de que un OI no sea aprobado. también reconoce la influencia de las realizaciones en la lúdica y el arte o en la motricidad y la administración. Descripción del proceso de evaluación Se propone un proceso de evaluación en el cual. verificando cuales de estas no se le han formulado al estudiante.

EVALUACIÓN DEL PROTOTIPO CIA El prototipo CIA se encuentra en su etapa de diseño y construcción en el proyecto de investigación “Modelo de Sistema Multi-Agente de Cursos Adaptativos integrados con Ambientes Colaborativos de Aprendizaje” [18]. Fig 11. Interfaz de Registro del usuario nuevo 2. Proceso de calificación de las evaluaciones VI. III Congreso Colombiano de Computación. Fig. inicialmente debe diligenciar una serie de formularios que tienen como propósito la adquisición de información requerida para la construcción del modelo del estudiante. 10. Como ya se dijo. 7. este curso pertenece al área de Inteligencia Artificial y tiene las capacidades de adaptar las evaluaciones y replanificar dinámicamente las actividades según los logros alcanzados por el estudiante. 10). Interfaz del RCMT Los agentes de CIA involucrados en los procesos de planificación de los contenidos y evaluación del nivel de conocimientos son: el agente interfaz. Medellín. el test de Felder que sirve para conocer el estilo de aprendizaje (Fig. Fig. 8). Diagrama de Secuencia Planificador. pues de allí se formulan las preguntas. 8. et al.. es necesario que todo el contenido del curso esté completamente estructurado y definido. Este prototipo planifica inicialmente la secuencia de los temas que aprenderá un estudiante inscrito en un curso de CLIPS (C Language Inference Production System). 9. Por medio de esta información de registro. Evaluador El protocolo de comunicación entre agentes para el proceso de evaluación se describe a continuación: 1. Abril de 2008 construcción del banco de preguntas que conforman dichas pruebas de evaluación. el estudiante que se inscribe en un curso de CIA. Su protocolo de comunicación se describe en la Fig 11. Fig.Jiménez. Interfaz del test Felder Fig. el sistema ya El agente planificador recibe la petición enviada por el agente interfaz e inmediatamente solicita al agente . por lo tanto cada estudiante debe responder: el formulario de registro con el cual se captura los datos personales (Fig. 9) y el RCMT para identificar información relevante para la planificación del contenido del curso y para el trabajo grupal (Fig. El estudiante selecciona un tema del curso por medio del agente interfaz y este a su vez envía una petición de planificación del respectivo tema al agente planificador (REQUEST 63). el agente planificador y el agente evaluador [19]. M. 7 estará en capacidad de construir un modelo inicial del modelo del estudiante que se irá actualizando con la información recogida durante la interacción del estudiante con el sistema tutorial y con los resultados de las evaluaciones presentadas.

”. La arquitectura de SMA ha dotado al sistema de flexibilidad para que puedan agregarse nuevas funcionalidades como es el módulo de aprendizaje colaborativo. Si bien esta propuesta se enfoca en un dominio específico del conocimiento como lo es CLIPS. el estudiante por medio del agente interfaz envía al agente evaluador una solicitud de calificación (REQUEST 65).. J. 2004. Propuesta de tesis doctoral. J. Evaluación generada por el agente evaluador Cuando el agente evaluador califica la prueba verifica si existen OI no aprobados. este agente envía al agente planificador una petición (REQUEST 66) para que replanifique nuevas actividades y por medio del agente interfaz envía el resultado de la evaluación (CONFIRM 37). F. 4. M. N. Resultados de evaluación generados por el agente evaluador [3] [4] . En la Fig. Borges. AGRADECIMIENTOS El trabajo de investigación presentado en este artículo fue financiado por el proyecto de investigación de la Vicerrectoría de Investigación y DIME titulado: “Modelo de Sistema MultiAgente de Cursos Adaptativos Integrados con Ambientes Colaborativos de Aprendizaje. 3-22. También se propone la aplicación de métodos y técnicas propias de la Inteligencia Artificial tales como: Teoría de Respuesta al Ítem. Fig. [2] Fig. 12. de ser así. 13 se presenta un ejemplo de los resultados de evaluación que son presentados al estudiante. “Sistemas Inteligentes en la Educación: una revisión de las líneas de investigación y aplicaciones actuales”. queda abierta la posibilidad de ser aplicado a otras áreas que sean afines en la metodología de evaluación. S. 13. Tesis Doctoral. 12). Medellín. 8 Finalmente el agente planificador le solicita al agente evaluador que replanifique la evaluación para las nuevas actividades asociadas al objetivo que fue reprobado. Lordelo. González. “Un Modelo de Planificación Instruccional usando Razonamiento Basado en Casos en Sistemas Multi-Agente para entornos integrados de Sistemas Tutoriales Inteligentes y Ambientes Colaborativos de Aprendizaje”. M. La validación del modelo propuesto se realiza a través de la aplicación del prototipo computacional. Monguet. et al. llamado CIA. Alpiste. Redes Bayesianas. se le presenta la evaluación que fue elaborada por el agente evaluador para que la resuelva (ver Fig. etc. Cuando el estudiante termina de estudiar todas las actividades que se le planificaron.Jiménez. VII. Abril de 2008 evaluador la planificación de la evaluación (REQUEST 64) y envía una respuesta al agente interfaz acerca de su solicitud de planificación (CONFIRM 3). “Evaluación del alumno en el entorno virtual: Identificación de indicadores inherentes y adyacentes”. n.. “Modelo de Sistema Multi-Agente de Cursos Adaptativos en Ambientes Colaborativos”. se busca dar respuesta a algunas de las necesidades que no son cubiertas por el sistema de evaluación tradicional. por ejemplo la presentación y realimentación de los resultados de evaluación. es decir. Tests Adaptativos Informatizado. Universitat Politecnica de Catalunya. donde también pueden llevarse a cabo procesos de evaluación grupales. con el fin de fortalecer el carácter adaptativo de la evaluación. laboratori d’aplicacions multimedia. 2004. El reto para esta aplicación al ser probado en un grupo de estudiantes del curso. 1. pp. RELIEVE: v. CONCLUSIONES Y TRABAJO FUTURO A partir de la propuesta de evaluación adaptativa aplicada a STI que se ha presentado. Una vez termina de responder la totalidad de las preguntas. H. REFERENCIAS [1] D. 2006. III Congreso Colombiano de Computación. Jiménez. Duque. Universidad Nacional de Colombia. 3. 10. Aunque no esté dentro del alcance de esta investigación. aquellos que no tienen capacidades de adaptación. se investigan una serie de aspectos que podrían mejorar la estructura del modelo del estudiante y hacerlo más dinámico. 2007. de la Universidad Nacional de Colombia – Sede Medellín. es mostrar buenos resultados al comparar su desempeño con los sistemas tradicionales de enseñanza asistida por computador. Universidad Nacional de Colombia-Sede Medellín.

TISE. Universidad de Medellín – Colombia. III Congreso Colombiano de Computación. [13] P. 2004. “Construcción del poder de tus cerebros”. Jiménez. Sistemas Tutoriales Inteligentes. Jovani Alberto Jiménez Builes. Licenciado en Docencia de Computadores. CIIE 2008 – Congreso Iberoamericano de Informática Educativa. Eng. P. Ingeniera de Control (2006) egresada de la Facultad de Minas (UnalMed). Marcela Jiménez Sánchez. El área de énfasis de su investigación es Inteligencia Artificial. 103-112. pp.”. Director del GIDIA: Grupo de Investigación y Desarrollo en Inteligencia Artificial. Coordinador de Servicios Académicos Virtuales de la UNAL Sede Medellín. E. Francia (1991). G. Semillero de Investigación. Conejo. Kelsy. 2007. Toscano. J. Profesor Asociado. Engng Ed. M. R. Viccari. pp. Lacasa. Sistemas Tutoriales Inteligentes y Evaluación Adaptativa de Conocimientos para Cursos Virtuales. 1999. “Los Test Adaptativos Informatizados: Investigación Actual”. J.: Informe de Avance: Etapa de Implementación. Coordinador de la Comisión Pedagógica de la Facultad de Minas. D. R. “Tecnología de Sistemas Expertos para el análisis del Comportamiento Humano de acuerdo con el Modelo del Cerebro Triádico”. Brasil. Categoría A de Colciencias. Abril de 2008 [5] P. Modelo de Sistema Multi-Agente de cursos Adaptativos Integrados con Ambientes Colaborativos de Aprendizaje. Spurlin. Available: http://dx. Universidad Nacional de Colombia Sede Medellín. Demetrio Arturo Ovalle Carranza. ICEIS. Olea. 2001. Duque. Colombia (1984). trabaja sobre un proyecto de Robótica Colaborativa utilizando Técnicas de Inteligencia Artificial Distribuida. Ha trabajado. Universidad Nacional de Colombia sede Medellín. Sánchez.Jiménez. El área de énfasis de su investigación es Inteligencia Artificial. Vol. 2008. Sistemas basados en CBR (Case.1007/s11257-006-9018-1. Ovalle.L. Gatica. 2005.” Revista Ingeniería Informática. Chile. El área de énfasis de su investigación es Inteligencia Artificial. A finales del 2007 obtuvo beca en la convocatoria “Jóvenes Innovadores” de Colciencias para desarrollar un proyecto de investigación relacionado con su tesis de maestría. [14] R. Jennings. Rojas. [12] N. Arias. Universidad de Málaga. 2 No. Taller Internacional de Software Educativo. “Diseño e Implementación de Cursos Virtuales de Aprendizaje Basados en Estándares Educativos”. Categoría A de Colciencias. N. 2. “Intelligent agents: Theory and practice”. Editorial Pancast.Sede Manizales. De Gregori.Based Reasoning) y Técnicas de Planificación Inteligente aplicadas a la Construcción de Sistemas de Composición de Servicios Web. “Modelo Multi-Agente basado en la Web para Planificación Instruccional y Evaluación Adaptativa en Cursos Virtuales”. [11] H. Parra. J. Manríquez. 2005. Guzmán. 10. J. 115–152. Vol. 2005. 2004. Rev. [16] W. Avances en Sistemas e Informática. Edición Número 10. “Applications. Bogotá. “I Simposio Pluridisciplinar sobre Diseño. [17] E. Reliability and Validity of the Index of Learning Styles”. Medellín. Doctor en Informática de la Université Joseph Fourier. “Designing Intelligent Tutoring Systems: a Bayesian Approach”.org/10. Sistemas Tutoriales Inteligentes. 21. Estudiante de tercer semestre y candidata a la Maestría en Ingeniería de Sistemas de la Universidad Nacional de Colombia – Sede Medellín. Int. 2003. Agudelo.. Pasantía Doctoral Grupo de Inteligência Artificial Universidade Federal do Rio Grande do Sul – Brasil. Metodología de las Ciencias del Comportamiento. Jiménez. Felder. Vélez. 2006. M. Universidad de Alcalá.doi. Y. No. “Sistema de Enseñanza/Aprendizaje basados en Agentes Inteligentes Pedagógicos”. 9 específicamente Inteligencia Artificial en Educación. Magíster en Ingeniería de Sistemas de la Universidad Nacional de Colombia – Sede Medellín. D. Knowl. Fred. Pérez-de-la-Cruz. User Modeling and User-Adapted Interaction”. Millán. Revista Virtual Universidad Católica del Norte. de la Universidad Nacional de Colombia – Sede Medellín. Sistemas de Lógica Difusa y Sistemas Multi-Agente aplicados a la Simulación de los Mercados de Energía y a la Detección de Fallas en Líneas de Transmisión. Magíster en Informática del Institut National Polytechnique de Grenoble. Tesis Doctoral. 2 pp. durante el último año como monitora académica de investigación del proyecto de investigación titulado: "Modelo de Sistema Multi-Agente de Cursos Adaptativos Integrados con Ambientes Colaborativos de Aprendizaje”. et al. Wooldridge. [18] Ovalle et al. D. más específicamente Inteligencia Artificial en Educación. más específicamente Sistemas Híbridos Inteligentes integrando Redes Neuronales. 1995. Profesor Asistente. 2000. [19] F.. Francia (1987). S. Gamboa. “Adaptive testing for hierarchical student models. Ovalle. Universidad de los Andes. Sistemas basados en CBR (CaseBased Reasoning) y Técnicas de Planificación Instruccional. Integrante del GIDIA: Grupo de Investigación y Desarrollo en Inteligencia Artificial. Proyecto de investigación de la Vicerrectoría de Investigación y DIME titulado: “Modelo de Sistema Multi-Agente de Cursos Adaptativos Integrados con Ambientes Colaborativos de Aprendizaje. 17–26. J.. 3rd International Conference on Enterprise Information Systems. Ponsoda. Evaluación y Descripción de Contenidos Educativos Reutilizables”. 505-510. Director de la Escuela de Ingeniería de Sistemas de la Universidad Nacional de Colombia – Sede Medellín. España. M. Adicionalmente. J. A. “Curso de UML Multiplataforma Adaptativo Basado en la Teoría de Respuesta al Ítem. R. Salcedo. Otros tópicos de investigación que trabaja actualmente son: Inteligencia Artificial en Educación. Universidad Nacional de Colombia. 2008. J. M. “Sistema Bayesiano para Modelado del Alumno”. V. A. Universidad Nacional de Colombia . “Sistema Multiagente para la Evaluación Personalizada en Cursos Virtuales”. España. Hontangas. [15] D. 1. Agosto 2004. más . A. R. [6] [7] [8] [9] [10] E. Doctor en Ingeniería Sistemas e Informática. Salas. Ingeniero de Sistemas y Computación.