1

Universidad de Puerto Rico Recinto de Ro Piedras Facultad de Estudios Generales

Descripcin de las Actividades del Comit de Evaluacin del Aprendizaje Estudiantil de la Facultad de Estudios Generales 2009 *Informe preparado por: Lizzette A. Crdova M.S., Ed.D. Coordinadora de CEAE de la FEG febrero de 2010
Miembros del Comit para la Evaluacin del Aprendizaje Estudiantil de la Facultad de Estudios Generales. Departamento de Ciencias Biolgicas - Profesora Aurora Llopart Departamento de Ciencias Fsicas - Profesora Clarisa Cruz Departamento de Ciencias Sociales-Profesor Carlos Snchez Departamento de Espaol Profesora Nannette Rodrguez Departamento de Humanidades-Profesora Ramonita Vega Departamento de Ingls - Profesora Janine Santiago Programa de Bachillerato Profesor Jorge Rodrguez Lara

Actividades y reuniones del Comit de Evaluacin del Aprendizaje Estudiantil de la Facultad de Estudios Generales El martes 11 de agosto de 2009 se llev a cabo una reunin convocada por la Decana Asociada de la FEG, Profesora Evelyn Rodrguez, junto con el Profesor Julio Rodrguez, Coordinador de la OEAE. Asunto: Dar seguimiento a la evaluacin de las competencias de Investigacin Cientfica por parte de los Departamentos de Ciencias Biolgicas y Ciencias Fsicas. En esta reunin estuvieron presentes los profesores Luis Quiones La Fuente, director del Departamento de Ciencias Biolgicas, Fernando Noriega, director del Departamento de Ciencias Fsicas, Aurora Llopart, Eileen Cruz, Clarisa Cruz y Lizzette A. Crdova.

*Contribucin de la estudiante graduada Mitchlery Cardona en la tabulacin de los resultados, y la representacin en tablas y grficas.

El mircoles 12 de agosto de 2009 se llev a cabo una reunin convocada por la Decana Asociada Evelyn Rodrguez. Asunto: Planificar la participacin de la actividad de un panel para orientar a los coordinadores de evaluacin del aprendizaje estudiantil sobre los procesos de implantacin del plan de assessment de la Facultad. En esta reunin estuvieron presentes los profesores Ivonne Sanaviti, Nadjah Ros y Lizzette Crdova. El viernes 14 de agosto de 2009 se present el taller: Cmo utilizar la rbrica para evaluar destrezas de investigacin. Dicho taller consisti de la orientacin a profesores para la participacin del proceso de evaluacin de las destrezas de investigacin de una muestra de los estudiantes de nuevo ingreso que toman cursos en diversos departamentos. El profesor Julio Rodrguez y la profesora Lizzette A. Crdova, fueron facilitadores al grupo de profesores en los Departamentos de Ciencias Fsicas y Ciencias Biolgicas. La profesora Aurora Llopart orient al grupo de profesores de Ciencias Biolgicas. Mientras, la orientacin a los profesores de Ciencias Fsicas estuvo a cargo del profesor Fernando Noriega.

A continuacin el listado de profesores que forman parte de las secciones que participarn de la evaluacin del aprendizaje estudiantil de las competencias de investigacin. Departamento de Ciencias Biolgicas Prof. Luis Rivera Prof. Jaime Otero Prof. Jos Vzquez Prof. Nilsa Ramos Prof. Jos Maldonado Prof. Norma Cruz Prof. Nayda Ortiz Departamento de Ciencias Fsicas Prof. Esteban Fachini Prof. Alexis Savvinov Prof. Manuel Vega Prof. Carlo Vicente Prof. Mayra Negrn Prof. Yuri Posada Prof. Eileen Cruz Prof. Edgard Resto Prof. Olga lvarez

El viernes 21 de agosto de 2009 se llev a cabo una reunin con el doctor Luis Quiones, director del Departamento de Ciencias Biolgicas. Asunto: Discutir el estudio transversal sobre las destrezas de investigacin: Observacin, Hiptesis y Recopilacin de Datos. Se acord que la experiencia de laboratorio a usarse sera, Cmo explicar el proceso de seleccin natural? El viernes 21 de agosto de 2009 se realiz una reunin con la doctora Aurora Llopart. Asunto: Revisin de la rbrica sometida por la profesora Aurora Llopart y elaboracin de una rbrica ms especfica para los profesores que fueron seleccionados en la muestra del Departamento de Ciencias Biolgicas. El mircoles 26 de agosto de 2009 se ofreci un taller del ejercicio de laboratorio: Cmo explicar el proceso de seleccin natural? Asunto: Los profesores del Departamento de Ciencias Biolgicas tuviesen la oportunidad de practicar la experiencia de laboratorio y la administracin de la rbrica.

A continuacin el listado de profesores presentes en dicho taller. Profesora Patricia Marcos Profesor Luis Rivera Profesor Jaime Otero Profesor Jos Vzquez Profesora Nilsa Ramos Profesor Jos Maldonado Profesora Norma Cruz Profesora Nayda Ortiz Profesor Luis Quiones Profesora Aurora Llopart Profesora Lizzette A. Crdova El martes 1 de septiembre de 2009 se realiz una reunin con la doctora Clarisa Cruz. Asunto: Dar seguimiento al proceso de evaluacin de las destrezas de investigacin de una muestra de estudiantes del Departamento de Ciencias Fsicas. El martes 1 de septiembre de 2009 se llev a cabo una reunin con el doctor Jos R. Corrales, director del Departamento de Humanidades. Asunto: Seleccin del representante departamental al Comit para la Evaluacin del Aprendizaje Estudiantil para el ao acadmico 2009-10. La profesora Ramonita Vega fue la representante seleccionada. El mircoles 9 de septiembre de 2009 se ofreci una reunin con el Comit de Asuntos Acadmicos. Asunto: Discusin y aprobacin del Plan de Evaluacin del Aprendizaje Estudiantil para el componente de Educacin General. El viernes 11 de septiembre de 2009 se realiz una reunin con la profesora Janine Santiago, representante del Departamento de Ingls. Asunto: Orientacin y discusin sobre el plan de trabajo del Comit de Evaluacin del Aprendizaje Estudiantil y de los trabajos del Departamento de Ingls. El viernes 18 de septiembre de 2009 se ofreci una reunin con la doctora Aurora Llopart, representante del Departamento de Ciencias Biolgicas. Asunto: Instrucciones a considerar para la actividad del uso de una rbrica para evaluar las destrezas de investigacin. El lunes 21 de septiembre de 2009, se gener una reunin con la doctora Ivonne Sanavitis, directora del Departamento de Espaol. Asunto: Seleccin del representante al Comit para la Evaluacin del Aprendizaje Estudiantil para el ao acadmico 2009-10. La profesora Nannette Rodrguez fue seleccionada como la representante al Comit El lunes 21 de septiembre de 2009, se llev a cabo una reunin con la doctora Aurora Llopart. Asunto: Coordinar el aspecto administrativo de la implantacin de la experiencia de laboratorio. Se administraron materiales y copias del ejercicio a realizar.

El lunes 28 de septiembre de 2009 se realiz una reunin con la profesora Ramonita Vega. Asunto: Discusin del plan de evaluacin de la Facultad, y, del plan de evaluacin del Departamento de Humanidades.

El viernes 2 de octubre de 2009 se ofreci una reunin con el profesor Julio Rodrguez. Asunto: Discusin de la rbrica a utilizar en la evaluacin de las destrezas de investigacin por parte de los Departamentos de Ciencias Naturales, del componente de Educacin General. Adems, se discuti el cuestionario de los retablos; instrumento diseado por el profesor Carlos Snchez para explorar la dimensin de responsabilidad social. El viernes 2 de octubre de 2009 se realiz la primera reunin del Comit de Evaluacin del Aprendizaje Estudiantil de la Facultad de Estudios Generales. Asuntos:1) Informe de la coordinadora, 2) Seguimiento a los procesos de assessment en progreso en los departamentos de la facultad, 3) Plan de trabajo del Comit de Evaluacin del Aprendizaje Estudiantil (FEG). El lunes 19 de octubre de 2009 se gener una reunin con el doctor Carlos Snchez. Asunto: Presentar una versin diferente del cuestionario de los Retablos de Responsabilidad Social como parte de la evaluacin de ese dominio por parte del Departamento de Ciencias Sociales. El lunes 26 de octubre de 2009 se realiz una reunin con la profesora Marta Medina. Asunto: Revisin del Cuestionario para el Estudio de Egresados del Programa de Bachillerato de la Facultad de Estudios Generales. El jueves 29 de octubre de 2009 se concret una reunin con los profesores Julio Rodrguez y Nadia Cordero. Asunto: Seguimiento a los procesos de assessment de la Facultad de Estudios Generales. El viernes 30 de octubre de 2009 se llev a cabo una reunin con el doctor Carlos Snchez. Asunto: Revisar el cuestionario de los retablos sobre la responsabilidad social para administrarse a una muestra de estudiantes del Departamento de Ciencias Sociales. El lunes 2 de noviembre de 2009 se realiz una reunin con el doctor Carlos Snchez. Asunto: Revisar y coordinar la administracin del cuestionario del dominio de Responsabilidad Social a una muestra de 10 secciones del Departamento de Ciencias Sociales. El mircoles 4 de noviembre de 2009 se llev a cabo la presentacin del Plan de Evaluacin Estudiantil de la Facultad de Estudios Generales durante el taller: Assessment del Aprendizaje Estudiantil en el componente de Educacin General. El viernes 13 de noviembre de 2009 se concret una segunda reunin del Comit de Evaluacin del Aprendizaje Estudiantil de la Facultad de Estudios Generales. Asuntos:

1) Informe de progreso del assessment de los distintos departamentos, 2) Discusin y revisin del cuestionario de los Retablos de Responsabilidad Social para evaluar ese dominio en el Departamento de Ciencias Sociales. El viernes 13 de noviembre de 2009 se realiz una reunin con la seora Lillian Cordero, Ayudante del Decano de la Facultad de Ciencias Naturales. Asunto: Peticin de uso del instrumento: Retablos sobre Responsabilidad Social, para su administracin a un grupo de estudiantes admitidos en agosto 2009 al Programa de Ciencias Ambientales. El lunes 16 de noviembre de 2009 se particip de una reunin con la Decana Sonia Balet Decanato de Asuntos Acadmicos Asunto: Seguimiento al proceso de assessment por los Departamentos de Ciencias Biolgicas y Ciencias Fsicas, del Componente de Educacin General. El lunes 23 de noviembre de 2009 se gener una reunin con el doctor Marc Passerieu Dit Jean- Bernard. Asunto: Revisin para incorporar las recomendaciones hechas por el Comit de Asuntos Acadmicos a dos prontuarios de cursos propuestos por el Departamento de Humanidades. El martes 24 de noviembre de 2009 se realiz una reunin con el profesor Carlos Snchez Asunto: Entrega de los cuestionarios del Departamento de Ciencias Sociales para su anlisis. El lunes 30 de noviembre de 2009 se llev a cabo una reunin con la profesora Clarisa Cruz. Asunto: Entrega de las rbricas del Departamento de Ciencias Fsicas para su anlisis. El martes 2 de diciembre de 2009 se ofreci una reunin con la Decana Asociada de la Facultad de Estudios Generales, Evelyn Rodrguez e Ivonne Sanavitis. Asunto: Discusin de las estrategias de assessment del Departamento de Espaol a corto, mediano y largo plazo. El martes 22 de diciembre de 2009 se llev a cabo una reunin con la Prof. Janine Santiago para orientacin de la categorizacin resultados del cuestionario administrado a una muestra de profesores del Departamento de Ingls.

*Informe de avalo de destrezas de investigacin. Departamento de Ciencias Fsicas

Proyecto piloto del uso de la rbrica como instrumento para evaluar las destrezas de investigacin en una muestra de estudiantes del primer ao que toman cursos en el Departamento de Ciencias Fsicas: Primer semestre agosto diciembre de 2009
El martes, 11 de agosto de 2009 se llev a cabo una reunin convocada por la Decana Asociada de la Facultad de Estudios Generales (FEG), profesora Evelyn Rodrguez junto al Profesor Julio Rodrguez, Coordinador de la Oficina de Evaluacin del Aprendizaje Estudiantil (OEAE), con los directores de los departamentos de ciencias de la FEG, la coordinadora de la evaluacin de esa facultad y algunos profesores, para dar seguimiento a la evaluacin de las competencias de investigacin cientfica en los Departamentos de Ciencias Fsicas y Ciencias Biolgicas. Los acuerdos consistieron en coordinar con ambos departamentos un procedimiento para usar una rbrica que permitiera evaluar destrezas de investigacin, a partir de experiencias de laboratorio. El viernes, 14 de agosto de 2009, profesores y profesoras del Departamento de Ciencias Fsicas participaron en un taller de avalo (assessment), llamado: Como utilizar la rbrica para evaluar las destrezas de investigacin. El mismo fue auspiciado por el Centro de Excelencia Acadmica (CEA).

*Objetivos del proyecto de assessment

Los estudiantes dominarn: destrezas, conceptos, y procesos de investigacin Los estudiantes dominarn: destrezas, conceptos, y procesos de laboratorio de Ciencias Fsicas

Objetivos del proyecto piloto

Validar una rbrica que permita examinar si los estudiantes dominan destrezas, conceptos y procesos de investigacin cientfica Administrar la rbrica validada en ocho secciones de laboratorio de CIFI escogidas al azar Tabular los resultados obtenidos luego de administrar la rbrica a los estudiantes participantes.

*Ver plan de evaluacin de la facultad, Anejo #1 p.9

Metodologa
El doctor Julio Rodrguez del CEAE propuso ocho secciones de Ciencias Fsicas mediante un muestreo aleatorio. Los profesores de las secciones fueron: Esteban Fachini, Alexis Savvinov, Manuel Vega, Carlos Vicente, Yuri Posada, Eileen Cruz, Edgar Resto y Olga Alvarez. Luego de participar en el taller convocado por el CEA los profesores que formaron parte del grupo de avalo, el profesor Fernando Noriega, Director del Departamento de Ciencias Fsicas y la profesora Clarisa Cruz, Coordinadora del proyecto, se reunieron para discutir y aprobar la rbrica previamente elaborada por los profesores Fernando Noriega, Clarisa Cruz y Eileen Cruz. La profesora Cruz hizo un calendario tentativo para los trabajos del avalo.

Validacin de la rbrica y uso de la misma (ver Anejo #2)

Entre el 11 y el 16 de septiembre de 2009 se llev a cabo la validacin de la rbrica aplicndola a cinco informes de experimentos de laboratorio realizados anteriormente. Luego se asign una clave a los profesores participantes y posteriormente a los estudiantes participantes. Para la tabulacin individual de los resultados se dise y se utiliz una hoja donde el profesor pona su clave y la del estudiante. El 18 de septiembre de 2009 se celebr una nueva reunin con los participantes, el director y la coordinadora, para clarificar dudas sobre el uso de la rbrica en trminos de su interpretacin al momento de corregirla. Adems, se comunic a los profesores los laboratorios que haban sido escogidos para administrar la prueba as como se aclararon dudas sobre los experimentos y las guas existentes. Aunque se examinaron otros aspectos, los criterios a examinar (para estar de acuerdo lo ms posible con el avalo en el Departamento de Ciencias Biolgicas), fueron: Problema principal del experimento, hiptesis del experimento y recopilacin y organizacin de datos, con niveles de ejecucin como excelente, bueno, satisfactorio y deficiente, en la escala numrica de 4, 3, 2 y 1, respectivamente. La rbrica examin el grado en que los estudiantes eran capaces de: Identificar claramente el problema principal a resolver en el experimento. Identificar claramente la(s) hiptesis que se propone(n) en el experimento o la que l propone para resolver el problema. Recopilar y organizar los datos que son pertinentes en el experimento en tablas apropiadas

Administracin de la rbrica
Como se indic anteriormente, la muestra consisti de ocho secciones del cohorte de estudiantes de primer ao que tomaron el curso de Ciencias Fsicas. Se planific administrar la prueba en semanas especficas del mes de octubre y se establecieron originalmente las fechas para la entrega de los resultados a la coordinadora del proyecto. Sin embargo, debido a los paros de labores del semestre, hubo cambios en la planificacin original tanto en las fechas establecidas, que tuvieron que moverse a lo largo del semestre, como en los experimentos originalmente propuestos. Se clarificaron dudas sobre el uso de la rbrica en trminos de su interpretacin al momento de corregir los elementos a considerar. Adems, se aclararon dudas sobre el experimento a realizar. Los elementos a evaluar en la rbrica que se utiliz fueron: Problema principal del experimento, Hiptesis del experimento, y, Recopilacin y organizacin de datos. Los niveles de ejecucin fueron: excelente, bueno, satisfactorio y deficiente, en una escala de 4 a 1, respectivamente.

Tabulacin y anlisis de los resultados

Tabla-1 Frecuencia y porcentaje de los estudiantes de la muestra por curso

Curso CIFI 3055 CIFI 3005 CIFI 3003 CIFI 3065 CIFI 3013 Total

Frecuencia 85 18 13 15 23 154

% 55.2 11.7 8.4 9.7 14.9 100.0

10

Tabla-2 Frecuencia y porcentaje de los estudiantes de la muestra por experiencia de laboratorio Laboratorio Movimiento Uniforme Movimiento Acelerado Ley de Boyle Cero Absoluto Total Frecuencia 34 82 15 23 154 % 22.1 53.2 9.7 14.9 100.0

Al llevar a cabo el proyecto piloto de evaluacin por el Departamento de Ciencias Fsicas, el receso acadmico a mitad de semestre afect el protocolo establecido (evaluar la experiencia: Movimiento Acelerado y La Ley de Boyle) por lo que hubo que aplicar la rbrica a otros ejercicios de laboratorios. Esto podra considerarse una limitacin del estudio debido a que aade la variable de las diferentes experiencias. Sin embargo, los profesores continuaron con la encomienda usando la rbrica en otros experimentos. El proceso aument el nmero de ejercicios a ser evaluados por la rbrica. Esto podra significar una ventaja al momento de querer determinar los ejercicios a emplearse como pre y post prueba en el assessment durante el prximo semestre.

11

Tabla-3 Frecuencia y porcentaje de nivel de ejecucin de la muestra de estudiantes en la identificacin del problema de investigacin (8 secciones de CIFI) Nivel de ejecucin Deficiente Satisfactorio Bueno Excelente Total Frecuencia 22 21 24 87 154 % 14.3 13.6 15.6 56.5 100.0

De los datos recopilados de 154 estudiantes, dentro de una escala con puntuacin mxima de 4 (excelente) y mnima de 1 (deficiente), un 72.1% de los estudiantes obtuvieron un nivel de ejecucin de bueno a excelente. Estos resultados reflejan un aprovechamiento de 75% o mayor en estos estudiantes, o sea, sobre el nivel de ejecucin esperado (70%). La media aritmtica global es de 3.14, y desviacin estndar de 1.1.

12

Los profesores que participaron de este proceso realizaron una serie de comentarios referente a las dificultades que los estudiantes demostraron a la hora de identificar el problema. Entre los de mayor frecuencia se encuentran: o Identificacin del problema secundario en lugar del principal o Redaccin de los objetivos de la unidad en lugar del problema principal
Tabla-4 Frecuencia y porcentaje de nivel de ejecucin de la muestra de estudiantes en la identificacin de la hiptesis (8 secciones de CIFI) Nivel de ejecucin Deficiente Satisfactorio Bueno Excelente Total Frecuenci a 40 23 32 59 154 % 26.0 14.9 20.8 38.3 100.0

De los datos recopilados de 154 estudiantes, dentro de una escala con puntuacin mxima de 4 (excelente) y mnima de 1 (deficiente), un 59.1% de los estudiantes obtuvieron un nivel de ejecucin de bueno a excelente. Estos resultados reflejan un aprovechamiento de 75% o mayor, sobre el nivel de ejecucin esperado (70%), con una media aritmtica global de 2.71,

13

y desviacin estndar de 1.2. El 40.9% obtuvieron un nivel de ejecucin de satisfactorio a deficiente, lo que refleja un aprovechamiento menor de lo esperado (70%). Los profesores que participaron de este proceso realizaron una serie de comentarios referente a las dificultades que los estudiantes demostraron a la hora de identificar la hiptesis. Entre estos los comentarios ms frecuentes fueron: o Falta de identificacin de hiptesis o Hiptesis no responda al problema planteado o Hiptesis identificada era errnea pero bien articulada por lo que podra conducir a una solucin
Tabla -5 Frecuencia y porcentaje de nivel de ejecucin de la muestra de estudiantes en la recopilacin y organizacin de datos (8 secciones de CIFI) Nivel de ejecucin Deficiente Satisfactorio Bueno Excelente Total Frecuencia 3 19 44 88 154 % 1.9 12.3 28.6 57.1 100.0

De los datos recopilados de 154 estudiantes, dentro de una escala con puntuacin mxima de 4 (excelente) y mnima de 1 (deficiente), un 85.7% de los estudiantes obtuvieron un nivel de ejecucin de bueno a excelente. Estos resultados reflejan un aprovechamiento de 75% o

14

mayor, o sea, sobre el nivel de ejecucin esperado (70%); con una media aritmtica global de 3.41, y desviacin estndar de .781. Los profesores que participaron de este proceso realizaron una serie de comentarios referente a las dificultades que los estudiantes demostraron a la hora de la recopilacin y organizacin de los datos. Entre estos los ms frecuentes fueron: o Dificultad en la elaboracin de la grfica o Falta de datos y columnas en las tablas o Falta de identificacin de unidades de las variables
Tabla -6 Frecuencia y porcentaje del total de la evaluacin de las destrezas de investigacin de la muestra de estudiantes (8 secciones de CIFI) Puntuacin (max. 12) 4 5 6 7 8 9 10 11 12 Total Frecuencia 4 7 9 16 13 23 29 26 27 154 % 2.6 4.5 5.8 10.4 8.4 14.9 18.8 16.9 17.5 100.0

15

De los datos recopilados de 154 estudiantes, un 68.1% de estos obtuvieron un nivel de ejecucin sobre los esperado (70%). La media aritmtica global es de 9.27, y la desviacin estndar de 2.19. Por otro lado, 31.9% de los estudiantes obtuvieron un nivel de ejecucin por debajo de lo esperado (70%).

Recomendaciones para el avalo del prximo semestre

Utilizar la misma rbrica introducindole las sugerencias que hayan ofrecido los profesores que participaron en el proyecto piloto. Aumentar el nmero de secciones de cursos a participar en el nuevo avalo. Evaluar los renglones de anlisis de datos y conclusiones incluyndolos en la rbrica. Ofrecer talleres de adiestramiento a los profesores en el uso de la rbrica. Escoger dos experimentos que puedan evaluarse como pre y pos prueba, ofreciendo la preprueba a inicios del semestre y la posprueba a finales del mismo.

16

Informe de avalo de destrezas de investigacin Departamento de Ciencias Biolgicas

Proyecto piloto del uso de la rbrica como instrumento para evaluar las destrezas de investigacin en una muestra de estudiantes del primer ao que toman cursos en el Departamento de Ciencias Biolgicas: Primer semestre agosto diciembre de 2009
Al igual que el Departamento de Ciencias Fsicas, el da viernes 14 de agosto de 2009 un grupo de profesores del Departamento de Ciencias Biolgicas particip del taller: Cmo utilizar la rbrica para evaluar destrezas de investigacin. Durante el mismo: El profesor Julio Rodrguez, y la coordinadora, la profesora Lizzette A. Crdova, orientaron al grupo de profesores sobre la participacin en el proceso de evaluacin de las destrezas de investigacin de una muestra de los estudiantes de nuevo ingreso que toman cursos en los Departamentos de Ciencias Fsicas y Ciencias Biolgicas. Tambin se les orient en el modo que se iba a implantar el assessment. La coordinadora pas a apoyar a la profesora Aurora Llopart que orient al grupo de profesores de Ciencias Biolgicas, quienes se dieron a la tarea de estudiar la rbrica que esta ltima haba elaborado. Durante dicha reunin se mencionaron 5 laboratorios que son adecuados para evaluar las destrezas de investigacin utilizando la rbrica propuesta.

*Objetivos del proyecto de assessment

Los estudiantes dominarn: destrezas, conceptos, y procesos de investigacin. Los estudiantes dominarn: destrezas, conceptos, y procesos de laboratorio de Ciencias Biolgicas.

Objetivos del proyecto piloto

Validar una rbrica que permita examinar si los estudiantes dominan destrezas, conceptos y procesos de investigacin cientfica Administrar la rbrica validada en ocho secciones de laboratorio de CIFI escogidas al azar Tabular los resultados obtenidos luego de administrar la rbrica a los estudiantes participantes.

*Plan de evaluacin de la Facultad FEG (ver Anejo #1)

17

Metodologa
El doctor Julio Rodrguez del CEAE propuso ocho secciones de Ciencias Biolgicas mediante un muestreo aleatorio. Los profesores de las secciones fueron Luis Rivera, Jaime Otero, Jos Vzquez, Nilsa Ramos, Jos Maldonado, Norma Cruz, Nayda Ortiz, Luis Quiones, Patricia Marcos, Aurora Llopart y Lizzette A. Crdova. Se realiz una reunin el viernes 21 de agosto de 2009 donde participaron el doctor Luis Quiones, director del Departamento de Ciencias Biolgicas, la profesora Aurora Llopart, la profesora Lizzette A.Crdova, y los profesores participantes. En dicha reunin, se discuti el procedimiento a seguir en el proyecto piloto sobre el uso de una rbrica para evaluar las destrezas de investigacin: Observacin, hiptesis, y recopilacin de datos de una muestra de ocho secciones de estudiantes de primer ao.

Evaluacin de la Experiencia de laboratorio

Se consideraron varias opciones de ejercicios de laboratorio: Tendencias evolutivas en la flor, Mtodo Cientfico, Microevolucin, Las hormigas y Cmo explicar el proceso de seleccin natural? El grupo de profesores acord evaluar dos de los cinco ejercicios propuestos: Microevolucin, y, Cmo explicar el proceso de seleccin natural? Se estableci un calendario de trabajo.

Validacin de la rbrica y uso de la misma (ver Anejo #3)

La profesora Lizzette A. Crdova junto a la profesora Aurora Llopart, representante del Departamento de Ciencias Biolgicas al Comit de Evaluacin del Aprendizaje Estudiantil, se reunieron ese el viernes 21 de agosto para revisar la rbrica a utilizarse con los estudiantes de Ciencias Biolgicas. Adems, disearon una rbrica ms especfica para los profesores participantes. Los criterios a examinar fueron: Problema principal del experimento, hiptesis del experimento y recopilacin y organizacin de datos, con niveles de ejecucin como excelente, bueno, satisfactorio y deficiente, en la escala numrica de 4, 3, 2 y 1, respectivamente. El mircoles 26 de agosto de 2009 se ensay el ejercicio: Cmo explicar el proceso de seleccin natural? Se repartieron el protocolo de la experiencia y las rbricas. Se llev a cabo la validacin de la rbrica aplicndola a ese informe de laboratorio. Para la tabulacin individual de los resultados se dise y se utiliz una hoja donde el profesor pona su nombre y el nmero de estudiante.

18

Administracin de la rbrica
Como se indic anteriormente, la muestra consisti de 8 secciones del cohorte de estudiantes de primer ao y 3 secciones de estudiantes de segundo ao en adelante que tomaron el curso de Ciencias Biolgicas. Se planific administrar la prueba en semanas especficas del mes de octubre y se establecieron originalmente las fechas para la entrega de los resultados a la coordinadora del proyecto. No hubo cambios en la planificacin original en las fechas establecidas. El viernes 18 de septiembre de 2009 se realiz una reunin con la doctora Aurora Llopart, representante del Departamento de Ciencias Biolgicas para discutir y establecer las instrucciones a considerar sobre el uso de la rbrica en trminos de su interpretacin al momento de corregir los elementos. Adems, se aclararon dudas sobre el experimento a realizar. El lunes 21 de septiembre de 2009, se llev a cabo una reunin con la doctora Aurora Llopart para coordinar el aspecto administrativo de la implantacin de la experiencia de laboratorio del rea de Ciencias Biolgicas. Adems se administraron los materiales de laboratorio y copias del ejercicio para ser distribuidos a los profesores. Los elementos a evaluar en la rbrica que se utiliz fueron: Problema principal del experimento, Hiptesis del experimento, y, Recopilacin y organizacin de datos. Los niveles de ejecucin fueron: excelente, bueno, satisfactorio y deficiente, en una escala de 4 a 1, respectivamente.

19

Tabulacin y anlisis de los resultados

Tabla-1 Frecuencia y porcentaje de los estudiantes de la muestra por curso Curso CIBI 3026 CIBI 3016 CIBI 3015 CIBI 3005 CIBI 3001 CIBI 3006 Total Frecuencia 109 27 16 25 40 48 265 % 41.1 10.2 6.0 9.4 15.1 18.1 100.0

20

Tabla-2 Frecuencia y porcentaje de nivel de ejecucin de la muestra de estudiantes en la observacin (11 secciones de CIBI) Frecuencia 1 Deficiente Satisfactorio Bueno Excelente Total 2 21 131 110 265 Por ciento % .4 .8 7.9 49.4 41.5 100.0

De los datos recopilados de 265 estudiantes, dentro de una escala con puntuacin mxima de 4 (excelente) y mnima de 1 (deficiente), un 90.9% de los estudiantes obtuvieron un nivel de ejecucin de bueno a excelente. Estos resultados reflejan un aprovechamiento de 75% o mayor, sobre el nivel de ejecucin esperado (70%), con una media aritmtica global de 3.2 (80%), y desviacin estndar de 7.1.

21

Los profesores que participaron de este proceso realizaron una serie de comentarios referente a las dificultades que los estudiantes demostraron a la hora de identificar el problema. Entre estos los ms frecuentes fueron: o Descripcin de los resultados en lugar de los elementos del ejercicio o No hubo consideracin del tiempo, hubo confusin en cuanto al trmino o Los elementos del ejercicio eran descritos de forma cualitativa y no cuantitativa o Problema en la redaccin
Tabla -3 Frecuencia y porcentaje del nivel de ejecucin de la muestra de estudiantes en la identificacin del problema y la hiptesis (CIBI 11 secciones) Niveles de ejecucin Deficiente Satisfactorio Bueno Excelente Total Frecuencia 12 82 86 85 265 % 4.5 30.9 32.5 32.1 100.0

22

De los datos recopilados de 265 estudiantes, dentro de una escala con puntuacin mxima de 4 (excelente) y mnima de 1 (deficiente), un 64.6% de los estudiantes obtuvieron un nivel de ejecucin de bueno a excelente. Estos resultados reflejan un aprovechamiento de 75% o mayor, sobre el nivel de ejecucin esperado (70%), con una media aritmtica global de 2.86, y desviacin estndar de .92. Los profesores que participaron de este proceso realizaron una serie de comentarios referente a las dificultades que los estudiantes demostraron a la hora de identificar la hiptesis. Entre estos los ms frecuentes: o Hiptesis ambigua, falta informacin o Explica y predice lo que puede ocurrir pero no formula hiptesis o No describe el problema o No indica diferencias entre presa y depredador
Tabla -4 Frecuencia y porcentaje de nivel de ejecucin de la muestra de estudiantes en la recopilacin y organizacin de datos (11 secciones de CIBI) Niveles de ejecucin Deficiente Satisfactorio Bueno Excelente Total Frecuencia 2 32 114 117 265 % .8 12.1 43.0 44.2 100.0

23

De los datos recopilados de 265 estudiantes, dentro de una escala con puntuacin mxima de 4 (excelente) y mnima de 1 (deficiente), un 87.2% de los estudiantes obtuvieron un nivel de ejecucin de bueno a excelente. Estos resultados reflejan un aprovechamiento de 75% o mayor, sobre el nivel de ejecucin esperado (70%), con una media aritmtica global de 3.29, y desviacin estndar de .708. Los profesores que participaron de este proceso realizaron una serie de comentarios referente a las dificultades que los estudiantes demostraron a la hora de recopilar datos. Entre estos los ms frecuentes: o Estudiantes de la Facultad de Arquitectura tuvieron mayor facilidad que estudiantes de otras facultades al momento de organizar los datos. o No identifican los ejes en las grficas
Tabla -5 Frecuencia y porcentaje del total de la evaluacin de las destrezas de investigacin de la muestra de estudiantes (11 secciones CIBI) Puntuacin (max. 12) 5 6 7 8 9 10 11 12 Total Frecuencia 1 9 17 56 53 38 46 45 265 % .4 3.4 6.4 21.1 20.0 14.3 17.4 17.0 100.0

24

De los datos recopilados de 265 estudiantes, dentro de una escala con puntuacin mxima de 4 (excelente) y mnima de 1 (deficiente), un 68.7% de los estudiantes obtuvieron un nivel de ejecucin de bueno a excelente. Estos resultados reflejan un aprovechamiento de 75% o mayor, o sea, sobre el nivel de ejecucin esperado (70%), con una media aritmtica global de 9.54, y desviacin estndar de 1.70.

Recomendaciones para el avalo del prximo semestre (ver Anejo #6)

Utilizar la misma rbrica introducindole las sugerencias que hayan ofrecido los profesores que participaron en el proyecto piloto (entre las sugerencias se encuentra separar la identificacin del problema y la formulacin de la hiptesis). Aumentar el nmero de secciones de cursos a participar en el nuevo avalo (alrededor de 30 secciones con todos los profesores). Hacer pre y pos prueba (fechas acordadas: 22 de febrero -5 de marzo administracin de la preprueba y 26 de abril 7 de mayo administracin de la posprueba). Incluir en la rbrica los renglones de anlisis de datos y conclusiones. Ofrecer talleres de adiestramiento a los profesores en el uso de la rbrica. Evaluar las experiencias de laboratorio: Cmo explicar el proceso de seleccin natural? y Microevolucin, como pre y pos prueba.

25

Informe de avalo de Responsabilidad Social Departamento de Ciencias Sociales

Proyecto de investigacin del uso de los retablos sobre responsabilidad social como instrumento para evaluar el dominio de responsabilidad social en una muestra de estudiantes del primer ao que toman cursos en el Departamento de Ciencias Sociales: Primer semestre agosto diciembre de 2009
El Departamento de Ciencias Sociales de la Facultad de Estudios Generales se ha dado a la tarea de evaluar la competencia de la responsabilidad social. Los cursos ofrecidos por el departamento integran el dominio de responsabilidad social a travs de contenidos curriculares y prcticas educativas desarrolladas en sus dos semestres. El doctor Carlos J. Snchez Zambrana profesor adscrito al Departamento de Ciencias Sociales trabaj durante el pasado ao acadmico 2008-2009, en el diseo de unos retablos para evaluar la competencia de responsabilidad social. En este ao acadmico 2009-10, el profesor Snchez acord con la coordinadora de la evaluacin del aprendizaje estudiantil de la Facultad de Estudios Generales, la profesora Lizzette Crdova revisar los retablos y coordinar la administracin de stos a una muestra de estudiantes que toman el curso de CISO 3121.

*Objetivos del proyecto de assessment

Los estudiantes mostrarn un aumento estadsticamente significativo en la puntuacin

obtenida en la pos medida al compararlo con aquella obtenida en la premedida de los estudios de casos sobre responsabilidad social.

Objetivos del proyecto de investigacin

Validar los retablos sobre responsabilidad social que permitan examinar cuan responsables son los estudiantes desde el paradigma de la solidaridad y el altruismo social. Administrar los retablos validados a 10 secciones de clases del curso de ciencias sociales escogidas por disponibilidad. Tabular los resultados obtenidos luego de administrar los retablos a los estudiantes participantes y analizar los resultados en vas de determinar las acciones transformadoras.

*Plan de evaluacin FEG

26

Metodologa
El doctor Snchez del Departamento de Ciencias Sociales propuso que poda conseguir una muestra por disponiblidad de 10 secciones. Los profesores de las secciones fueron: Pedro Alvarez Ramos, Elsa Planell Larrinaga, Zoraida Santiago Buitrago, Nilsa Medina Pia, Waldemiro Vlez Cardona y Carlos Snchez Zambrana

Validacin del documento de los retablos sobre responsabilidad social y uso del mismo (ver Anejo #4)
En la fechas de 10 de sept, y 7, 19 y 26 de oct. 2009 se llev a cabo la revisin de los retablos. El 29 de octubre los profesores Julio Rodrguez y Nadia Cordero tuvieron la oportunidad de examinar el cuestionario y junto con la profesora Crdova hicieron recomendaciones que fueron incorporadas. Para la tabulacin individual de los resultados se dise y se utiliz un documento que consisti de dos partes: Informacin general del estudiante y los retablos de responsabilidad social. El 6 de noviembre de 2009 se coordin el proceso de duplicacin y distribucin del material necesario para conducir la administracin de los retablos. Adems, el profesor Snchez redact una carta que se les distribuy a los profesores con las instrucciones para administrar el cuestionario. Entre las fechas de 9 al 23 de noviembre se administraron los retablos. Los criterios de responsabilidad social a examinar en esta pre-prueba fueron: lo ambiental, el gnero, el patrimonio nacional y la tica estudiantil. Se us una escala licket: totalmente de acuerdo, de acuerdo, desacuerdo y totalmente desacuerdo. El profesor Snchez prepar una clave de las respuestas para cada retablo en una escala de 4 a 1. El valor de 4 se otorgaba a la respuesta correcta segn la clave y el 3 a la respuesta ms cercana siguiendo una gradacin lgica que van desde radical revolucionario, reformista, actitud conservadora y extremo reaccionario para un total de 16 puntos por retablo.

Administracin de los retablos

Como se indic anteriormente, la muestra consisti de 10 secciones del cohorte de estudiantes de primer ao y 1 seccin de estudiantes de segundo ao en adelante que tomaron el curso de Ciencias Sociales (CISO 3121). Se planific administrar el cuestionario en semanas especficas del mes de noviembre y se estableci la fecha para la entrega de los resultados a la coordinadora del proyecto.

27

Tabulacin y anlisis de los resultados

28

De los datos recopilados, 102 de 229 estudiantes, dentro de una escala con puntuacin mxima de 4 (muy responsable) y mnima de 1 (muy irresponsable) por alternativa en el retablo, para un total de 16 puntos, un 45.1% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% del nivel de ejecucin esperado, con una media aritmtica global de 11.71, y desviacin estndar de 2.87. Con un sesgo hacia ms responsabilidad social.

29

De los datos recopilados, 102 de 229 estudiantes, dentro de una escala con puntuacin mxima de 4 (muy responsable) y mnima de 1 (muy irresponsable) por alternativa en el retablo, para un total de 16 puntos, un 84.31% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% del nivel de ejecucin esperado, con una media aritmtica global de 12.99, y desviacin estndar de 2.28.Con un sesgo hacia ms responsabilidad social.

30

De los datos recopilados, 102 de 229 estudiantes, dentro de una escala con puntuacin mxima de 4 (muy responsable) y mnima de 1 (muy irresponsable) por alternativa en el retablo, para un total de 16 puntos, un 71.57% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% del nivel de ejecucin esperado, con una media aritmtica global de 12.71, y desviacin estndar de 2.49. Con un sesgo hacia ms responsabilidad social

31

De los datos recopilados, 109 de 229 estudiantes, dentro de una escala con puntuacin mxima de 4 (muy responsable) y mnima de 1 (muy irresponsable) por alternativa en el retablo, para un total de 16 puntos, un 35.29% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% del nivel de ejecucin esperado, con una media aritmtica global de 10.33, y desviacin estndar de 3.10.Con un sesgo hacia menos responsabilidad social.

32

De los datos recopilados, 102 de 229 estudiantes, dentro de una escala con puntuacin mxima de 64 (muy responsable) y mnima de 14 (muy irresponsable) por los cuatro retablos, un 67.6% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% o ms del nivel de ejecucin esperado, con una media aritmtica global de 44.8, y desviacin estndar de 7.06. Con un sesgo hacia ms responsabilidad social.

33

De los datos recopilados, 127 de 229 estudiantes, dentro de una escala con puntuacin mxima de 4 (muy responsable) y mnima de 1 (muy irresponsable) por alternativa en el retablo, para un total de 16 puntos, un 38.58% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% o ms del nivel de ejecucin esperado, con una media aritmtica global de 11.48, y desviacin estndar de 2.9. Con un sesgo hacia menos responsabilidad social.

34

De los datos recopilados, 127 de 229 estudiantes, dentro de una escala con puntuacin mxima de 4 (muy responsable) y mnima de 1 (muy irresponsable) por alternativa en el retablo, para un total de 16 puntos, un 88.98% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% del nivel de ejecucin esperado, con una media aritmtica global de 13.35, y desviacin estndar de 2.3. Con un sesgo hacia ms responsabilidad social.

35

De los datos recopilados, 127 de 229 estudiantes, dentro de una escala con puntuacin mxima de 4 (muy responsable) y mnima de 1 (muy irresponsable) por alternativa en el retablo, para un total de 16 puntos, un 66.93% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% del nivel de ejecucin esperado, con una media aritmtica global de 13.35, y desviacin estndar de 2.3. Con un sesgo hacia ms responsabilidad social.

36

De los datos recopilados, 127 estudiantes de 229, dentro de una escala con puntuacin mxima de 4 (muy responsable) y mnima de 1 (muy irresponsable) por alternativa en el retablo, para un total de 16 puntos, un 44.09% de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% del nivel de ejecucin esperado, con una media aritmtica global de 10.96, y desviacin estndar de 3.4. Con un sesgo hacia menos responsabilidad social.

37

De los datos recopilados, 127 de 229 estudiantes, dentro de una escala con puntuacin mxima de 64 (muy responsable) y mnima de 6 (muy irresponsable) por los cuatro retablos, un 73.28 % de los estudiantes obtuvieron un nivel de ejecucin de responsable a muy responsable. Estos resultados reflejan un aprovechamiento de 70% o ms del nivel de ejecucin esperado, con una media aritmtica global de 48.10, y desviacin estndar de 7.80. Con un sesgo hacia ms responsabilidad social.

38

Al comparar las medias por gnero no hay una diferencia significativa en las respuestas por retablo.

39

Recomendaciones para el avalo del prximo semestre

Presentar los resultados obtenidos de la preprueba de los retablos sobre responsabilidad social al pleno del Departamento de Ciencias Sociales. Hacer pos prueba y validarla. Administrar la posprueba (19- 30 de abril) a las 11 secciones de CISO 3121. Disear actividades que fomenten la responsabilidad social en las dimensiones atendidas por los retablos (ambiental, patrimonio nacional, gnero y tica estudiantil). Hacer anlisis de los comentarios de los retablos para elaborar las categoras.

40

Informe de avalo de comunicacin efectiva. Departamento de Ingls

Primer semestre agosto diciembre de 2009

Proyecto de investigacin para indagar el concepto de comunicacin efectiva que tienen los/las profesores/as, las metodologas que se utilizan, y sus formas de evaluacin: Questionnaire on the Concept of Effective Communication for the Teaching of English
En el Plan de Evaluacin de la Facultad de Estudios Generales, el Departamento de Ingls est trabajando con el dominio de la comunicacin efectiva como parte del Plan de Avalo del Aprendizaje Estudiantil. Entre las actividades, el Departamento de Ingls ofreci un seminario con el Dr. ngel Villarini. De ah surge la necesidad de indagar en torno al concepto que tienen los profesores, miembros del departamento sobre el dominio de la comunicacin efectiva. La profesora Janine Santiago dise un cuestionario para indagar el concepto de comunicacin efectiva que tienen los/las profesores/as, las metodologas que se utilizan, y sus formas de evaluacin.

Objetivos de la investigacin
Validar el cuestionario que permita examinar si los estudiantes dominan destrezas, conceptos y procesos de la comunicacin efectiva. Administrar el cuestionario validado a una muestra representativa de los profesores del Departamento de Ingls. Tabular los resultados obtenidos luego de administrar el cuestionario a los profesores participantes.

Metodologa
El cuestionario de investigacin diseado contiene una hoja que identifica el perfil de los/las profesores/as del Departamento de Ingls. Adems, seis preguntas abiertas sobre la definicin y enseanza de este dominio.

Validacin del cuestionario (ver Anejo #5)

El cuestionario fue revisado por el Dr. Villarini, los miembros del comit de currculo, y profesores de mayor experiencia del departamento. Una vez se incorporaron las sugerencias de estos miembros, se distribuy el cuestionario a los/las profesores/as del departamento. Los/ profesores entregaron el mismo al Departamento de Ingls con sus respuestas. Al momento, se est revisando y analizando la data recopilada. Los resultados de esta investigacin sern presentados en un seminario que se ofrecer en el Departamento de Ingls el prximo semestre

41

acadmico 2010. Para la discusin y anlisis de los resultados contaremos con la participacin del Dr. ngel Villarini.

Tabulacin y anlisis de los resultados

Anlisis de las Preguntas Abiertas del Cuestionario Se leyeron las preguntas del cuestionario varias ocasiones para asignar categoras abiertas. Las respuestas a cada pregunta se trabajaron individualmente para identificar semejanzas y diferencias. Se organizaron las categoras en orden de frecuencia de mayor a menor. Los resultados preliminares obtenidos de este estudio fueron trabajados junto a la Dra. Lizzette Crdova, Coordinadora del Comit de Evaluacin del Aprendizaje Estudiantil de la Facultad de Estudios Generales. Al momento se presenta el anlisis preliminar de las seis preguntas del cuestionario de investigacin. La muestra const de 24 profesores que escribieron respuestas detalladas, las que abundaron con ejemplos y sugerencias. El personal docente del Departamento de Ingls consta de 38 Profesores/as. Se omiti la participacin de las doctoras Cmara, Ros y Santiago en el proceso de responder el cuestionario, ya que stas participan actualmente en las investigaciones de avalo del aprendizaje estudiantil. El anlisis de las seis preguntas se realiz durante el perodo de receso acadmico. La doctora Crdova y la doctora Santiago se reunieron varias veces durante este periodo para realizar este trabajo. Las respuestas a la pregunta 1 reflejan diversidad de definiciones del dominio de comunicacin efectiva. Se agruparon las respuestas en 24 categoras abiertas. Los resultados se presentan en frecuencia, ya que un participante puede haber contribuido a ms de un aspecto del dominio de comunicacin efectiva. Vase el desglose de las categoras por frecuencia.

Thread of answers for question 1: Define the competency of effective communication.

Ability to communicate ideas in verbal and written forms. 11 Production of speaking, writing, listening and reading comprehension. 8 Mastering grammar structures. 5 Depends on the language level of teaching. It varies for the elementary, intermediate and advanced levels. 4 Exchange of information to achieve ones goal. 4 Encompasses understanding, debate of ideas as well as analysis. 4 Language as a mean to understanding the world, learn and conduct analysis. Requires a teaching method based on language use, interaction and conversation. 3 Technical use of the English language. 3 Related to the communicative competence. 3

42

Responding precisely to analytical questions. 2 Understanding writing as a process. 2 Involves discourse competence. 2 Ability to express oneself clearly in writing and orally to another person. 2 Ability to maintain conversation and ones thoughts with an adequate delivery so that the recipient understand the point and the act of communication.2 Effective communication within the context of general education requires reading, writing, research and reasoning mostly in written form. 1 Academic Literary including reading and writing across the disciplines.1 Understanding of Basic Standard English. 1 Knowledge of grammar, culture and idioms. 1 Spoken communication and written communication within the Foreign Language environment.1 The students ability to express oneself to a native speaker of English. 1 Ability to understand ones audience. 1 Ability or skill to make oneself understood and understand others. 1 Ability to express complex ideas, arguments, explanations and narratives in written and verbal arguments. 1 Abstract concept. 1

Comentarios El anlisis preliminar muestra que hay dos categoras generales principales, stas son: Ability to communicate ideas in verbal and written forms, y, Production of speaking, writing, listening and reading comprehension. Sin embargo, cuando los profesores abundaron en la explicacin surgieron las categoras de menos frecuencia. En la segunda pregunta vemos que hay diversidad de actividades para la enseanza de la competencia de comunicacin efectiva. Las respuestas se agruparon en 32 categoras abiertas.

Thread of answers for question 2: Describe the activities that you use in your course for the teaching of this competency.
Responding to readings orally and in writing. 6 Demonstration of effective communication through diverse writing exercises. 6 Discussion of essays orally within contextualization, relevance and analysis. 5 Writing critical essays.5 Discussion of essay organization and arguments. 4 Responding to questions based on content and analysis. 4 Informal class writing. 3

43

Mandatory oral class participation. 3 Small group work where students discuss their own writing and readings. 3 Oral presentations to the class. 2 Essay writing in the form of process and stages. 2 Establishing difference between oral and written language. 2 Journal writing with critical reactions. 3 Usage of films, documentaries and materials relevant to Puerto Rico and other parts of the world. 2 Reaction of students essays by their class peers orally or in writing. 2 Reading and analysis of the linguistic aspects of texts. 2 Writing assignments emulating the writing process. 2 Differences between oral and written discourse. 2 Relate essays to the student life history and experiences. 2 Oral production via collaborative exercises. 1 Fostering the development of questions by students. 1 Active listening according to the level. 1 Dictation; reading out loud; summaries of reading in paragraphs.1 We should develop a system with instructional strategies to students at the basic level with structural, grammatical and discourse competencies. The creation of guidelines for class activities, procedures and approaches for the Basic English level. 1 Listening to a variety of music and the study of their lyrics. 1 Writing of dialogues related to readings and performance of role plays. 1 Students must demonstrate listening skills by responding orally or in writing. 1 Fostering oral communication behavior conducive to a more formal setting and to the work environment. 1 Reading of fiction and nonfiction. 1 Writing of a research paper.1 Identify first impressions.1 Discussion of writing strategies.1

Comentarios El desglose de las categoras indica que las actividades que los Profesores llevan a cabo en la sala de clase corresponden en la mayor parte de los casos a las requeridas y descritas en los prontuarios de la oferta acadmica del Departamento de Ingls. Las categoras abiertas de mayor mencin son: Demonstration of effective communication through diverse writing exercises. 6 Discussion of essays orally within contextualization, relevance and analysis. 5 Writing critical essays.5

44

Las actividades diseadas a desarrollar la escritura se realizan de forma diversa. Las respuestas sealan la escritura desde prrafos cortos a ensayos crticos y reflexivos sobre los temas y lecturas asignadas. La redaccin se presenta como eje central de las actividades sealadas por los/las profesores/as para fomentar la competencia de comunicacin efectiva.

Thread of answers for question 3: Indicate the limitations or problems observed in your classes while teaching this competency.
Fear of students to speak the English language and do mistakes.7 Infrastructure limitations. Water leaks, malfunctioning air conditioners, bad noise, construction noise. Classroom design is not conducive to the learning of language. Especially in the Generales, Osuna, Ana Mara ONeill and REB buildings.4 Anxiety, pressure, fast paced lifestyle and the larger socio cultural condition of having to be involved in many different kinds of experiences in different spheres create a tension that interferes with professor and students efforts to take writing seriously and examine issues in depth. 4 Outside classroom noise interferes with teaching and learning.3 Deficiencies in grammar and Basic grammatical errors.3 Ineffective organization of ideas. 3 Lack of computers and printing facilities. 3 Lack of a reading culture by students. 2 At lower level classes the biggest problem is the limited time allowed for students to practice speaking and writing.2 Lack of students grammatical awareness in Spanish makes the teaching of English structures challenging.2 Sometimes students are shy and feel insecure with the language.2 Attitudes toward the learning of English.2 Limitation of vocabulary.2 Elimination of a language laboratory and lack of technological and media classroom equipment. 2 Class size hinders the development of this competency. Classes are large and this limits students participation and what can be done. 2 Class size. Classes that concentrate on writing should not be with more than 15 students. Assessment takes time and the process of revision, edition and re writing when part of a course the class size must be kept low especially in English Foreign Language Education.1 Students have been taught formulas for writing that disregard audience or the compatibility of forms and content. 1

45

Malfunctioning of elevators make it difficult or almost impossible to carry technological equipment to classrooms.1 Students attention span.1 Lack of students desire to be at the University. Attendance seems to be forced by the students parents. 1 Students writing limitations interfere with the ability to produced structure sentences.1 Connecting vocabulary acquired through reading to spoken language.1 Reading and writing are not elements of the students prior experience.1 Limitation of having students writing circumscribed to pencil and paper.1 Misunderstanding of the student role in the process of knowledge production in the university.1 Coverage of class material and content- external expectations of material covered in the course, and how much writing should be covered in relation to visual.1 3163 students are more difficult to teach effective communication.1 Excessive class absences 1 Some students are not open to read unfamiliar themes and topics.1 Resistance to usage of English language. 1 For basic students the most difficult area is oral communication.2 Lack of metalinguistic awareness.1 Usage of online translators.1 Integrating content with grammar.1 Frustration to listening to materials that they might not be able to understand. 1 Students inability to come to class with the homework prepared.1 50 minutes classes versus 80 minutes classes and regularity of classes.1

Comentarios Las respuestas a la pregunta 3 documentan las limitaciones, retos, y problemas observados por los profesores en la enseanza de la competencia de comunicacin efectiva. Para esta pregunta se desarrollaron 34 categoras abiertas. Es importante ver que las respuestas de los participantes documentan problemas particulares de la infraestructura universitaria que interfieren con la enseanza y aprendizaje en sus cursos; aspectos particulares de la enseanza del ingls; y los miedos y actitudes a cometer errores de los estudiantes hacia la lengua que se ensea.

46

Thread of answers to question four. In your classes, do you dedicate more time to the teaching of one of the skills of effective communication above another?
All four skills. Speaking, listening, reading and writing skills 11 Writing 6 Critical Thinking and Analysis 2 Oral Communication 7 Listening and speaking skills2 Holistic integrated approach 3 Basic levels should have an emphasis in grammar basics. 1 Reading and writing in the upper levels 3 Reading writing and speaking at the lower levels.2 It depends on the levels. 1

Comentarios De las respuestas obtenidas por los profesores se identificaron 10 aspectos importantes. Sin embargo la mayora de los profesores sugieren que la enseanza de las cuatro destrezas como parte integral para proceso de aprendizaje de un nuevo idioma. Alguno de los profesores mencionaron un acercamiento holstico a los procesos de la enseanza del ingls. Destacando que la produccin oral es esencial para los niveles bajos y la escritura para los niveles altos.

Thread of responses to question 5. Do you consider critical thinking an integral part of the development of effective communication? Explain
Integral part of effective communication. Making connections across the disciplines 16 Critical thinking requires multiple condition to progress Critical Thinking of selecting words and syntactical structures. 1 One of the most important missions of the University is to produce individuals who think critically and professors should challenge their students. 1 Basic level students might not have the linguistic tools to achieve this. 3

Comentarios De las respuestas de los profesores se desprende que el pensamiento crtico es un aspecto importante en el proceso del aprendizaje de un nuevo idioma y ayuda a la comunicacin efectiva. Algunas de las respuestas abundan sobre lo que los participantes piensan que es el pensamiento crtico y su relacin con el aprendizaje de un nuevo idioma.

47

Thread to answer 6. Do you think the effective communication competency can be developed with a one year course of English? Be sure to specify the course level you are referring to.
The one year requirement is a limited time to achieve the requirement of exit university profile. 6 At the intermediate level writing, listening and speaking are the main difficulties and require special attention that is impossible to comply with in one year. Some progress is possible. 2 At the 3161 -63 levels the problem is more complex and more than one year is required. 12 One of the most serious faults of the new BA is the elimination of the second year English. 2 There are very different levels of effective communication and students at the advanced levels are most likely to develop the competence. 2 Impossible for 3103-3104.6 Effective communication can be taught at any level. 2 Even advanced levels would benefit from a second year course. 1 It could be done with much cooperation.1

Comentarios Existe un consenso entre los profesores de que no es posible que el estudiante pueda desarrollar en un ao todos los aspectos requeridos de la competencia de comunicacin efectiva.

Recomendaciones para el avalo del prximo semestre

Categorizar las respuestas a las seis preguntas del cuestionario Presentar los resultados obtenidos al Departamento de Ingls para su discusin Definir el dominio de comunicacin efectiva Determinar las metodologas adecuadas para el desarrollo de la competencia y formas de avalo.