Using the ACTFL  Integrated Performance Assessment in  Advanced University Courses

Donna Shelton, PhD Northeastern State University Tahlequah, Oklahoma

Contents
 Overview of the ACTFL IPA or Integrated 

Performance Assessment

 University­level application of the IPA  IPA simulation in small groups  Example tasks for Spanish  The IPA as a program assessment tool

Overview of the ACTFL IPA 

The ACTFL IPA Project
 Grew out of need to assess learner progress in 

reaching the standards
instructional strategies

 Assessment had not kept pace with changes in   1997 grant from the Department of Education to 

develop the IPA or Integrated Performance  Assessment

Adair­Hauck, Bonnie, et al. “The Integrated Performance Assessment (IPA):   Connecting Assessment to Instruction and Learning.” Foreign Language Annals 39 (2006): 359­382.

The ACTFL IPA Project
 Need for assessments that determine how well 

students can communicate in all three modes
 Interpretive  Interpersonal  Presentational

Adair­Hauck, Bonnie, et al. “The Integrated Performance Assessment (IPA):   Connecting Assessment to Instruction and Learning.” Foreign Language Annals 39 (2006): 359­382.

The ACTFL IPA Project
 ACTFL IPA Project had three goals
 Design instrument to measure progress toward 

meeting standards

 Conduct research on effectiveness of instrument  Use the instrument as a catalyst for reform

 Assessment within the framework of ACTFL 

Performance Guidelines for K­12 Learners

Adair­Hauck, Bonnie, et al. “The Integrated Performance Assessment (IPA):   Connecting Assessment to Instruction and Learning.” Foreign Language Annals 39 (2006): 359­382.

The ACTFL IPA Project
 Three­year project, 1997­2000
 Prototype design  Creation of sample tasks for proficiency ranges

 Professional development for participants
 Field testing

Adair­Hauck, Bonnie, et al. “The Integrated Performance Assessment (IPA):   Connecting Assessment to Instruction and Learning.” Foreign Language Annals 39 (2006): 359­382.

Overview of IPA Tasks
 Each set of tasks has an introduction
 Framework for all three tasks  All related to one theme or area of content  Authentic or real­world tasks to assess language 

performance

 Modeling and practice precede the performance 

task

Adair­Hauck, Bonnie, et al. “The Integrated Performance Assessment (IPA):   Connecting Assessment to Instruction and Learning.” Foreign Language Annals 39 (2006): 359­382.

Performance Assessment Units: A Cyclical Approach
I. Interpretive  Communication Phase

III. Presentational  Communication Phase

II. Interpersonal  Communication Phase

Based on graphic in Glisan, Eileen W. et al. ACTFL Integrated Performance  Assessment, ACTFL, 2003.

Evaluating IPA Performance
 Rubric criteria based on ACTFL Performance 

Guidelines for K­12 Learners

 Proficiency range (Novice, Intermediate, Pre­

advanced)  Communicative mode  Language performance in six domains  (Comprehensibility, comprehension, language  control, vocabulary, cultural awareness,  communication strategies)
American Council on the Teaching of Foreign Languages. ACTFL Performance Guidelines for K­12 Learners. Yonkers, NY:  ACTFL,1998.

Feedback Loop
 Instructor evaluation of student performance 

after each communicative task 
 Tasks that challenge students

 Tasks students can handle on their own

 Responsive assistance
 Not explicit feedback on right and wrong 

responses  Assists students in developing strategies to handle  tasks they’re not ready to do independently
Glisan, Eileen W. et al. ACTFL Integrated Performance Assessment, ACTFL,  2003.

Interpretive Communication  Phase
Listening, reading,  viewing Two essential skills: Literal  comprehension Interpretive  comprehension

Interpersonal Communication  Phase
Y después  tuve que … ¿De veras? Pues, yo …

Speaking or  writing Two or more  interactive  participants Spontaneous  and not scripted

Presentational Communication  Phase

Spoken or written one­way communication to an  audience of listeners or readers  (not only the instructor) Real­world task and culmination of IPA

University­Level  Application of the IPA

IPAs at the University Level
 ACTFL IPA Project involved public school 

language programs at a variety of levels

 No apparent research on IPAs past K­12 level  Need for greater focus on standards in all 

university courses

 Need in university programs for performance 

assessments from elementary through advanced  courses

Language and Content Courses
 Upper­level students are likely still in the 

Intermediate proficiency range

 Upper­level content courses 
 Often don’t support language acquisition

 Few opportunities to use Advanced­ and 

Superior­level language functions

 Classroom talk is often an IRE­based dialogue 

(teacher initiation, student response, evaluation)

Mantero, Miguel. “Bridging the Gap:  Discourse in Text­Based Foreign Language  Classrooms.”  Foreign Language Annals, Volume 35 (2002):  437­456.

Language and Content Courses
 Donato and Brooks observed a senior­level 

literature course in a large university 

 Prominent discourse patterns inhibited extended 

responses on the part of students  Most common question types did not encourage  Advanced­ or Superior­level responses  Most discussion was conducted in the present  tense
Donato, Richard and Frank B. Brooks. “Literary Discussions and Advanced  Speaking Functions:  Researching the (Dis)Connection.” Foreign Language  Annals 37 (2004):  183­199

Language and Content Courses
 Donato and Brooks noted that discourse in 

literature course has several implications,  including

 Literature courses have potential for Advanced­

level language acquisition  To reach this potential, a variety of interaction  patterns is needed, with regular opportunities for  extended, elaborated responses

Donato, Richard and Frank B. Brooks. “Literary Discussions and Advanced  Speaking Functions:  Researching the (Dis)Connection.” Foreign Language  Annals 37 (2004):  183­199

IPA Use in Advanced Courses
 Incorporating IPAs into upper­level courses
 Composition and conversation, civilization and 

culture, literature acquisition

 Means for integrating content and language   Appropriately designed, IPAs could stimulate the 

extended, elaborated discourse absent from the  literature course observed by Donato and Brooks

IPA Modifications in Advanced Courses
 Thematically related real­world tasks for each 

communicative mode key to IPA

 Intermediate­level example, theme of work 
 Interpretive task:  Read classified job ads  Interpersonal task:  Discuss and compare the ads 

with a classmate; indicate which job you prefer

 Presentational task:  Write an application letter

 How do these tasks differ in advanced content 

courses?

IPA Modifications in Advanced Courses
 Thematic course organization facilitates IPA use

 Real­world tasks at this level are generally 

academic or formal communicative functions  related to the content
 Must require more than factual recitation
 Must encourage critical thinking  Must involve extended discourse, expressions of 

opinion and hypothesis, narration in all major time  frames and other characteristics of higher­level  language use

IPA Modifications in Advanced Courses
 Rubrics for each communicative mode
 ACTFL Performance Guidelines for K­12 Learners 

can be used as a starting point

 ACTFL/NCATE Standards One and Two for 

language education candidates and their rubrics  are very useful
higher proficiency levels

 Criteria and descriptors reflect expectation of   Content of the task must be included in the rubric

IPA Simulation in Small Groups

A Brief Example IPA in English
 Overview of the tasks
 Theme uniting the three tasks:  the relationship 

between place and identity

 Assumes previous readings and conversations for 

modeling and practice prior to first IPA task

 Tasks should elicit elements of Advanced­and 

Superior­level language as defined by ACTFL

 Partial task completion today due to time limit

Overview of The Task
You are training to work as a counselor for people whose  lives have been disrupted by natural disasters.  You have  learned about the concept of attachment to place and the  role of place in personal identity.  Now you’re going to  listen to a podcast describing one person’s experience with  the near loss of the place he considers home, and then  you’re going to talk to a friend who is also in the training  program to find out about his or her own experiences.  To  complete this part of your training, you’re going to write an  essay exploring the relationship between place, identity,  and the aftermath of natural disasters.

Example Interpretive Task 
 Podcast from NPR series “This I Believe”
 Mike Miller, “My Home Is New Orleans,” August 28, 

2006

 http://www.npr.org/rss/podcast/podcast_directory.php

 See also http://thisibelieve.org/index.php
 Contributed essays describing the personal 

philosophies of the authors

 Interpretive task completed by individuals

Example Interpretive Task 
 Podcast comprehension guide
 Based on the Pre­advanced Comprehension Guide 

Template in the ACTFL IPA manual

 Variety of comprehension tasks
 Main idea and supporting information
 Meaning from context  Concept inferences

 Author’s perspectives
 Comparing cultural perspectives  Personal reaction to the text

Example Interpretive Task 
 Main idea  After listening to the podcast, write a few sentences to 

explain the main idea

 Supporting information  Meaning from context  What is the meaning of the word “pulse” in this podcast?  Author’s intent  What is the importance of the author’s two professions in 

his story?

 Why does the author emphasize the difficulty of life in 

New Orleans in his essay?

Example Interpersonal Task 
Talk to one of your peers in your training program  to find out what he or she thinks.  Find out where  he or she grew up.  Ask him or her to describe an  experience that occurred there.  Find out whether  he or she still has a strong attachment for the  place, and if he or she believes the place had an  impact on his or her identity.  You have five  minutes.

Example Presentational Task 
To complete this part of your training program,  write an essay exploring the relationship between  place, identity, and the aftermath of natural  disasters.  You will use all of the texts that we  have read and the interviews you have conducted  during the training program as resources.  The  essay must be evaluated by the program  instructors before you can begin the next part of  the program.

Example Tasks for Spanish

Composition and Conversation Course Example

Theme: A Better Life (Immigration and Indigenous Rights)
Overview of the IPA:  You have been following the national debate over  illegal immigration and you realize that you need to know more about the  issue before you decide how you feel about it.  You’ve also become aware  that some of the immigrants are from the indigenous cultures of Mexico  and Central America, which interests you as a resident of Tahlequah,  Oklahoma, the capital of the Cherokee nation.  You do some reading about  the issue, discuss it with your classmates to learn what they think and to  share your opinions, and then do further research on an aspect of the topic  to allow you to present additional information to your peers. Preparation:  View the film “El norte” in sections and complete an  interpretive exercise over each section, followed by conversations over the  film and postings to the Blackboard discussion board.  Complete related  readings on immigration and rights of indigenous people.

Composition and Conversation Course Example

Theme: A Better Life (Immigration and Indigenous Rights)
IPA Interpretive Task:  Read the personal experiences of several female  immigrants on the website for PBS documentary called “La ciudad” at  www.pbs.org/itvs/laciudad/asuntos4.html. Complete an interpretive exercise  similar to the examples in ACTFL IPA manual. IPA Interpersonal Task:  Students are divided into small groups, and each  group selects either immigration or indigenous rights as their topic.  Each  student reads an additional article over the topic in preparation.  Students  converse as a group, initiating and ending the conversation on their own,  discussing opinions related to the topic, sharing their new information, and  asking questions about what others have learned.

IPA Presentational Task:  Oral presentation to the class using PowerPoint on a  more specific aspect of the topic (such the debate over immigration in the US)  and based on additional resources. The presentation provides other students  with additional information on the topic.

Civilization and Culture Course Example

Theme:  Cultural Encounters in the New World
Overview of the IPA:  You are aware from your previous studies that the  European conquest of the New World resulted in the near decimation of the  native peoples of this hemisphere.  You are going to investigate how each  group’s perception of the other influenced their encounters by reading  selections of authentic texts written by Spaniards and by Aztecs, analyzing  and comparing the reactions of each group during conversations with your  peers, and finally summarizing your findings in a formal, written document. Preparation:  Textbook and brief authentic readings related to the Spanish  exploration and conquest of the New World and also to indigenous cultures  and their reaction to the arrival of the Spaniards.  Completion of  interpretive exercises for the authentic readings, class and discussion board  conversations.

Civilization and Culture Course Example

Theme:  Cultural Encounters in the New World
IPA Interpretive Task:  Read the chapter of Bernal Díaz’ The Conquest of New Spain that describes the Aztec city of Tenochtitlán and in particular  their religious practices.  Complete an interpretive task similar to the ACTFL  IPA manual examples.  IPA Interpersonal Task:  Students will converse in small groups, initiating,  sustaining, and closing the discussion on their own.  During this  conversation students will share their description and analysis of the  Spanish perception of the Aztecs with their peers, and each will contribute  to the discussion information and comparisons gained through other  readings. IPA Presentational Task:  Using all the sources studied during this theme,  prepare a formal essay analyzing and comparing the perceptions the  Spaniards and native peoples had of each other and how these perceptions  influenced the final outcome of their encounter.

Literature Course Example Theme:  Culture and Society of Medieval Spain
Overview of the IPA:  You will soon read stories from don Juan Manuel’s El  conde Lucanor, one of the earliest prose works in Spanish literature. To  become more familiar with the work and with the culture of medieval Spain  as shown in the work, you will each read a story from El conde Lucanor,  discuss and compare your story and others in small groups,  and finally, after  additional reading, present an analysis of the stories to the your classmates. Preparation:  Review of the history of medieval Spain and the Reconquest  learned in other courses. Read excerpts of several works of medieval  Spanish literature, both earlier works and those contemporary to don Juan  Manuel.  Become familiar with the biography and works of don Juan Manuel.

Literature Course Example Theme: Culture and Society of Medieval Spain
IPA Interpretive Task: Some of you will read  “De lo que aconteció a un  mancebo que se casó con una mujer muy fuerte y muy brava,” and rest of  you will read “Lo que sucedió a un deán de Santiago con don Illán, el mago  de Toledo.”  After you have read your story you will complete an interpretive  task. IPA Interpersonal Task: You will work together in groups of four to discuss and compare the structure, plot, characters, and themes of each story. You will also explain what you think your story teaches the reader about the culture of medieval Spain. You are responsible for obtaining as much information about the other story as you can from the other members of your group. IPA Presentational Task:  Each of you will read one of several additional stories from El conde Lucanor, and then you will each make an oral presentation analyzing the cultural products, practices, and perspectives of medieval Spain as seen in the three stories you will read.

The IPA:  A Program  Assessment Tool

IPA and Program Assessment
 University­ and accreditation­agency mandated 

program assessment procedures

 Well­designed IPAs could serve as baseline, 

formative, and perhaps even summative  assessments of language proficiency in all three  communicative modes

 IPAs could serve as artifacts in content­area 

portfolios used as program assessments

IPA and Program Assessment
 New requirements for language teacher education 

programs accredited by NCATE knowledge and skills

 Eight assessments, the second assesses content   ACTFL/NCATE Standards 1 and 2
 Standard 1: Language, Linguistics, Comparisons  Standard 2: Cultures, Literatures, Cross­Disciplinary 

Concepts

 IPAs could be artifacts of an Assessment Two 

portfolio

ACTFL/NCATE Assessment #2
Content Knowledge in the Languages to be Taught
This assessment should include, but is not limited to, the  content of Standards 1 and 2.  Specifically, assessments  should address how candidates demonstrate their mastery of  such concepts as: (1) the linguistic elements of the target  language, (2) similarities and differences of the target  language and other languages, (3) connections among the  perspectives of a culture and its practices and products, (4)  the recognition of the value and role literary and cultural  texts play in the interpretation of the target culture, and (5)  the integration of knowledge of other disciplines and  viewpoints accessed through the target language.
American Council on the Teaching of Foreign Languages. Preparing the ACTFL/NCATE Program Report.  ACTFL, 2006.

Presentation Resources
Adair­Hauck, Bonnie, et al. “The Integrated Performance Assessment (IPA):   Connecting Assessment to Instruction and Learning.” Foreign Language Annals 39 (2006): 359­382..

American Council on the Teaching of Foreign Languages. ACTFL Performance Guidelines for K­12 Learners. Yonkers, NY:  ACTFL,1998.
American Council on the Teaching of Foreign Language. ACTFL Program Standards for the Preparation of Foreign Language Teachers.  ACTFL, 2002. American Council on the Teaching of Foreign Languages. Preparing the ACTFL/NCATE Program Report.  ACTFL, 2006 Chaves Tesser, Carmen and Donna Reseign Long. “The Teaching of Spanish  Literature:  A Necessary Partnership between the Language and Literature  Sections of Traditional Departments.” Foreign Language Annals, Volume 33  (2000): 605­613. Donato, Richard and Frank B. Brooks. “Literary Discussions and Advanced  Speaking Functions:  Researching the (Dis)Connection.” Foreign Language  Annals 37 (2004):  183­199 Glisan, Eileen W. et al. ACTFL Integrated Performance Assessment, ACTFL, 2003

Presentation Resources
Glisan, Eileen and Richard Donato. “Continuing Commentary:  It’s Not ‘Just a  Matter of Time:’ A Response to Rifkin.”  Foreign Language Annals. 37 (2004):  470­476. Mantero, Miguel. “Bridging the Gap:  Discourse in Text­Based Foreign  Language Classrooms.”  Foreign Language Annals, Volume 35 (2002):  437­ 456.

Questions? Thank you! Donna Shelton, sheltods@nsuok.edu

Master your semester with Scribd & The New York Times

Special offer for students: Only $4.99/month.

Master your semester with Scribd & The New York Times

Cancel anytime.