You are on page 1of 1

Incorporating an e­Portfolio System into the Assessment of a Personal 

Development Planning Module – Implications for Delivery 
Alison Caswell & Jill Taylor Faculty of Health, Leeds Metropolitan University 
Aim  Introduction of PebblePAD  Tutor Reflection 
To report on the use of the PebblePAD e­portfolio system with Level 1 biology  •  The opportunity to trial PebblePAD with the 2005­2006 Level 1 Human  •  One fascinating aspect was how use of PebblePAD drove the 
students in the context of a Personal and Professional Development module. Biology cohort was a spin off from the Enhancing Learner Progression  development of e­learning more generally within the module and three 
Project, one of the regional pilots in the JISC Distributed e­Learning  examples of this are outlined below: 
Programme investigating the use of e­portfolios to support students at  1.  A paper­based learning styles questionnaire was replaced with a 
key transition points in the student lifecycle.  questionnaire produced by Phil Race (Race, 2005) which is 
Introduction  •  It was recognised that to enable PebblePAD to be used effectively, it  designed to encourage students to think about their approach to 
•  There is significant interest in the use of e­portfolios in the Personal  would be necessary to move some sessions from a classroom to an IT  and motivation for learning.  This was made available to students in 
Development Planning (PDP) process as they have a number of  laboratory, and to offer some module materials electronically.  electronic format together with generic feedback.  Students were 
potential advantages including: •  As a consequence a blended mode of delivery evolved, and students  encouraged to evidence that they had done this activity through the 
¨ The ability to store material in a form that is readily accessible and  were required to submit both an e­portfolio and a physical portfolio.  production of a reflection; 
portable; •  The basis of this approach was partly pragmatic in terms of what was  2.  A class exercise designed to help students think about how they 
¨ The ability to incorporate tools that facilitate the development of  achievable in the time­scale, but it was also recognised that it would be  could maximise their learning in different teaching situations was 
skills such as action planning and reflection; better to continue some activities, e.g. those relating to group working  converted into an electronic survey.  Once the students had 
¨ The ability to incorporate tools that allow material to be selected  skills, in their original format.  However, even where students were using  completed this exercise, class results and Tutor feedback were 
easily and presented in a range of high quality formats.  paper­based materials in a classroom setting, they were encouraged to  released via Web CT; 
•  There are also potential disadvantages/problems including: record their reflections using PebblePAD.  3.  Written communication exercises relating to arrangement of 
¨ Substantial infrastructure requirements; •  Electronic materials plus a link to the PebblePad system were provided  material within paragraphs, conversion of information into tables, 
¨ Incompatibility between the systems resulting in lack of portability; via the VLE (Web CT) provision for the module.  and flow charts etc. were made available electronically.  This both 
¨ Increased demands on staff and students in relation to ICT skills; allowed the students to do these exercises more readily through 
¨ Emphasis on using the technology to the detriment of the  “cutting and pasting”, and gave them the opportunity to develop 
development of other skills; their word processing skills. 
¨ Use of the technology purely for relatively mechanical exercises  Outcomes – Assessment  •  The changes to delivery greatly increased the opportunities for Tutor 
such as skills audits rather than as a tool for fostering reflection etc. •  Of the 44 students in the cohort, 6 failed to submit for assessment (5 also  feedback, e.g. in response to class surveys. 
¨ Student resistance to using electronic media.  failed to submit for other modules) and 2 chose to produce only a  •  There was also a strong stimulus to create new learning materials.  For 
•  PebblePAD is an e­portfolio tool which has been developed by the  physical portfolio.  example, for the session on preparation on assessment, the Tutor 
University of Wolverhampton.  It has three main elements: •  Of the 36 students who submitted electronic material, 3 submitted  produced a PowerPoint diary of a fictitious student who made mistakes 
¨ A file store for deposition of material (assets); individual assets whilst the remainder produced an e­portfolio.  leading to failure in assessment.  There were several positive references 
¨ A series of asset generation tools for action planning, recording of  •  Four other students had problems with linking files to their portfolios, but  to this in the students’ reflections. 
reflections etc. with the latter offering options with varying degrees  in 3 of these cases, the problems were resolved quickly and easily..  •  The two key lessons for the future are: 
of structure/support; •  In general, the students who did not submit their e­portfolio correctly  1.  To develop the skills needed to produce the e­portfolio at a much 
¨ Tools for the sharing of material as individual assets or in the format  and/or had other technical problems did not attend the training sessions.  earlier stage in the module; 
an e­portfolio.  •  The marks ranged from 70% to 22% with an average of 53.6%.  2.  To encourage the students to share at least one reflection with the 
•  The e­portfolio element provides a range of presentation formats  •  Three students failed the assessment at the first attempt.  A fourth  Tutor for feedback at an early stage. 
together with options to link assets.  student also obtained a mark below 40% but as this was due to the  •  There were technical reasons why these strategies were not 
•  In addition, there is a facility for tutors to provide electronic feedback  technical problems with file linking outlined above, this student was given  implemented, but the Tutor could have been more active in trying to 
when assets or an e­portfolio are submitted.  an optional deferral.  resolve the problems.  In the former case, this was because the Tutor 
•  These outcomes are broadly in line with previous years although direct  was aware that students tend not to produce their portfolios until just 
comparisons are not possible because the University has changed its  before submission is due.  However, with hindsight. it would have been 
requirements in relation to submission of work.  beneficial to encourage students to start earlier.  In the latter case, the 
Background  Tutor did not appreciate that this could be done relatively easily.  This 
•  BSc (Hons) Human Biology is a multidisciplinary bioscience course.  has to be regarded as a missed opportunity given that there are clear 
•  Personal and Professional Development is a 15 Credit Level 1 core  benefits both of identifying students who are struggling to develop their 
module.  Outcomes – Student Evaluation  reflective skills, and of having an opportunity for formative assessment 
•  The module is structured around the PDP process in that it begins with 
•  Students were asked to complete an evaluation form electronically when  and feedback during the first few weeks of the course as this can impact 
exercises to help students to audit their current skills status etc. and to  on retention (Yorke, 2001). 
they submitted their e­portfolio. 
identify what will be required of them during the first semester, then 
provides opportunities for skills development and concludes with an 
•  This included questions specifically focused on the e­learning elements. 
assessment of progress plus action planning for the following semester. 
•  Students were asked to respond on a scale of 1 to 5 where 1 = strongly 
agree, 3 = neutral, and 5 = strongly disagree. 
•  The module is assessed via a portfolio in which students are required to 
•  A total of 25 students completed the evaluation.  Conclusions 
provide evidence that they have addressed each of the above areas, 
together with two further areas (critical thinking and research skills). 
•  In relation to sources of module information, 17 said they had found the  •  Overall, the pilot was successful and several lessons have been learned. 
module handbook helpful while 22 had found the Web CT site helpful.  •  We are now extending the pilot with other Level 1 cohorts in the Faculty. 
18 also claimed that they had made greater use of the Web CT site than 
the module handbook. 
References  •  Only 3 students wanted more exercises overall, but 8 would have liked 
more computer­based exercises. 
Enhancing Learner Progression (ELP) Regional e­Portfolio Collaboration:  •  9 students felt they had enjoyed using PebblePAD and 5 were neutral. 
http://www.bradford.ac.uk/acad/tqcg/resources/elp/JISC_ELP/ELP_01.htm 
PebblePAD: http://www.wlv.ac.uk/default.aspx?page=7024. 
•  10 students felt PebblePAD had been easy to use and 7 were neutral. 
Race, P (2005) Making Learning Happen, London, Sage. 
•  10 students felt they had received adequate help in relation to using 
PebblePAD and 11 were neutral. 
Yorke, M. (2001) Formative Assessment and Relevance to Retention. 
Higher Education Research and Development, 20, pp. 115­126. 
•  12 students felt it was easier to record thoughts/reflections in PebblePAD 
than on paper and 6 were neutral. 
•  11 students felt that constructing the e­portfolio was more enjoyable than 
Acknowledgement  assembling the paper portfolio and 7 students were neutral. 
Funding for the PebblePAD licences was provided through the JISC  •  In relation to preference for a wholly e­portfolio, responses were spread 
Distributed E­Learning Programme.  evenly across the 5 categories.