IELTS Academic Reading Module Test Validity and Reliability1

British Journal of English Linguistics
Vol.4, No.2, pp.26-37, April 2016 ___Published by European Centre for Research Training and
Development UK (www.eajournals.org)
IELTS ACADEMIC READING MODULE TEST: VALIDITY AND RELIABILITY
Marzook Maazi Alshammari
College of Tourism and Hospitality, Madinah - Saudi Arabia
ABSTRACT: The testing of reading comprehension seems deceptively simple when compared
to the testing of other abilities. The basic problem is that the language tester is expected to set
tasks that will not only lead the candidate to use reading skills but will also result in behavior
that provides clear evidence of the successful use of those skills. This paper aims to evaluate
the IELTS Academic Reading Module Test in detail, examining its validity and reliability and
discussing how far its format, operations, conditions, and techniques meet its purpose. The
paper focuses mainly on the test scoring rules, which appear to be strict in terms of spelling,
grammar, and the number of words required for written responses. It concludes with some
recommendations on ways in which the validity and reliability of IELTS reading scoring rules
could be improved.
KEYWORDS: IELTS Academic Reading Module Test, Format, Operations, Conditions
Validity, Reliability, Scoring Rules, Evaluation.
INTRODUCTION
In the past decade, the issue of testing reading comprehension has taken place in a debate
between language teachers concerning the mistrust of the test quality which seems to have a
negative effect on language teaching and learning activities (Hughes, 2003). This issue has
grown in importance in light of recent discussions about the content and techniques of the
reading test in order to produce a measurement tool that can give an accurate reflection of
students' ability to extract the main ideas from the reading text (Weir, 2005). In his analysis,
Hughes (2003) claims that in testing reading, testers need to take into account the skills that are
involved in the reading process and that are appropriate to the purpose of the test.
Moreover, the process of designing a good reading test requires a clear understanding of both
validity and reliability of the test format. The test is said to have content validity if it measures
exactly what it is intended to measure in students. However, the test can be reliable if it gives
consistent results for the same performance ((McNamara, 2000, Lillely, 2005)
This paper critically tries to give a detailed evaluation of the Academic Reading section of the
International English Language Testing System (IELTS). Specifically, it discusses the test
framework, format, validity and reliability.
The nature of the IELTS test

IELTS is broadly used to assess the language proficiency levels of candidates wishing to study
or train where English is the medium of communication (Clapham, 1996, Charge & Taylor,
1997, and IELTS: Information for candidates, 2011). IELTS is ‘owned’ and managed by three
associations, The British Council, The University of Cambridge Local Examinations
26 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Syndicate, and IDP Education Australia: IELTS Australia (Cambridge IELTS3, 2005: 1). The
test consists of four modules: that is - listening, reading, writing, and speaking. However, while
all candidates take the same listening and speaking modules, reading and writing modules are
available in two formats: the Academic Module and the General Training Module. (Charge &,
Taylor 1997). The Academic Reading and Writing Module is specified for assessing the
English proficiency level of those wishing to join English medium universities or colleges at
undergraduate or post graduate level. (Clapham, 1996, IELTS: Information for candidates,
2011)
The specific purpose of the Academic Reading Module, however, is to test the reading skills of
the candidates who read three passages graded in difficulty in order to answer a total of 40
questions in a relatively short period of time. (Jakeman & McDowell, 2001:28).
Framework of Academic Reading test in IELTS

Operations - In the light of the type of texts used and questions asked in this module,
candidates appear to be expected to carry out a number of operations; these can be divided into
two types: expeditions and careful reading operations.
Expedition reading operations

Skimming: for this test candidates need to quickly survey the text to obtain a general
understanding of the main ideas and then identify the appropriate paragraph which had to be
read more carefully in order to answer specific questions.
Scanning: the test includes questions where candidates are expected to use their skills to scan
the passage to find specific information, i.e. the name of a place, specific words or phrases,
figures, percentages or dates. (Hughes (2003:138).
Careful reading operations:

Distinguishing fact from opinion and recognizing an author’s attitude: the IELTS test
includes texts which are completely factual and others which include arguments or opinions.
Candidates are tested on their ability to distinguish and understand these points from the texts.
(Jakeman &McDowell, 2001).
Understand inferred information: some questions may include statements which are
paraphrased differently from the original texts. Candidates are expected to deduce the meaning
of these phrases in order to arrive at the appropriate answers. (Jakeman & McDowell, 2001).
Infer the meaning of unknown words from contexts: as the texts include a number of
unfamiliar words, candidates are expected to use various strategies of identify the meaning of
unknown words; i.e. “inference through context, or word-formation” (Grellet, 1986:12).
Conditions
Reading purpose: The main purpose of reading in a test situation is to get the relevant
information necessary to answer the questions in the test. In the IELTS test situation, however,
it appears that the chosen texts deal with topics related to candidates’ future target use and
relevant to their background knowledge. This may help candidates to deal with the given texts
better. (Weir, 1993:66)

Nature of texts
Text types - IELTS Academic Reading texts include articles and reports taken from a variety
of authentic sources such as newspapers, magazines, books and journals.1 As mentioned earlier,
the selected texts deal with a number of topics related to the language target situation and
relevant to candidates from different fields. The common topics that usually arise in IELTS
may include education, social sciences or problems, the environment, technology, political
issues also life and health sciences. (Clapham, 1996: 62 , British Council, 2011)
Organizational structure - As the IELTS Academic Reading test is for students at a high
proficiency level, the texts are carefully selected from a range of well organized texts that are
used to test various reading skills. The texts are usually divided into 3 sections, i.e. introduction,
main body of text, conclusion, candidates are thus able to follow the text easily. (British
Council, Riyadh 2011) The chosen passages are written in a number of styles that suit the
purpose of the test i.e. narrative, argumentative, and process description. (Jakeman &
McDowell, 2001:28) (See the appendix)
Propositional feature - The texts used in this test are not intended for specialists, they deal
with a variety of general issues which are assumed to be appropriate to the background
knowledge of postgraduate or undergraduate level candidates who wish to take English
speaking university courses.2 Nevertheless, it is common to find a number of unknown lexical
items within these texts varying from technical and sub-technical vocabulary to other items
which candidates may have never come across. However, texts which include technical terms
are always accompanied by a glossary of the terms which are thought to be unfamiliar to
candidates (IELTS: information for candidates, 2011).
Length - Hughes, (2003) believes that the appropriate length of passages used for testing
expeditious reading should average about 2000 words or more, in fact, the 3 passages ranges
from 2,150 to 2,750 words. 3 This number is seen to be adequate for testing skills such as
expeditious reading where the reader has to go through lengthy passages in order to get the gist
of the main ideas or to find specific information.
Channel – Reviewing a number of IELTS sample tests reveal that at least one passage in each
test may contain non-verbal material, i.e. pictures, diagrams, graphs, charts and/or illustrations.
Some illustrations are used within the passage and others accompany the tasks to clarify
questions or are used as part of the question as in the case of diagram completion tasks.
Urquhart & Weir, (1998:145) draw attention to the importance of using diagrams to convey
information particularly in the case of science texts.
Time available - The IELTS reading module allows 60 minutes to answer 40 questions based
on the three reading passages; students are recommended to spend 20 minutes on each passage
and are required to write their answers on the answer sheet during this time as they are not
given extra time to transfer their answers.4 Since the test includes testing expeditious reading
1
http://www.cambridgeesol.org/exams/ielts/index.html#acrd
2
http://www.ielts.org
3
IELTS Handbook 2007, p7
4
IELTS Handbook 2007, p7

skills, the time available appears to be appropriate, as students are not expected to read every
word in the text. (Hughes, 2003: 141). In this connection, Weir, (1993:68) claims “… if too
much time is given candidates may simply read intensively, and questions designed to test
ability to process text quickly to elicit specified information may no longer activate such
operations”.
Assistance - All instructions are clearly written in the target language (English) and it is noted
that questions may appear before or after passages. Candidates are not allowed to use a
dictionary during the test. Rather, if a text contains technical words a glossary is available
(IELTS: Information for candidates, 2011).
Method factor/response mode - Candidates are familiar with the type of tasks and
environment features (procedures and conditions) in this test since sample tests are available
for candidates to practice in advance. Nevertheless, candidates are not allowed to write their
answers using their mother tongue. Questions in this test are presented in the same order in
which the information appears in the texts. The marks are distributed on the basis that each
item being worth one mark5 but candidates are penalized for incorrect spellings and grammar
and also if they exceed the number of words required by the question 6 (British Council- 2011).
Level of performance
Since IELTS is not a fail or pass test and intended to measure candidate’s proficiency level of
language it uses a banding system of 9.0; university requirements are 6 plus depending on the
program candidates wish to pursue. (Tennent, 1998) (See the appendix for IELTS banding
system)
Format of IELTS Academic Reading Module Test

In this test, a variety of question types is used including multiple choice, short-answer
questions, sentence completion, notes/summary/diagram/flow chart/table completion,
identification of writer's views/attitudes/claims, labeling a diagram, choosing suitable
paragraph headings from a list, yes/no/not given or true/false/not given, classification,
matching lists/phrases.
In the following section, samples of a number of these question types will be shown with
explanations of their purposes.
Multiple Choices:
Multiple choice items may take different forms in different tests and for different purposes. For
IELTS, this type of questions is usually used to test a number of reading skills including
skimming, scanning and intensive reading.
Examples of Multiple Choice Questions:
Example 17:
5
https://www.teachers.cambridgeesol.org/ts/exams/academicenglish/ielts/academicreading
6
British Council, Saudi Arabia 2011, ( handout )
7
Cambridge IELTS3, 2005, p46 (test2)

Choose the appropriate letters A,B, C or D and write them in boxes 23-27 on your answer
sheet.
By the mid-1980s, farmers in Denmark
A) used 50 percent less fertilizer than Dutch farmers
B) used twice as much fertilizer as they had in 1960.
C) applied fertilizer much more frequently than in 1960.
D) more than doubled the amount of pesticide they used in just 3 years.
It is clear from this example that students need to quickly scan the text first to identify the
appropriate paragraph that includes the specific information regarding mid-1980s before they
read comprehensively to find the most suitable answer from the options.
Example 28:
According to the text which THREE of the following conditions have been scientifically proved
to have a psychological effect on humans?
Choose THREE letters A – G and write them in boxes 35 – 37 on your answer sheet.
A) lack of negative ions
B) rainy weather
C) food consumption
D) high serotonin levels
E) sunny weather
F) freedom from worry
G) lack of counseling facilities
This question needs a detailed understanding of the passage to see how the meaning has been
paraphrased from the original text and to be able to eliminate incorrect options. However,
scanning and making inferences are likely the skills needed to find the correct answers in this
case.
Example 39: (making inferences)
Choose the appropriate letters A- D and write them in boxes 15 – 17 on your answer sheet.
17 According to the information in the text, intake of nicotine encourages A)
blood circulation through the body.
B) activity of other toxins in the blood.
C) formation of blood clots.
D) an increase of platelets in the blood.
This question type is also designed to test candidates’ ability to infer and deduce the meaning
of what they read especially when the statements used in the question are not directly stated in
the text. (Jakeman & McDowell, 2001:55). In this case, candidates need to look at the key
8
9

words in the question and then read quickly through the text to determine the paragraph that
relate to it, they must then read carefully to understand the meaning of the sentences or opinions
given in the question by referring to the original text.
Short-answer Questions:
This type of questions is typically related to factual information and intended to test candidates’
ability to extract particular information and details from the text in order to answer the
questions. Candidates are required to write down their answers using words from the passage
in the spaces provided. The instruction usually determines the number of words to be written
which can vary from ONE WORD to no more than THREE in each space, in some cases a
number or figure could be used as well.
The following are examples of the most common types of the short-answer questions used in
IELTS’ tests.
Example110:
Choose ONE OR TWO WORDS from Reading Passage 3 for each answer.
Write your answers in boxes 36-39 on your answer sheet.
36) A new headmaster of a school who enlarges his office and puts in expensive carpeting
is using the office as …..
37) The graduation ceremony in many universities is an important ….
38) The wig which judges wear in UK courts is a …
39) The parents of students in a school are part of the headmaster’s ….
Example 211:
Complete the table below.

Choose NO MORE THAN THREE WORDS OR A NUMBER from Reading Passage 1 for each
answer.
Write your answers in boxes 9-13 on your answer sheet
Spices Size Preferred Complementary Start of Number of
climate spices active generations
period per year
French 2.5cm Cool Spanish late spring 1-2
Spanish 1.25cm 9 10 11
South African 12 13
ball roller
The above examples show that these questions are intended to test a candidate’s ability to find
the right information and necessary details in texts using a number of skills such as skimming,
scanning and reading carefully (Weir, 1993). In this case, candidates must first specify the key
words in the questions and then scan the text to determine where these words are mentioned
10
Adopted from: Cambridge IELTS3, 2005, p50 (test2
11
Adopted from: Cambridge IELTS3, 2005, p41 (test2)

and finally to read the appropriate section carefully to back up their answers (British Council,
Riyadh 2011) .
Summarizing (gap filling)

This type of test is used to evaluate candidates’ ability to understand the main ideas in a
passage as it is designed in a way that it summarizes and covers the most important ideas
presented over a wide area of the text (Jakeman & McDowell, 2001:46, Hughes, 2003). In
this type of task, the main points are normally paraphrased, in other words, they are not
exactly the same as they appear in the original text (Jakeman & McDowell, 2001) and
therefore candidates need to use their global reading skills such as skimming and scanning as
well as making inferences in order to be able to locate the places in the text that related to the
summary and then choose the right words to fill the gaps.
Example *:

*(Adopted from: Jakeman, V & McDowell, C, 2001, Insight into IELTS) Labeling
a Diagram:
This question type is intended to assess candidates’ ability to extract specific information from
the text in order to label the diagram, therefore, candidates need to scan the text to determine
the area that describes the machine and then read for details. (Jakeman & McDowell, 2001:35)
Example12:
Questions 6 – 8
Label the tunnels on the diagram below using words from the box. Write
your answers in boxes 6-8 on your answer sheet.
(Adopted from: http://www.ielts.org/) *2011*
Choosing Headings for Paragraphs or Sections of a Text:

This question type is intended to test a number of reading skills. Candidates first need to
understand the main idea of the provided headings before they skim the passage to grasp the
main idea of the text, they must then read carefully through each paragraph again and select
the appropriate heading for each paragraph (British Council, Riyadh 2011).
Example13:
Reading Passage 3 has sex sections A-F

Choose the correct heading for sections A-E from the list of heading below. Write
the correct numbers i-x in boxes 28-32 on your answer sheet.
12
http://www.ielts.org/
13
( Adopted from: IELTS: Specimen Materials 2003: p18)

28 Section A
List of Headings
29 Section B i Contrary indications ii Europe’s Alpine
30 Section C glaciers iii Growing consensus on seal
31 Section D level iv Ice cap observation v Causes of
32 Section E rising sea levels vi Panel on Climate
Change vii Sea level monitoring
difficulties viii Group response to alarming
predictions ix Stockholm and
Scandinavia x The world 130,000 years
ago
Identification of Writer’s Views/Claims or Information in a Text
This type of question is usually used to test candidates’ ability to identify a writer’s opinions
and attitudes as stated in the text (Jakeman & McDowell, 2001:54) also to recognize a number
of specific points included in the passage 14 . It should be noted, however, that this type of
question is typically used with argumentative texts as they include a variety of arguments on
specific topics.
Example15:
Do the following statements reflect the opinions of the writer in Reading Passage3?
In boxes 36 -38 on your answer sheet write:
Yes if the statement reflects the opinion of the writer
No if the statement contradicts the opinion of the writer
Not given if it is impossible to say what the writer thinks about it 20
Popper says that the scientific method is hypothetic-deductive.
21 If a prediction based on hypothesis is fulfilled, then the hypothesis is confirmed as true.
22 Many people carry out research in a mistaken way.
23 The ‘scientific method’ is more a way of describing research than a way of doing it.
Matching
This question type is designed to test candidates’ ability to correctly recognize and understand
the relationship between the items in a text. Candidates need to be able to scan the passage with
the purpose of finding the appropriate information and then to read for details.
Example16:
Some of the exhibits at the Department of Ethnography are listed below (Questions
7 – 12).
The writer gives these exhibits as examples of different collection types.
Match each exhibit with the collection type with which it is associated in Reading Passage 1.
14
https://www.teachers.cambridgeesol.org/ts/exams/academicenglish/ielts/academicreading
15
McDowell & Jakeman, (2001:139) Insight into IELTS
16
Adopted from: Cambridge IELTS3, 2005, p63 (test3)

Write the appropriate letters in boxes 7-12 on your answer sheet. NB
You may use any collection type more than once.
Collection Types
AT Artefact Types
EC Evolution of Ceremony
FA Field Assemblages
SE Social Experience
TS Technical Series
Example
Answer Boats
AT
7 Bolivian textiles
8 Indian coracles
9 airport art
10 Artic Kayaks
11 necessities of life of an Arabian farmer
12 tents from the Middle East Test validity: Weir, (1993:19) states “…a test should test
what the writer wants it to test. It should be valid”. Therefore, by looking at the type of
questions used in this test, it is clear that they coincide with the purpose of the test which is
to measure a candidate’s proficiency in reading comprehension. The questions have been
carefully designed so that the basic reading skills, which include skimming, scanning and
intensive reading, can be assessed. However, it is worth mentioning, here, that there is a
research and validation group for IELTS which is responsible for monitoring test
performances and conducting research to investigate test materials and also to estimate and
report on test reliability. As a result, new versions of IELTS modules are released for use by
IELTS candidates in all centers every year.17 Test reliability:
Hughes, (2003: 50) claims “…to be valid a test must provide consistently accurate
measurements. It must be therefore, reliable.” According to the 2014 IELTS Annual Review,
the reliability of the reading test is measured using Cronbach’s alpha for internal consistency
of the 40-items used in the test, this indicates that “…the scores achieve acceptable levels of
reliability” at 0.90.18 (See table 1 below)
Table 1. IELTS test reliability by component (2014)

Component Reliability
Listening 0.91
Academic Reading 0.90
(Quoted from: http://www.ielts.org ) *2014*
17
http://www.cambridgeesol.org/rs_notes/rs_nts10.pdf
18
https://www.ielts.org/teaching-and-research/test-performance-2014

RECOMMENDATIONS FOR IMPROVING THE IELTS SCORING VALIDITY
A serious weakness with this test is that it considers the errors of spelling and grammar as
incorrect. Hughes, (2003:33), argues that if a reading test calls for short written answers and
the scoring of these answers “…takes into account spelling and grammar, then it is not valid”.
Hughes also says that as the reading test is meant to assess reading ability, measuring more
than one ability may make “the measurement of the one ability in question less accurate”. This
view is supported by Urquhart & Weir (1998:152) as cited in Fillmore & Kay (1983) who point
out that in a reading test, skills which are not directly “... related to reading should not be
tested”. Moreover, Bachman, (1990) writes “…in order for a test score to be a meaningful
indicator of a particular individual’s ability, we must be sure it measures that ability…”
and “... if test scores are strongly affected by factors other than the ability being tested… they
will not be meaningful, and cannot, therefore, provide the basis for valid interpretation”.
Another problem with IELTS Academic Reading test is that it is very strict in terms of
considering the number of written words required for short answer questions. That is,
candidates are penalized if they exceed the number of words required and lose the whole mark
even if the answer includes the correct words. For example: “…if a question specifies an answer
using NO MORE THAN THREE WORDS and the correct answer is ‘black leather coat’ the
answer ‘coat of black leather’ is incorrect” (IELTS: Information for candidates, 2011) . These
strict rules may affect the validly of the test scores; therefore, a range of semantically acceptable
answers should be allowed when marking such questions (Weir, 1993).
It may be the case, therefore, that the strictness of IELTS marking rules could be a major factor
affecting the reliability of candidates’ performances and final scores. However, more research
on these issues need to be undertaken to improve the test scoring system in order to be more
consistent with the purpose of the test which must be focused on assessing how well candidates
use their reading skills to comprehend what they read regardless of any other considerations.
CONCLUSION
This paper has conducted a detailed evaluation of the IELTS Academic Reading Module Test;
the purpose, operation, conditions and the test format have been discussed. It can be concluded
that, although the module is regarded as one of the most reliable tools used to assess candidates’
reading abilities (Charge & Taylor, 1997 ) in that it considers the necessary academic reading
skills that university students are likely to perform, (Buell, 1992) the test scoring rules which
appear to be very strict regarding spelling, grammar and the number of words required for
written responses, need to be revised in order to improve the test scoring validly in the light of
its proposed purpose.
REFERENCES
Bachman, L (1990) Fundamental considerations in language testing, Oxford University Press:
Oxford p 25
British Council, (2011), Preparation for IELTS pre-course materials, (Handout), Saudi Arabia

Buell, J, (1992) TOEFL and IELTS as Measures of Academic Reading Ability: An
Exploratory Study. Paper presented at the Annual Meeting of the Teachers of English to
Speakers of Other Languages (26th, Vancouver, Canada, March 4-7, 1992)
Cambridge IELTS3 (2005), Examination papers from the University of Cambridge Local
Examinations Syndicate, Cambridge: Cambridge University Press
Charge, N & Taylor, L (1997), Recent developments in IELTS, ELT Journal V. 51/4, Oxford
University Press, UK
Clapham, C (1996), The development of IELTS: a study of the effect of background
knowledge on reading comprehension, Cambridge : Cambridge University Press
Grape, W & Stoller, F (2002), Teaching and Researching Reading, Longman, Pearson
Education Limited
Grellet, F(1986), Developing Reading Skills: A practical guide to reading comprehension
exercises, Cambridge University Press
Hughes (2003), Testing for Language Teachers, Cambridge: Cambridge University Press, p
137
IELTS Handbook (2011), British Council, IDP: IELTS Australia, University of Cambridge
ESOL Examinations
IELTS: Information for candidates, Handbook, (2011), British Council, IDP: IELTS Australia,
University of Cambridge ESOL Examinations
Jakeman, V & McDowell, C (2001), Insight into IELTS: Cambridge IELTS Course, Cambridge
University Press
Lillely, A, (2005) Testing Reading Comprehension, Lecture notes, Department of Language
and Linguistics, University of Essex, UK
McNamara, T. (2000). Language Testing, Oxford: Oxford University Press.
Tennent, G (1998 ), Myths of Testing and the Icons of PET, TOEFL and IELTS, United
Arab Emirates University in Coombe, C (1998),Current Trends in English Language
Testing, Conference Proceedings for CTELT 1997 and 1998, Vol.1 , TESOL Arabia,
Collected works- proceedings (021) , Al-Ain , United Arab Emirates
Urquhart, A & Weir, C (1998), Reading in a Second Language: Process, Product and
Practice, London: Longman, p145
Weir, C (1993), Understanding and developing language tests, Prentice Hall, New York
Weir, C. (2005). Language Testing and Validation: an Evidence Based Approach, Oxford:
Palgrave
< http://www.cambridgeesol.org/exams/ielts/index.html#acrd > accessed 28.12.2015
< https://www.ielts.org/teaching-and-research/test-performance-2014 > accessed 30.1.2016
<http://www.cambridgeesol.org/rs_notes/rs_nts10.pdf> accessed 20.12.2015
<http://www.ielts.org/> accessed 23.1.2016
<https://www.teachers.cambridgeesol.org/ts/exams/academicenglish/ielts/academicreading>
accessed 15.11.2015


Vol.4, No.2, pp.26-37, April 2016 ___ Diterbitkan oleh Pusat Pelatihan dan Pengembangan
Penelitian UK Inggris ( www.eajournals. Org )
UJI MODUL PEMBACAAN AKADEMIK IELTS: VALIDITAS DAN KEANDALAN
Marzook Maazi Alshammari
Sekolah Tinggi Pariwisata dan Perhotelan, Madinah - Arab Saudi
ABSTRAK: Pengujian pemahaman membaca nampak sederhana jika dibandingkan dengan

pengujian kemampuan lain. Masalah dasar adalah bahwa penguji bahasa diharapkan untuk
menetapkan tugas-tugas yang tidak hanya akan mengarahkan kandidat untuk menggunakan
keterampilan membaca tetapi juga akan menghasilkan perilaku yang memberikan bukti yang
jelas tentang keberhasilan penggunaan keterampilan tersebut. Makalah ini bertujuan untuk
mengevaluasi Tes Modul Membaca Akademik IELTS secara terperinci, memeriksa validitas
dan reliabilitasnya dan membahas sejauh mana format, operasi, kondisi , dan tekniknya
memenuhi tujuannya. Makalah ini berfokus terutama pada aturan penilaian tes, yang
tampaknya ketat dalam hal ejaan, tata bahasa, dan jumlah kata yang diperlukan untuk
tanggapan tertulis. Ini diakhiri dengan beberapa rekomendasi tentang cara-cara di wyang
validitas dan reliabilitas aturan penilaian membaca IELTS dapat ditingkatkan.
KATA KUNCI: Tes Modul Membaca Akademik, Format, Operasi, Ketentuan
Validitas, Keandalan, Aturan Penilaian, Evaluasi.
PENGANTAR
Dalam dekade terakhir, masalah pengujian pemahaman membaca telah terjadi dalam
perdebatan antara guru bahasa tentang ketidakpercayaan kualitas tes yang tampaknya memiliki
efek negatif pada kegiatan belajar mengajar bahasa (Hughes, 2003). Masalah ini menjadi
semakin penting mengingat diskusi baru-baru ini tentang konten dan teknik tes membaca untuk
menghasilkan alat pengukuran yang dapat memberikan refleksi akurat kemampuan siswa untuk
mengekstraksi ide-ide utama dari teks bacaan (Weir, 2005). Dalam analisisnya, Hughes (2003)
mengklaim bahwa dalam menguji membaca, penguji perlu memperhitungkan keterampilan
yang terlibat dalam proses membaca dan yang sesuai dengan tujuan tes.
Selain itu, proses mendesain tes membaca yang baik membutuhkan pemahaman yang jelas
tentang validitas dan reliabilitas format tes. Tes ini dikatakan memiliki validitas konten jika
mengukur dengan tepat apa yang ingin diukur pada siswa. Namun, tes ini dapat diandalkan
jika memberikan hasil yang konsisten untuk kinerja yang sama ((McNamara, 2000, Lillely,
2005)

Makalah ini secara kritis mencoba untuk memberikan evaluasi terperinci dari bagian Bacaan
Akademik dari Sistem Pengujian Bahasa Inggris Internasional (IELTS). Secara khusus,
ini membahas kerangka uji, format, validitas dan reliabilitas.
Sifat tes IELTS
IELTS secara luas digunakan untuk menilai tingkat kemahiran bahasa kandidat yang ingin
belajar atau melatih di mana bahasa Inggris adalah media komunikasi (Clapham, 1 996, Charge
& Taylor,
1997, dan IELTS: Informasi untuk kandidat, 2011). IELTS 'dimiliki' dan dikelola oleh tiga
asosiasi, The British Council, The University of Cambridge Syndicate Examinations, dan IDP
Education Australia: IELTS Australia ( Camb ridge IELTS3, 2005: 1). Tes terdiri dari empat
modul: yaitu - mendengarkan, membaca, menulis, dan berbicara. Namun, sementara semua
kandidat mengambil modul mendengar dan berbicara yang sama, modul membaca dan menulis
tersedia dalam dua format: Modul Akademik dan Modul Pelatihan Umum. (Mengisi &, Taylor
1997). Modul Membaca dan Menulis Akademik ditentukan untuk menilai tingkat kemahiran
bahasa Inggris dari mereka yang ingin bergabung dengan universitas atau perguruan tinggi
menengah bahasa Inggris di tingkat sarjana atau pasca sarjana. (Clapham, 1996, IELTS:
Informasi untuk kandidat, 2011)
Namun, tujuan khusus Modul Membaca Akademik adalah untuk menguji kemampuan
membaca para kandidat yang membaca tiga bagian yang dinilai sulit untuk menjawab total 40
pertanyaan dalam waktu yang relatif singkat. (Jakeman & McDowell, 2001: 28).
Kerangka tes Membaca Akademik di IELTS
Operasi - Mengingat jenis teks yang digunakan dan pertanyaan yang diajukan dalam modul
ini, para kandidat tampaknya diharapkan untuk melakukan sejumlah operasi; ini dapat dibagi
menjadi dua jenis: ekspedisi dan operasi membaca yang cermat.
Operasi membaca ekspedisi
Skimming : untuk tes ini para kandidat perlu dengan cepat mensurvei teks untuk mendapatkan
pemahaman umum tentang ide-ide utama dan kemudian mengidentifikasi paragraf yang sesuai
yang harus dibaca lebih hati-hati untuk menjawab pertanyaan spesifik.
Pemindaian: tes ini mencakup pertanyaan-pertanyaan di mana para kandidat diharapkan
menggunakan keterampilan mereka untuk memindai bagian tersebut untuk
menemukan informasi spesifik , yaitu nama tempat, kata atau frasa tertentu, angka, persentase
atau tanggal. (Hughes (2003: 138).
Operasi membaca yang cermat:
Membedakan fakta dari pendapat dan mengenali sikap penulis: tes IELTS mencakup
teks yang sepenuhnya faktual dan yang lainnya yang mencakup argumen atau pendapat. Calon
diuji pada kemampuan mereka untuk membedakan dan memahami poin-poin ini dari
teks. (Jakeman & McDowell, 2001).
Memahami informasi yang disimpulkan: beberapa pertanyaan dapat dalam pernyataan
clude yang diparafrasekan secara berbeda dari teks aslinya. Calon diharapkan untuk
menyimpulkan arti dari frasa ini untuk sampai pada jawaban yang tepat. (Jakeman &
McDowell, 2001).

Inferensikan makna kata-kata yang tidak diketahui dari konteks: karena teks
menyertakan sejumlah kata yang tidak dikenal, para kandidat diharapkan untuk menggunakan
berbagai strategi untuk mengidentifikasi makna kata-kata yang tidak dikenal; yaitu " inferensi
melalui konteks, atau pembentukan kata" (Grellet, 1986: 12).
Kondisi
Tujuan membaca e : Tujuan utama membaca dalam situasi ujian adalah untuk mendapatkan
informasi yang relevan yang diperlukan untuk menjawab pertanyaan-pertanyaan dalam
ujian. Namun, dalam situasi tes IELTS, tampak bahwa teks-teks yang dipilih membahas topik-
topik yang terkait dengan penggunaan kandidat di masa mendatang dan relevan dengan latar
belakang pengetahuan mereka. Ini dapat membantu para kandidat untuk menangani teks-teks
yang diberikan dengan lebih baik. (Weir, 1993: 66)
Sifat teks
Jenis teks - Teks IELTS Academic Reading termasuk artikel dan laporan yang diambil dari
berbagai sumber otentik seperti koran, majalah, buku, dan jurnal.[1] Seperti yang disebutkan
sebelumnya, teks-teks yang dipilih membahas sejumlah topik yang terkait dengan situasi target
bahasa dan relevan dengan kandidat dari berbagai bidang. Topik umum yang biasanya muncul
dalam IELTS dapat mencakup pendidikan, ilmu sosial atau masalah , lingkungan, teknologi,
masalah politik, serta ilmu kehidupan dan kesehatan. (Clapham, 1996: 62, British Council,
2011)
Struktur organisasi - Karena tes Membaca Akademik IELTS diperuntukkan bagi siswa
dengan tingkat kemahiran tinggi, teks dipilih dengan hati-hati dari serangkaian teks yang
disusun dengan baik yang digunakan untuk menguji berbagai keterampilan membaca. Teks
biasanya dibagi menjadi 3 bagian, yaitu pengantar, badan utama teks, kesimpulan, sehingga
kandidat dapat mengikuti teks dengan mudah. (British Coun cil, Riyadh 2011) Bagian-bagian
yang dipilih ditulis dalam sejumlah gaya yang sesuai dengan tujuan tes yaitu naratif,
argumentatif, dan deskripsi proses. (Jakeman & McDowell, 2001: 28) (Lihat lampiran)
Fitur proposisional - Teks yang digunakan dalam tes ini tidak dimaksudkan untuk spesialis,
mereka berurusan dengan berbagai masalah umum yang dianggap sesuai dengan latar belakang
pengetahuan kandidat tingkat pascasarjana atau sarjana yang ingin mengambil kursus
universitas berbahasa Inggris.[2] Namun demikian, adalah umum untuk menemukan sejumlah
item leksikal yang tidak diketahui di dalam teks-teks ini bervariasi dari kosakata teknis dan
sub-teknis hingga item lain yang mungkin belum pernah ditemukan oleh para kandidat. Namun,
teks-teks yang memasukkan istilah-istilah teknis selalu disertai dengan daftar istilah-istilah
yang dianggap asing bagi para kandidat (IELTS: informasi untuk para kandidat, 2011).
Panjang - Hughes, (2003) percaya bahwa panjang pas yang tepat digunakan untuk menguji
membaca cepat harus rata-rata sekitar 2000 kata atau lebih, pada kenyataannya, 3 bagian
berkisar dari 2.150 hingga 2.750 kata.[3] Angka ini dianggap memadai untuk menguji
keterampilan seperti membaca cepat di mana pembaca harus melalui bagian-bagian yang
panjang untuk mendapatkan inti dari ide-ide utama atau untuk menemukan informasi spesifik.
Saluran - Meninjau sejumlah tes sampel IELTS mengungkapkan bahwa setidaknya satu
bagian dalam setiap tes dapat berisi materi non-verbal, yaitu gambar, diagram, grafik, grafik,
dan / atau ilustrasi. Beberapa ilustrasi digunakan di dalam bagian itu dan yang lain menyertai

tugas-tugas untuk mengklarifikasi pertanyaan atau digunakan sebagai bagian dari pertanyaan
seperti dalam kasus tugas penyelesaian diagram. Urquhart & Weir, (1998: 145) menarik
perhatian pada pentingnya menggunakan diagram untuk menyampaikan informasi khususnya
dalam kasus teks sains.
Waktu yang tersedia - Modul membaca IELTS memungkinkan 60 menit untuk menjawab 40
pertanyaan berdasarkan tiga bagian bacaan; siswa disarankan untuk menghabiskan 20 menit
pada setiap bagian dan diminta untuk menuliskan jawaban mereka pada lembar jawaban selama
waktu ini karena mereka tidak diberi waktu ekstra untuk mentransfer jawaban
mereka.[4] Karena tes ini mencakup pengujian kemampuan membaca cepat, waktu yang
tersedia tampaknya sesuai, karena siswa tidak diharapkan membaca setiap kata dalam
teks. (Hughes, 2003: 141). Dalam hubungan ini, Weir, (1993: 68) mengklaim "... jika terlalu
banyak waktu diberikan kandidat dapat membaca secara intensif, dan pertanyaan yang
dirancang untuk menguji kemampuan untuk memproses teks dengan cepat untuk memperoleh
informasi yang ditentukan mungkin tidak lagi mengaktifkan operasi seperti itu".
Bantuan - Semua instruksi ditulis dengan jelas dalam bahasa target (Bahasa Inggris) dan
dicatat bahwa pertanyaan dapat muncul sebelum atau setelah petikan. Calon tidak diizinkan
menggunakan kamus selama tes. Sebaliknya, jika teks berisi kata-kata teknis glosarium
tersedia (IELTS: Informasi untuk kandidat, 2011).
Metode faktor / mode respons - Calon sudah terbiasa dengan jenis tugas dan fitur lingkungan
(prosedur dan kondisi) dalam tes ini karena tes sampel tersedia bagi kandidat untuk berlatih
terlebih dahulu. Meskipun demikian, para kandidat tidak diperbolehkan untuk menulis jawaban
mereka menggunakan bahasa ibu mereka. Pertanyaan dalam tes ini disajikan dalam urutan
yang sama di mana informasi muncul dalam teks. Nilai tersebut didistribusikan dengan dasar
bahwa setiap item bernilai satu nilai[5] tetapi kandidat dihukum karena kesalahan ejaan dan
tata bahasa dan juga jika mereka melebihi jumlah kata yang dibutuhkan oleh
pertanyaan[6] (British Council- 2011).
L Evel kinerja
Karena IELTS bukan tes gagal atau lulus dan dimaksudkan untuk mengukur tingkat kemahiran
kandidat, ia menggunakan sistem pita 9.0; persyaratan universitas adalah 6 plus tergantung
pada program kandidat yang ingin mengejar. (Tennent, 1998) (Lihat lampiran untuk sistem
banding IELTS)
Format Tes Modul Membaca Akademik IELTS
Dalam tes ini, berbagai jenis pertanyaan digunakan termasuk pilihan ganda, pertanyaan
jawaban singkat, penyelesaian kalimat, catatan / ringkasan / diagram / diagram alir / tabl e
penyelesaian, identifikasi pandangan / sikap / klaim penulis, label diagram, memilih judul
paragraf yang sesuai dari daftar, ya / tidak / tidak diberikan atau benar / salah / tidak diberikan,
klasifikasi, daftar / frasa yang cocok.
Di bagian berikut, sampel sejumlah jenis pertanyaan ini akan ditampilkan dengan penjelasan
tentang tujuannya.
Pilihan Ganda :
Item pilihan ganda dapat mengambil bentuk yang berbeda dalam tes yang berbeda dan untuk
tujuan yang berbeda. Untuk IELTS, jenis pertanyaan ini biasanya digunakan untuk

menguji sejumlah keterampilan membaca termasuk membaca sepintas, memindai, dan
membaca intensif.
Contoh Pertanyaan Pilihan Ganda:
Contoh 1[7] :
Pilih huruf A, B, C atau D yang sesuai dan tuliskan dalam kotak 23-27 pada lembar jawaban
Anda.
Pada pertengahan 1980-an, petani di Denmark
A) menggunakan pupuk 50 persen lebih sedikit daripada petani Belanda
B) menggunakan pupuk dua kali lebih banyak dari yang mereka miliki pada tahun 1960.
C) menggunakan pupuk jauh lebih sering daripada pada tahun 1960.
D) lebih dari dua kali lipat jumlah pestisida yang mereka gunakan hanya dalam 3 tahun.
Jelas dari contoh ini bahwa siswa perlu dengan cepat memindai teks terlebih dahulu untuk
mengidentifikasi paragraf yang sesuai yang mencakup informasi spesifik
mengenai pertengahan 1980-an sebelum mereka membaca secara komprehensif untuk
menemukan jawaban yang paling cocok dari pilihan .
Contoh 2[8] :
Menurut teks manakah TIGA dari kondisi berikut telah dibuktikan secara ilmiah memiliki efek
psikologis pada manusia?
Pilih TIGA huruf A - G dan tuliskan dalam kotak 35 - 37 pada lembar jawaban Anda.
A) kurangnya ion negatif
B) cuaca hujan
C) konsumsi makanan
D) kadar serotonin tinggi
E) cuaca cerah
F) bebas dari rasa khawatir
G) kurangnya fasilitas konseling
Pertanyaan ini membutuhkan pemahaman terperinci dari bagian ini untuk melihat bagaimana
makna telah diparafrasekan dari teks aslinya dan untuk dapat menghilangkan pilihan yang
salah. Namun, memindai dan membuat kesimpulan kemungkinan keterampilan yang
dibutuhkan untuk menemukan jawaban yang benar dalam kasus ini.
Contoh 3[9] : (membuat kesimpulan)
Pilih huruf A-D yang sesuai dan tuliskan dalam kotak 15 - 17 pada lembar jawaban Anda.
17 Menurut informasi dalam teks, asupan nikotin mendorong A) melancarkan
peredaran darah ke seluruh tubuh.
B) aktivitas racun lain dalam darah.
C) pembentukan gumpalan darah.
D) peningkatan trombosit dalam darah.

Ini jenis pertanyaan juga dirancang untuk menguji kemampuan kandidat untuk menyimpulkan
dan menyimpulkan makna dari apa yang mereka baca terutama ketika laporan digunakan dalam
pertanyaan tidak dinyatakan secara langsung dalam teks. (Jakeman & McDowell, 2001:
55). Dalam hal ini, para calon harus melihat kata-kata kunci dalam pertanyaan dan kemudian
membaca dengan cepat melalui teks untuk menentukan paragraf yang berhubungan dengannya,
mereka kemudian harus membaca dengan seksama untuk memahami makna kalimat atau
pendapat yang diberikan dalam pertanyaan. dengan merujuk ke teks asli.
Pertanyaan jawaban singkat:
Jenis pertanyaan ini biasanya terkait dengan informasi faktual dan dimaksudkan untuk menguji
kemampuan kandidat untuk mengekstraksi informasi dan detail tertentu dari teks untuk
menjawab pertanyaan. Calon diminta untuk menuliskan jawaban mereka menggunakan kata-
kata dari bagian di ruang yang disediakan. Instruksi biasanya menentukan jumlah kata yang
akan ditulis yang dapat bervariasi dari SATU KATA untuk tidak lebih dari TIGA di setiap
ruang, dalam beberapa kasus sejumlah atau angka dapat digunakan juga.
Berikut ini adalah contoh dari jenis pertanyaan jawaban singkat yang paling umum digunakan
dalam tes IELTS.
Contoh 1[10] :
Pilih SATU ATAU DUA KATA dari Reading Passage 3 untuk setiap jawaban.
Tulis jawaban Anda di kotak 36-39 pada lembar jawaban Anda.
36) Seorang kepala sekolah baru dari sebuah sekolah yang memperbesar kantornya dan
meletakkannya di karpet mahal menggunakan kantor sebagai ... ..
37) Upacara kelulusan di banyak universitas adalah penting ....
38) Wig yang dikenakan oleh para hakim di pengadilan Inggris adalah ...
39) Orang tua siswa di sekolah adalah bagian dari kepala sekolah….
Contoh 2[11] :
Lengkapi tabel di bawah ini.
Pilih TIDAK LEBIH DARI TIGA KATA ATAU NOMOR dari Bacaan Bagian 1 untuk setiap
jawaban.
Tulis jawaban Anda di kotak 9-13 di lembar jawaban Anda
Rempah-rempah Ukuran Iklim yang Rempah- Mulai Jumlah
disukai rempah periode aktif generasi per
pelengkap tahun
Perancis 2,5 cm Keren Spanyol akhir 1-2
musim semi
Spanyol 1,25 cm 9 10 11
Roller bola 12 13
Afrika Selatan
Contoh di atas menunjukkan bahwa pertanyaan-pertanyaan ini dimaksudkan untuk menguji

kemampuan kandidat untuk menemukan informasi yang tepat dan rincian yang diperlukan
dalam teks menggunakan sejumlah keterampilan seperti membaca sekilas, memindai, dan
membaca dengan cermat (Weir, 1993). Dalam hal ini, para calon harus terlebih

dahulu memisahkan kata-kata kunci dalam pertanyaan dan kemudian memindai teks untuk
menentukan di mana kata-kata ini disebutkan dan akhirnya membaca bagian yang sesuai
dengan hati-hati untuk mendukung jawaban mereka (British Council, Riyadh 2011).
Meringkas (mengisi celah)
Jenis tes ini digunakan untuk mengevaluasi kemampuan kandidat untuk memahami ide-ide
utama dalam suatu bagian karena dirancang sedemikian rupa sehingga meringkas dan
mencakup ide-ide paling penting yang disajikan pada area teks yang luas (Jakeman &
McDowell, 2001: 46, Hughes, 2003). Dalam jenis tugas ini, poin utama biasanya
diparafrasekan, dengan kata lain, mereka tidak persis sama dengan yang muncul dalam teks
asli (Jakeman & McDowell, 2001) dan oleh karena itu kandidat harus menggunakan
keterampilan membaca global mereka seperti membaca skimming dan memindai serta
membuat kesimpulan agar dapat menemukan tempat dalam teks yang terkait dengan
ringkasan dan kemudian memilih kata-kata yang tepat untuk mengisi kesenjangan.
Contoh *:

* (Diadopsi dari: Jakeman, V & McDowell, C, 2001, Insight into IELTS) Memberi
Label Diagram:
Jenis pertanyaan ini dimaksudkan untuk menilai kemampuan kandidat untuk mengekstraksi
informasi spesifik dari teks untuk memberi label pada diagram, oleh karena itu, kandidat
perlu memindai teks untuk menentukan area yang menggambarkan mesin dan kemudian
membaca untuk detailnya. (Jakeman & McDowell, 2001: 35) Contoh[12] :
Pertanyaan 6 - 8
Beri label terowongan pada diagram di bawah ini menggunakan kata-
kata dari kotak. Tulis jawaban Anda di kotak 6-8 pada lembar jawaban
Anda.
(Diadopsi dari: http://www.ielts.org/ ) * 2011 *

Memilih Judul untuk Paragraf atau Bagian dari Teks:
Jenis pertanyaan ini dimaksudkan untuk menguji sejumlah keterampilan membaca. Calon
pertama perlu memahami gagasan utama dari judul yang disediakan sebelum mereka membaca
sepintas lalu untuk memahami gagasan utama teks, mereka kemudian harus membaca dengan
cermat setiap paragraf aph lagi dan memilih judul yang sesuai untuk setiap paragraf (British
Council, Riyadh 2011 ).
Contoh[13] :
Bagian Bacaan 3 memiliki bagian seks AF
Pilih judul yang benar untuk bagian AE dari daftar judul di bawah ini. Tulis angka
yang benar ix di kotak 28-32 pada lembar jawaban Anda.

Daftar Judul
i Indikasi yang bertentangan ii Gletser
Alpine Eropa iii Tumbuh konsensus pada
tingkat meterai iv Pengamatan tutupan es
v Penyebab kenaikan permukaan laut vi
Panel tentang Perubahan Iklim
vii Kesulitan cincin monito permukaan
laut viii Respons kelompok terhadap
prediksi yang mengkhawatirkan ix
Stockholm dan Skandinavia x Dunia
130.000 tahun yang lalu
28 Bagian A
29 Bagian B
30 Bagian C
31 Bagian D
32 Bagian E
Identifikasi Pandangan / Klaim Penulis atau Informasi dalam Teks

Jenis pertanyaan ini biasanya digunakan untuk menguji kemampuan kandidat untuk
mengidentifikasi pendapat dan sikap penulis seperti yang dinyatakan dalam teks (Jakeman &
McDowell, 2001: 54) juga untuk mengenali sejumlah poin spesifik yang termasuk dalam
bagian ini.[14] . Namun perlu dicatat bahwa jenis pertanyaan ini biasanya digunakan dengan
teks-teks argumentatif karena mereka memasukkan berbagai argumen tentang topik-topik
tertentu.
Contoh[15] :
Apakah pernyataan berikut mencerminkan pendapat penulis dalam Reading Passage3?
Dalam kotak 36 -38 pada lembar jawaban Anda, tulis:
Ya jika pernyataan itu mencerminkan pendapat penulis
Tidak jika pernyataan tersebut bertentangan dengan pendapat penulis
Tidak diberikan jika tidak mungkin untuk mengatakan apa yang penulis
pikirkan tentangnya. 20 Popper mengatakan bahwa metode ilmiah
adalah hipotetis-deduktif.
21 Jika prediksi berdasarkan hipotesis terpenuhi, maka hipotesis dikonfirmasi sebagai
benar .
22 Banyak orang melakukan penelitian dengan cara yang salah.
23 'Metode ilmiah' lebih merupakan cara menggambarkan penelitian daripada cara
melakukannya.

Sesuai
Jenis pertanyaan ini dirancang untuk menguji kemampuan kandidat mengenali dan memahami
hubungan antara item-item dalam sebuah teks dengan benar. Calon harus dapat memindai
bagian dengan tujuan menemukan informasi yang sesuai dan kemudian membaca untuk
detailnya.
Contoh[16] :
Beberapa pameran di Departemen Etnografi tercantum di bawah ini (Pertanyaan 7
- 12).
Penulis memberikan pameran ini sebagai contoh dari berbagai jenis koleksi.
Cocokkan setiap pameran dengan jenis koleksi yang terkait dengan Bacaan Bagian 1.
Tulis huruf yang sesuai dalam kotak 7-12 di lembar jawaban
Anda. NB Anda dapat menggunakan jenis koleksi apa saja lebih dari
sekali.
Jenis Koleksi
AT A rtefact T ypes
EC E volution of C erution
FA F ield A ssemblage
SE S Ecial E xperience
TS T eknis S eries
Contoh
Jawab Perahu
AT
7 tekstil Bolivia
8 coracles India
9 seni bandara
10 Artic Kayak
11 kebutuhan hidup seorang petani Arab
12 tenda dari Tes Timur Tengah : Weir, (1993: 19) menyatakan “... sebuah tes harus
menguji apa yang penulis inginkan untuk diuji. Itu harus valid ”. Oleh karena itu, dengan
melihat jenis pertanyaan yang digunakan dalam tes ini, jelas bahwa mereka bertepatan
dengan tujuan dari tes ini yaitu untuk mengukur kemampuan kandidat dalam pemahaman
membaca. Pertanyaan-pertanyaan telah dirancang dengan cermat sehingga keterampilan
membaca dasar, yang meliputi membaca sepintas, pemindaian, dan membaca intensif, dapat
dinilai. Namun, perlu disebutkan, di sini, bahwa ada penelitian dan kelompok validasi untuk
IELTS yang bertanggung jawab untuk memantau kinerja tes dan melakukan penelitian untuk
menyelidiki bahan uji dan juga untuk memperkirakan dan melaporkan reliabilitas
tes. Sebagai hasilnya, versi baru modul IELTS dirilis untuk digunakan oleh kandidat IELTS
di semua pusat setiap tahun. [17] Uji reliabilitas:
Hughes, (2003: 50) mengklaim “... untuk menjadi valid suatu tes harus memberikan
pengukuran yang akurat secara konsisten. Oleh karena itu, harus dapat diandalkan. ”Menurut
Tinjauan Tahunan IELTS 2014, keandalan tes membaca diukur menggunakan alpha Cronbach

untuk konsistensi internal dari 40 item yang digunakan dalam tes, ini menunjukkan bahwa“…
skor mencapai level yang dapat diterima keandalan "pada 0,90.[18] (Lihat tabel 1 di bawah)
Tabel 1. Keandalan tes IELTS berdasarkan komponen (2014)
Komponen Keandalan
Mendengarkan 0,91
Bacaan Akademik 0,90
(Dikutip dari: http://www.ielts.org ) * 2014 *
REKOMENDASI UNTUK MENINGKATKAN VALIDITAS SKOR IELTS

Kelemahan serius dengan tes ini adalah bahwa ia menganggap kesalahan ejaan dan tata bahasa
sebagai salah. Hughes, (2003: 33), berpendapat bahwa jika tes membaca memerlukan jawaban
tertulis pendek dan skor jawaban ini "... memperhitungkan ejaan dan gram mar, maka itu tidak
valid". Hughes juga mengatakan bahwa karena tes membaca dimaksudkan untuk menilai
kemampuan membaca, mengukur lebih dari satu kemampuan dapat membuat "pengukuran satu
kemampuan yang dipertanyakan kurang akurat". Pandangan ini didukung oleh Urquhart &
Weir (19 98: 152) sebagaimana dikutip dalam Fillmore & Kay (1983) yang menunjukkan
bahwa dalam tes membaca, keterampilan yang tidak secara langsung "... terkait dengan
membaca tidak boleh diuji". Selain itu, Bachman, (1990) menulis "... agar skor tes menjadi
indikator yang bermakna dari kemampuan individu individu, kita harus yakin itu mengukur
kemampuan itu ..."
dan "... jika nilai tes sangat dipengaruhi oleh faktor-faktor selain dari kemampuan yang diuji ...
mereka tidak akan bermakna, dan oleh karena itu, tidak dapat memberikan dasar untuk
interpretasi yang valid ".
Masalah lain dengan tes Membaca Akademik IELTS adalah sangat ketat dalam hal
mempertimbangkan jumlah kata-kata tertulis yang diperlukan untuk pertanyaan jawaban
singkat. Yaitu, para kandidat akan dihukum jika mereka melebihi jumlah kata yang diperlukan
dan kehilangan seluruh nilai meskipun jawabannya termasuk kata-kata yang benar. Misalnya:
"... jika pertanyaan menentukan jawaban menggunakan TIDAK LEBIH DARI TIGA KATA
dan jawaban yang benar adalah 'mantel kulit hitam' jawaban 'mantel kulit hitam' salah"
(IELTS: Informasi untuk kandidat, 2011). Aturan ketat ini dapat memengaruhi nilai tes secara
valid; Oleh karena itu, serangkaian jawaban yang dapat diterima secara semantik harus
diizinkan ketika menandai pertanyaan semacam itu (Weir, 1993).
Karena itu, mungkin terjadi bahwa ketatnya aturan penandaan IELTS bisa menjadi faktor
utama yang mempengaruhi keandalan kinerja kandidat dan skor akhir. Namun, penelitian lebih
lanjut tentang masalah ini perlu dilakukan untuk meningkatkan sistem penilaian tes agar lebih
konsisten dengan tujuan tes yang harus difokuskan pada menilai seberapa baik kandidat
menggunakan keterampilan membaca mereka untuk memahami apa yang mereka baca terlepas
dari apa pun pertimbangan lain.
KESIMPULAN
Makalah ini telah melakukan evaluasi terperinci terhadap Tes Modul Bacaan Akademik
IELTS ; tujuan, operasi, kondisi dan format pengujian telah dibahas. Dapat disimpulkan bahwa,

meskipun modul dianggap sebagai salah satu alat yang paling dapat diandalkan yang digunakan
untuk menilai kemampuan membaca kandidat (Charge & Taylor, 1 997) dalam hal itu
mempertimbangkan keterampilan membaca akademik yang diperlukan bahwa siswa
cenderung melakukan, (Buell, 1992) aturan penilaian ujian yang tampaknya sangat ketat
mengenai pengejaan, tata bahasa dan jumlah kata yang diperlukan untuk espon tertulis , perlu
direvisi untuk meningkatkan skor penilaian secara sah mengingat tujuan yang diusulkan.
REFERENSI
Bachman, L (1990) Pertimbangan mendasar dalam pengujian bahasa, Oxford University Press:
Oxford hal 25
British Council, (2011 ), Persiapan untuk materi pra-kursus IELTS , (Handout), Arab Saudi
Buell, J, (1992) TOEFL dan IELTS sebagai Ukuran Kemampuan Membaca Akademik: Sebuah
Studi Eksplorasi. Makalah disajikan pada Pertemuan Tahunan Guru Bahasa Inggris untuk
Penutur La Lain nguages (26 th , Vancouver, Kanada, 4-07 Maret, 1992)
Cambridge IELTS3 (2005), makalah ujian dari University of Cambridge Syndicate Examinations
lokal, Cambridge: Cambridge University Press
Charge, N & Taylor, L (1997), Perkembangan terkini dalam IELT S, ELT Journal V. 51/4, Oxford
University Press, UK
Clapham, C (1996), Pengembangan IELTS: studi tentang pengaruh latar belakang pengetahuan
pada pemahaman membaca, Cambridge: Cambridge University Press
Grape, W & Stoller, F (2002), Pengajaran dan Meneliti Membaca, Longman , Pearson Education
Limited
Grellet, F (1986), Mengembangkan Keterampilan Membaca: Panduan praktis
untuk latihan pemahaman membaca , Cambridge University Press
Hughes (2003), Pengujian untuk Guru Bahasa , Cambridge: Cambridge University Press, hal 137
Buku Pegangan IELTS (2011), British Council, IDP: IELTS Australia, Ujian ESOL Universitas
Cambridge
IELTS: Informasi untuk kandidat, Buku Pegangan, (2011), British Council, IDP: IELTS Austra lia,
University of Cambridge ESOL Examinations
Jakeman, V & McDowell, C (2001), Insight into IELTS: Cambridge IELTS Course , Cambridge
University Press
Lillely, A, (2005) Menguji Pemahaman Membaca, catatan Kuliah , Departemen Bahasa dan
Linguistik , University of Essex, Inggris
McNamara, T. (2000). Pengujian Bahasa , Oxford: Oxford University Press.
Tennent, G (1998), Mitos Pengujian dan Ikon PET, TOEFL dan IELTS , Universitas Uni Emirat
Arab di Coombe, C (1998), Tren Saat Ini dalam Bahasa Inggris
Pengujian, Prosiding Konferensi untuk CTELT 1997 dan 1998, Vol.1 , TESOL Saudi,
Pengerjaan-proses yang dikumpulkan (021), Al-Ain, Uni Emirat Arab
Urquhart, A & Weir, C (1998), Membaca dalam Bahasa Kedua: Proses, Produk dan Praktik ,
Lond pada: Longman, p145
Weir, C (1993), Memahami dan mengembangkan tes bahasa, Prentice Hall, New York Weir,
C. (2005). Pengujian dan Validasi Bahasa: Pendekatan Berbasis Bukti , Oxford: Palgrave
< http://www.cambridgeesol.org/exams/ielts/index.html#acrd> diakses 28.12.2015
<https://www.ielts.org/teaching-and-research/test-performance-2014 > diakses 30.1.2016
< http://www.cambridgeesol.org/rs_notes/rs_nts10.pdf > diakses 20.12.2015
< http://www.ielts.org/ > diakses 23.1.2016

< https://www.teachers.cambridgeesol.org/ts/exams / akademikenglish / ielts /
akademikreading > diakses 15.11.2015
1 ISSN 2055-6063 (Cetak), ISSN 2055-6071 (Online)
[1] http://www.cambridgeesol.org/exams/ielts/index.html#acrd
[2] http://www.ielts.org
[3] Buku Pegangan IELTS 2007, p7
[4] Buku Pegangan IELTS 2007, p7
[5] https://www.teachers.cambridgeesol.org/ts/exams/academicenglish/ielts/aca demicreading
[6] British Council, Arab Saudi 2011, (selebaran)

[7] Cambridge IELTS3, 2005, p46 (test2)
[8] Cambridge IELTS3, 2005, p72 (test3)
[9] Camb ridge IELTS3 2005, p21 (test1)
[10] Diadopsi dari: Cambridge IELTS3, 2005, hal50 (test2
[11] Diadopsi dari: Cambridge IELTS3, 2005, p41 (test2)
[12] http://www.ielts.org/
[13] (Diadopsi dari: IELTS: Spesimen Materials 2003: p18)
[14] https://www.teachers.cambridgeesol.org/ts/exams/academicenglish/ielts/academicreadin
g
[15] McDowell & Jakeman, (2001: 139) Wawasan tentang IELTS
[16] Diadopsi dari: Cambridge IELTS3, 2005, hal63 (test3)
[17] http://www.cambridgeesol.org/rs_notes/rs_nts10.pdf
[18] https://www.ielts.org/teaching-and-research/test-performance-2014
Original text
Contribute a better translation

IELTS Academic Reading Module Test Validity and Reliability1

Uploaded by

Document Information

Original Title

Copyright

Available Formats

Share this document

Share or Embed Document

Sharing Options

Did you find this document useful?

Is this content inappropriate?

Copyright:

Available Formats

IELTS Academic Reading Module Test Validity and Reliability1

Uploaded by

Copyright:

Available Formats

British Journal of English Linguistics

The nature of the IELTS test

26 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Framework of Academic Reading test in IELTS

Expedition reading operations

Careful reading operations:

27 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

28 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Format of IELTS Academic Reading Module Test

29 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

30 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Complete the table below.

31 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Summarizing (gap filling)

32 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

(Adopted from: http://www.ielts.org/) *2011*

Choosing Headings for Paragraphs or Sections of a Text:

Reading Passage 3 has sex sections A-F

33 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Identification of Writer’s Views/Claims or Information in a Text

34 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Table 1. IELTS test reliability by component (2014)

35 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

36 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

37 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

British Journal of English Linguistics

ABSTRAK: Pengujian pemahaman membaca nampak sederhana jika dibandingkan dengan

38 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

39 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

40 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

41 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

42 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Contoh di atas menunjukkan bahwa pertanyaan-pertanyaan ini dimaksudkan untuk menguji

43 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

44 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

(Diadopsi dari: http://www.ielts.org/ ) * 2011 *

45 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

Identifikasi Pandangan / Klaim Penulis atau Informasi dalam Teks

46 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

47 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

REKOMENDASI UNTUK MENINGKATKAN VALIDITAS SKOR IELTS

48 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

49 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

1 ISSN 2055-6063 (Cetak), ISSN 2055-6071 (Online)

[6] British Council, Arab Saudi 2011, (selebaran)

50 ISSN 2055-6063(Print), ISSN 2055-6071(Online)

You might also like

(Adopted from: http://www.ielts.org/) 2011