Measuring student knowledge and skills

Measuring Student Knowledge and Skills
10
OECD 1999
them to be aware of their own thinking processes and learning strategies and methods. Moreover, further
learning and the acquisition of additional knowledge will increasingly occur in situations in which people
work together and are dependent on one another. To assess these aspects, the development of an instru-
ment that seeks information on self-regulated learning is being explored as part of the OECD/PISA 2000
assessment.
OECD/PISA is not a single cross-national assessment of the reading, mathematics and science skills
of 15-year-olds. It is an on-going programme of assessment that will gather data from each of these
domains every three years. Over the longer term, this will lead to the development of a body of informa-
tion for monitoring trends in the knowledge and skills of students in the various countries as well as in
different demographic sub-groups of each country. On each occasion, one domain will be tested in detail,
taking up nearly two-thirds of the total testing time. This “major” domain will be reading literacy in 2000,
mathematical literacy in 2003 and scientific literacy in 2006. This cycle will provide a thorough analysis of
achievement in each area every nine years, and a “check-up” every three.
The total time spent on the tests by each student will be two hours but information will be obtained
on almost seven hours’ worth of test items. The total set of questions will be packaged into a number of
different groups. Each group will be taken by a sufficient number of students for appropriate estimates
to be made of the achievement levels on all items by students in each country and in relevant sub-groups
within a country (such as males and females and students from different social and economic contexts).
Students will also spend 20 minutes answering questions for the context questionnaire.
The assessments will provide various types of indicators:
– basic indicators providing a baseline profile of the knowledge and skills of students;
– contextual indicators, showing how such skills relate to important demographic, social, economic
and educational variables;
– indicators on trends that will emerge from the on-going, cyclical nature of the data collection and
that will show changes in outcome levels, changes in outcome distributions and changes in rela-
tionships between student-level and school-level background variables and outcomes over time.
Although indicators are an adequate means of drawing attention to important issues, they are not
usually capable of providing answers to policy questions. OECD/PISA has therefore also developed a
policy-oriented analysis plan that will go beyond the reporting of indicators.
The countries participating in the first OECD/PISA survey cycle are: Australia, Austria, Belgium, Brazil,
Canada, China, the Czech Republic, Denmark, Finland, France, Germany, Greece, Hungary, Iceland,
Ireland, Italy, Japan, Korea, Latvia, Luxembourg, Mexico, the Netherlands, New Zealand, Norway, Poland,
Portugal, the Russian Federation, Spain, Sweden, Switzerland, the United Kingdom and the
United States.