Measuring student knowledge and skills

Measuring Student Knowledge and Skills
16
OECD 1999
The contextual information collected through the student and school questionnaires will comprise
only a part of the total amount of information available to OECD/PISA. Indicators describing the general
structure of the education systems (their demographic and economic contexts – for example, costs, enrol-
ments, throughput, school and teacher characteristics, and some classroom processes) and on labour
market outcomes are already routinely developed and applied by the OECD.
OECD/PISA – An evolving instrument
Given the long horizon of the project and the different relative emphases that will be given to the
domains in each cycle, the OECD/PISA assessment frameworks clearly represent an instrument that will
evolve. The frameworks are designed to be flexible so that they:
– can evolve and adapt to the changing interests of participants; and yet
– give guidance to those enduring elements that are likely to be of continuing concern and therefore
should be included in all assessment cycles.
The frameworks will be modified in the light of field trials in the course of 1999 before a final instru-
ment is produced for use in OECD/PISA 2000. Moreover, the development of the survey will continue
thereafter, to take account of both changing objectives of education systems and improvements in
assessment techniques. The benefits of such development and improvement will, of course, have to be
balanced against the need for reliable comparisons over time, so that many of the core elements of
OECD/PISA will be maintained over the years.
OECD’s objectives are ambitious. For the first time an international assessment of school students
aims to determine not just whether they have acquired the knowledge specified in the school curriculum,
but whether the knowledge and skills that they have acquired in childhood have prepared them well for
adult life. Such outcome measures are needed by countries which want to monitor the adequacy of their
education systems in a global context. The ideal will not be instantly achieved, and some of OECD/PISA’s
goals will initially be constrained by what is practicable in an assessment instrument that needs also to
be reliable and comparable across many different cultures. But the objectives are clear, and the assess-
ments that evolve over the coming years will aim to move progressively towards fulfilling them.
Students in PISA 2000 will have their abilities assessed by being required to perform a set of pencil and
paper tasks within a given period of time. The term “test” has varying connotations in different countries, in
some cases implying that the results have implications for individual students. PISA’s purpose is to survey
characteristics of each country’s students collectively, rather than to examine individuals. Therefore the
term “assessment” is used to describe PISA, even though the conditions experienced by students will be
similar to those of a school test.

---

17
OECD 1999