Measuring student knowledge and skills

Task characteristics
In accordance with the OECD/PISA definition of scientific literacy, each assessment task will require
the use of one or more of the processes in Figure 14 and, as has also been noted, some scientific knowl-
edge. Tasks are envisaged as a series of questions (items) about stimulus material which presents the
situation. Some tasks may include items assessing reading and mathematics as well as items relating to
scientific literacy.
Examples of test items assessing scientific processes
Examples of the items being considered for assessing some of these processes will help to convey
their operational meaning. The first two processes are assessed in two questions within a task entitled
“Stop that germ!”. The students are asked to read a short text which includes an extract about the history
of immunisation. The extract on which two example questions are based is shown in Figure 17.
Example Item 1 requires a constructed response which is scored as 2, 1 or 0 according to the amount
of relevant detail given in the answer. (A score of 2 would be given to an idea along the lines of “breaking
the skin and applying pus directly into the blood stream will increase the chances of developing immu-
nity against smallpox”.) The item assesses Process 1 – Recognising scientifically investigable questions using
knowledge of human biology applied in the area of science in life and health.
Example Item 2 is also scored as 2, 1 or 0 according to whether one or both pieces of information are
mentioned (the rate of survival without Boylston’s treatment and whether his patients were exposed to
smallpox apart from within the treatment). It assesses the Process 2 – Identifying evidence needed in a scientific
investigation using knowledge of human biology and applied in the area of science in life and health.
Figure 17.