Монография / Под ред. И. Ф. Кефели, Р. М. Юсупова. Ид «Петрополис»

Количество элементов в возможных группах выборки
Обозначение
Определение
TP
Количество верно распознанных элементов выборки
TN
Количество правильно отвергнутых элементов выборки
FP
Количество элементов, не принадлежащих к категории, но неверно отнесенных к ней 
(«ложное срабатывание» или ошибка I рода)
FN
Количество элементов, принадлежавших категории, но ошибочно отвергнутых 
(«пропуск события» или ошибка II рода)
На основе представленных в табл. 7 обозначений можно ввести в рас-
смотрение систему показателей эффективности для систем оценки инфор-
мации, представленную в таблице 8.
Показатель «точность» (p) определяет долю документов, действительно 
принадлежащих данному классу, относительно всех документов, которые 
система отнесла к нему.
Показатель «полнота» (r) показывает долю найденных классифика-
тором документов, принадлежащих к заданному классу, относительно 
всех документов этого класса в выборке.
F-мера является показателем, объединяющим в себе информацию 
о точности и полноте. Она представляет собой сбалансированное взве-
шенное гармоническое среднее между этими двумя показателями.

---

180
г
лава
5. з
ащита
от
нежелательной
и
вредоноСной
информации
в
глобальных
информационных
Сетях
И
нформацИонно
-
псИхологИческая
И
когнИтИвная
безопасность
Аккуратность (a) есть отношение количества документов, по которым 
классификатор принял правильное решение, к размеру всей выборки.
Таблица 8
Показатели эффективности систем оценки информации
Наименование
Обозначение
Выражение для расчета
Точность (precision)
p
TP
p
TP + FP
=
Полнота (recall)
r
TP
p
TP + FN
=
F
-мера
F
2 p r
F
p r
⋅ ⋅
=
+
Аккуратность (accuracy)
a
TP +TN
a
TP +TN + FP + FN
=
Необходимо отметить, что в зависимости от конкретной решаемой 
задачи введенные показатели обладают разной важностью для решения 
различных задач. Например, для модуля анализа веб-страниц, входяще-
го в состав антивирусного ПО, первостепенное значение будет иметь 
высокая точность, так как большое количество ложных срабатываний 
не допускается.
В случае систем родительского контроля более важным будет пока-
затель «полнота», так как необходимо оградить детей от неприемлемого 
содержимого, к которому будут относиться, в том числе, и сайты, вызы-
вающие сомнения, но не отнесенные к определенной категории.