Проверка адекватности семантической информационной модели

Верификацию модели предлагается проверить путем расчета внутренней дифференциальной и интегральной валидности [64].

Необходимо отметить, что внутренняя валидность варианта семантической информационной модели, не учитывающей сделанные выше замечания к общему описанию задачи, составляет 100 %.

Для измерения валидности модели выполняются следующие действия:

1. Скопировать обучающую выборку в распознаваемую в подсистеме: "F2 Обучение – ввод корректировка обучающей информации – F5 Об.инф.->Расп.анк. – F2 Перезапись БД распознаваемых анкет – F1 Копировать всю БД".

2. Выполнить пакетное распознавание в подсистеме: "F4 Распознавание – Пакетное распознавание – Критерий сходства 1-й (корреляция)".

3. Измерить внутреннюю интегральную и дифференциальную валидность информационной модели в подсистеме: "F6 Анализ".

Результаты измерения внутренней валидности семантической информационной модели приведены в таблице 90:

Таблица 90 – ИЗМЕРЕНИЕ ВАЛИДНОСТИ СЕМАНТИЧЕСКОЙ ИНФОРМАЦИОННОЙ МОДЕЛИ

Обобщенные результаты распознавания представлены в таблице 91. Красным цветом и жирным шрифтом отмечены ошибочно идентифицированные объекты.

Таблица 91 – ИТОГОВЫЕ РЕЗУЛЬТАТЫ ИДЕНТИФИКАЦИИ

22-10-04            10:35:33                                            г.Краснодар

№ п/п		Наим.физ. источника		Результаты идентификации
Идентифицирован как класс		Фактически является:		Уровень сходства %		Кач-во идент.		Ошибки по классам		Всего
Код		Наименование		Код		Наименование		1		2		3		4		5		6		7
1		aardvark		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		45.153		58.327																0
2		antelope		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.860		72.096																0
3		bass		4		РЫБЫ		4		РЫБЫ		69.091		69.802																0
4		bear		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		45.153		58.327																0
5		boar		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.057		71.045																0
6		buffalo		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.860		72.096																0
7		calf		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		50.381		79.729																0
8		carp		4		РЫБЫ		4		РЫБЫ		56.509		60.908																0
9		catfish		4		РЫБЫ		4		РЫБЫ		69.091		69.802																0
10		cavy		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		44.637		49.336																0
11		cheetah		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.057		71.045																0
12		chicken		2		ПТИЦЫ		2		ПТИЦЫ		68.532		81.600																0
13		chub		4		РЫБЫ		4		РЫБЫ		69.091		69.802																0
14		clam		3		ПРЕСМЫКАЮЩИЕСЯ		7		МНОГОНОГИЕ		39.293		22.460														1		1
15		crab		5		ЗЕМНОВОДНЫЕ		7		МНОГОНОГИЕ		56.552		56.270														1		1
16		crayfish		5		ЗЕМНОВОДНЫЕ		7		МНОГОНОГИЕ		31.918		14.669														1		1
17		crow		2		ПТИЦЫ		2		ПТИЦЫ		61.940		73.682																0
18		deer		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.860		72.096																0
19		dogfish		4		РЫБЫ		4		РЫБЫ		57.215		71.018																0
20		dolphin		4		РЫБЫ		1		МЛЕКОПИТАЮЩИЕ		45.813		59.973		1														1
21		dove		2		ПТИЦЫ		2		ПТИЦЫ		68.532		81.600																0
22		duck		2		ПТИЦЫ		2		ПТИЦЫ		62.602		69.240																0
23		elephant		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.860		72.096																0
24		flamingo		2		ПТИЦЫ		2		ПТИЦЫ		58.945		78.981																0
25		flea		6		НАСЕКОМЫЕ.		6		НАСЕКОМЫЕ.		57.880		53.753																0
26		frog		5		ЗЕМНОВОДНЫЕ		5		ЗЕМНОВОДНЫЕ		56.991		58.285																0
27		frog		5		ЗЕМНОВОДНЫЕ		5		ЗЕМНОВОДНЫЕ		74.297		59.241																0
28		fruitbat		2		ПТИЦЫ		1		МЛЕКОПИТАЮЩИЕ		29.712		33.413		1														1
29		giraffe		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.860		72.096																0
30		girl		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		37.676		59.877																0
31		gnat		6		НАСЕКОМЫЕ.		6		НАСЕКОМЫЕ.		70.170		62.829																0
32		goat		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		50.381		79.729																0
33		gorilla		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		34.549		50.131																0
34		gull		2		ПТИЦЫ		2		ПТИЦЫ		53.136		62.059																0
35		haddock		4		РЫБЫ		4		РЫБЫ		72.286		74.190																0
36		hamster		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		45.203		61.201																0
37		hare		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		41.787		52.991																0
38		hawk		2		ПТИЦЫ		2		ПТИЦЫ		61.940		73.682																0
39		herring		4		РЫБЫ		4		РЫБЫ		69.091		69.802																0
40		honeybee		6		НАСЕКОМЫЕ.		6		НАСЕКОМЫЕ.		77.866		63.618																0
41		housefly		6		НАСЕКОМЫЕ.		6		НАСЕКОМЫЕ.		68.475		65.459																0
42		kiwi		2		ПТИЦЫ		2		ПТИЦЫ		45.650		56.201																0
43		ladybird		6		НАСЕКОМЫЕ.		6		НАСЕКОМЫЕ.		46.561		40.244																0
44		lark		2		ПТИЦЫ		2		ПТИЦЫ		72.585		82.063																0
45		leopard		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.057		71.045																0
46		lion		1		МЛЕКОПИТАЮЩИЕ		1		МЛЕКОПИТАЮЩИЕ		46.057		71.045																0

<
Продолжение таблицы 91

№ п/п	Наим.физ. источника	Результаты идентификации
Идентифицирован как класс	Фактически является:	Уровень сходства %	Кач-во идент.	Ошибки по классам	Всего
Код	Наименование	Код	Наименование	1	2	3	4	5	6	7
47	lobster	5	ЗЕМНОВОДНЫЕ	7	МНОГОНОГИЕ	31.918	14.669							1	1
48	lynx	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	46.057	71.045								0
49	mink	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	37.537	54.433								0
50	mole	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	40.754	51.203								0
51	mongoose	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	46.057	71.045								0
52	moth	6	НАСЕКОМЫЕ.	6	НАСЕКОМЫЕ.	68.475	65.459								0
53	newt	5	ЗЕМНОВОДНЫЕ	5	ЗЕМНОВОДНЫЕ	31.652	34.274								0
54	octopus	7	МНОГОНОГИЕ	7	МНОГОНОГИЕ	32.232	37.177								0
55	opossum	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	40.754	51.203								0
56	oryx	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	46.860	72.096								0
57	ostrich	2	ПТИЦЫ	2	ПТИЦЫ	42.539	65.476								0
58	parakeet	2	ПТИЦЫ	2	ПТИЦЫ	68.532	81.600								0
59	penguin	2	ПТИЦЫ	2	ПТИЦЫ	25.030	42.429								0
60	pheasant	2	ПТИЦЫ	2	ПТИЦЫ	72.585	82.063								0
61	pike	4	РЫБЫ	4	РЫБЫ	57.215	71.018								0
62	piranha	4	РЫБЫ	4	РЫБЫ	69.091	69.802								0
63	pitviper	3	ПРЕСМЫКАЮЩИЕСЯ	3	ПРЕСМЫКАЮЩИЕСЯ	66.439	56.486								0
64	platypus	5	ЗЕМНОВОДНЫЕ	1	МЛЕКОПИТАЮЩИЕ	14.210	31.316	1							1
65	polecat	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	46.057	71.045								0
66	pony	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	50.381	79.729								0
67	porpoise	4	РЫБЫ	1	МЛЕКОПИТАЮЩИЕ	45.813	59.973	1							1
68	puma	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	46.057	71.045								0
69	pussycat	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	49.870	80.029								0
70	raccoon	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	46.057	71.045								0
71	reindeer	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	50.381	79.729								0
72	rhea	2	ПТИЦЫ	2	ПТИЦЫ	33.019	56.339								0
73	scorpion	3	ПРЕСМЫКАЮЩИЕСЯ	7	МНОГОНОГИЕ	41.478	34.054							1	1
74	seahorse	4	РЫБЫ	4	РЫБЫ	72.286	74.190								0
75	seal	4	РЫБЫ	1	МЛЕКОПИТАЮЩИЕ	42.257	46.155	1							1
76	sealion	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	22.089	34.131								0
77	seasnake	3	ПРЕСМЫКАЮЩИЕСЯ	3	ПРЕСМЫКАЮЩИЕСЯ	52.601	33.745								0
78	seawasp	5	ЗЕМНОВОДНЫЕ	7	МНОГОНОГИЕ	51.925	13.781							1	1
79	skimmer	2	ПТИЦЫ	2	ПТИЦЫ	53.136	62.059								0
80	skua	2	ПТИЦЫ	2	ПТИЦЫ	53.136	62.059								0
81	slowworm	3	ПРЕСМЫКАЮЩИЕСЯ	3	ПРЕСМЫКАЮЩИЕСЯ	38.461	37.271								0
82	slug	4	РЫБЫ	7	МНОГОНОГИЕ	32.953	16.992							1	1
83	sole	4	РЫБЫ	4	РЫБЫ	72.286	74.190								0
84	sparrow	2	ПТИЦЫ	2	ПТИЦЫ	72.585	82.063								0
85	squirrel	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	29.979	36.725								0
86	starfish	7	МНОГОНОГИЕ	7	МНОГОНОГИЕ	48.217	40.232								0
87	stingray	4	РЫБЫ	4	РЫБЫ	51.509	40.028								0
88	swan	2	ПТИЦЫ	2	ПТИЦЫ	50.226	66.336								0
89	termite	6	НАСЕКОМЫЕ.	6	НАСЕКОМЫЕ.	57.880	53.753								0
90	toad	5	ЗЕМНОВОДНЫЕ	5	ЗЕМНОВОДНЫЕ	56.315	55.604								0
91	tortoise	5	ЗЕМНОВОДНЫЕ	3	ПРЕСМЫКАЮЩИЕСЯ	0.892	15.775			1					1
92	tuatara	3	ПРЕСМЫКАЮЩИЕСЯ	3	ПРЕСМЫКАЮЩИЕСЯ	20.568	22.593								0

<


Продолжение таблицы 91

№ п/п	Наим.физ. источника	Результаты идентификации
Идентифицирован как класс	Фактически является:	Уровень сходства %	Кач-во идент.	Ошибки по классам	Всего
Код	Наименование	Код	Наименование	1	2	3	4	5	6	7
93	tuna	4	РЫБЫ	4	РЫБЫ	57.215	71.018								0
94	vampire	2	ПТИЦЫ	1	МЛЕКОПИТАЮЩИЕ	29.712	33.413	1							1
95	vole	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	41.787	52.991								0
96	vulture	2	ПТИЦЫ	2	ПТИЦЫ	49.581	73.319								0
97	wallaby	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	35.494	57.713								0
98	wasp	6	НАСЕКОМЫЕ.	6	НАСЕКОМЫЕ.	80.325	60.030								0
99	wolf	1	МЛЕКОПИТАЮЩИЕ	1	МЛЕКОПИТАЮЩИЕ	46.057	71.045								0
100	worm	4	РЫБЫ	7	МНОГОНОГИЕ	32.953	16.992							1	1
101	wren	2	ПТИЦЫ	2	ПТИЦЫ	72.585	82.063								0
ВСЕГО:	6	0	1	0	0	0	8	15

Низкая достоверность идентификации класса многоногих, по-видимому, обусловлена тем, что в этот класс включены представители нескольких различных видов. Если их разделить на разные классы, то адекватность модели возрастет. Аналогичное предположение можно высказать по классу, который мы условно назвали "Пресмыкающиеся".


Возможно, автор задачи разрабатывал ее с определенной долей иронии. Вместе с тем это никак не отражается на методике, предлагаемой в данном разделе.

Что касается класса "Млекопитающие", то, по-видимому, необходимо включить в модель дополнительные атрибуты, характерные именно для этого класса. Это следует из анализа результатов идентификации летучей мыши и дельфина (рисунки 210 и 211). Летучая мышь отнесена к птицам, а дельфин – к рыбам, т.к. по совокупности использованных в модели атрибутов они оказались наиболее похожими на обобщенные образы именно этих классов. Это подтверждают информационные портреты классов "Vampir" и "Dolphin", приведенные на рисунках 212 и 213. Вместе с тем необходимо обратить внимание на то, что в обоих случаях на втором месте по уровню сходства стоит правильный класс "Млекопитающие".

Рисунок 210. Результаты идентификации летучей мыши

Рисунок 211. Результаты идентификации дельфина

Рисунок 212. Информационный портрет класса: "Млекопитающие"

Рисунок 213. Информационный портрет класса: "Птицы"

Содержание раздела

---

---

Главная сайта

---