Page 85 - 4196

В якості критерію зрівнюваної характеристики ін-
формативності ознак варто використовувати інтегровану
величину

I  M D  mD . (4.67)
i ki ki

Найбільш інформативна ознака вибирається за умо-
ви min I  min M D ki  D m ki .
i
i i

4.7.5 Ранжування ознак за інформативністю

Відбір ознак у порядку зменшення інформативності
може бути здійснений за відстанню між розподілами імо-
вірностей векторів об’єктів двох класів, яка оцінюється
відстанню Кульбака-Махаланобіса:
T 1 
d   mk  1   mk  2   Ck m 1   mk  2  k , (4.68)

де m  k , m  k - k - вимірні вектори вибіркових сере-
1 2
дніх, обчислені за k - вимірними векторами X 1  k і
 1
X  k об’єктів першого і другого класів; C - k   k -
2
вимірна обернена матриця коваріації, обчислена за усіма
векторами обох класів.
Відбір інформативних ознак здійснюється в ході
ітеративної процедури. На першому кроці процедури
обчислюється величина  1d для кожної із p ознак і від-
бирається ознака із найбільшим значенням  1d , яка ра-
хується найбільш інформативною.
На другому кроці обчислюється величина  2d для
векторів, які складаються із усіх можливих пар ознак і де
одним із елементів пари являється ознака, виділена на
першому кроці. Максимум  2d дозволяє визначити дру-
гу за інформативністю ознаку.

85