Например, Бобцов

Повышение достоверности экспертной оценки вероятности обнаружения и распознавания объектов по тепловизионным изображениям

ФИЗИЧЕСКАЯ ОПТИКА

УДК 621.384.32
Повышение достоверности экспертной оценки вероятности обнаружения и распознавания объектов по тепловизионным изображениям

© 2012 г. В. А. Овсянников, доктор техн. наук; Я. В. Овсянников; В. Л. Филиппов, доктор физ.-мат. наук
НПО “Государственный институт прикладной оптики”, г. Казань
E-mail: npogipo@tnpko.ru

Для повышения доверительной вероятности того, что вероятность вскрытия (­ обнаружения или распознавания) объектов по тепловизионным изображениям в нормированных условиях не меньше или не больше определенного уровня, предложено экспертную оценку этой вероятности проводить для изображений, полученных с дистанций до объектов соответственно больше или меньше заданной. Представлена методика расчета соответствующей доверительной вероятности, отвечающая заданной нижней границе доверительного интервала для вероятности вскрытия объектов.

Ключевые слова: достоверность контроля, вероятность обнаружения и распознавания, тепловизионное изображение.

Коды ОCIS: 110.3000.

Поступила в редакцию 18.05.2011.

Введение и постановка задачи
Для решения многих задач, возникающих при прогнозе эффективности, аттестации и применении тепловизионных приборов (ТВП), необходимым этапом является экспертная, статистическая оценка вероятности вскрытия (обнаружения или распознавания) объектов местности по их тепловизионным изображениям (реальным или синтезированным) с привлечением группы операторов-дешифровщиков. Для повышения достоверности полученных оценок этой вероятности обычно идут по пути увеличения как числа изображений объекта, так и числа экспертов.
Повышение количества изображений объекта наблюдения целесообразно использовать для уменьшения случайной ошибки оценки в­ ероятности его вскрытия, вносимой разбросом характеристик объекта, в частности его ­местоположения и теплового контраста, метео­ условий при ведении наблюдения и т.  д. Так, экспериментально установлено [1], что перемещение одного и того же объекта на другие участки неоднородного фона делает соответ-

ствующие попытки его обнаружения (выделения из фона) одним и тем же оператором практически независимыми. При распознавании объекта такая независимость, по-видимому, отсутствует, хотя и в этом случае имеет место некоторое влияние сильно структурированного фона на соответствующую вероятность вскрытия объекта.
Увеличение числа операторов является основным способом повышения достоверности экспертных оценок эффективности ТВП, ибо дешифровочные возможности операторов даже одинаково высокой квалификации индивидуальны и случайны: они зависят от психофизического состояния оператора, его опыта, внимания, степени мотивации, усталости и эмоционального настроя на момент дешифрирования [2].
Как известно, процесс дешифрирования при испытаниях ТВП имеет следующие особенности:
–– перед операторами-дешифровщиками ставится узконаправленная задача  – оценить возможности ТВП по вскрытию объектов;
–– операторы имеют априорные сведения о вскрываемых объектах.

“Оптический журнал”, 79, 3, 2012

65

Количество операторов (а  при независимости суждений одного и того же оператора по разным изображениям  – произведение этого количества на число изображений), которым следует предъявлять для дешифрирования изображения объектов, зависит от вероятности вскрытия (априори неизвестной) объектов, доверительного интервала для этой вероятности и самой доверительной вероятности.
В задачах экспертной оценки дешифрируемости изображений, в данном случае тепловизионных, имеет значение либо доверительная вероятность R(P  ≥  P1) того, что вероятность вскрытия Р того или иного тест-объекта не меньше требуемого значения Р1 (такая задача возникает, например, при аттестации ТВП по дальности действия), либо доверительная вероятность R(P  ≤  P1) (эта вероятность важна, например, при контроле качества тепловой маскировки объектов). Именно данные доверительные вероятности и являются мерой достоверности получаемых экспертных оценок.
Поскольку для доверительной вероятности R(P ≤ P1) существует очевидное соотношение
R(P £ P1)= R(P ³1- P1),
где P – вероятность невскрытия объекта, то далее без потери общности будем рассматривать лишь структуру доверительной вероятности вида R(P  ≥  P1) и, соответственно, задачу оценки и повышения достоверности экспертного контроля вероятности вскрытия посредством испытуемого ТВП объектов местности по их тепловизионным изображениям. При этом требуемое значение вероятности Р1 вскрытия объектов, находящихся на заданной дистанции D1, в  нормированных условиях обычно составляет Р1 = 0,8 [2].
Обоснование методики
Рассмотрим вначале особенности экспертной оценки вероятности распознавания объектов, которая, в отличие от оценки вероятности обнаружения объектов на неоднородном фоне, практически не зависит от степени этой неоднородности и, следовательно, является гораздо более определенной (менее вариабельной). Под распознаванием объекта, как правило, понимается определение его принадлежности к  конкретной категории  – классу или типу (при решении задачи классификации или идентификации соответственно) на основе анализа демаскирующих признаков этого объекта,

выявляемых на изображении. Поэтому классическая процедура оценки вероятности многоальтернативного распознавания предполагает, что каждому из nд задействованных при контроле операторов-дешифровщиков последовательно в случайном порядке предъявляются изображения no тест-объектов различных категорий, имеющих близкие друг другу размеры и тепловой контраст. Тогда если общее число правильных результатов дешифрирования изображений объектов составляет n, то экспертная оценка вероятности (частота) распознавания, усредненная по всем категориям объектов, определяется соотношением
PS* = n/nS,
где nS = näno. Однако полученная оценка P*S не отражает
некоторых важных обстоятельств. Во-первых, суждения операторов, как правило, основываются не только на дешифровочных признаках изображений объектов, но, вольно или невольно, и на простом угадывании. Если принять, что испытательный тест не смещен, т.  е. изображения всех no объектов предъявляются операторам в среднем одинаково часто, то вероятность такого угадывания Py = 1/no. Во-вторых, не все задействованные на испытаниях операторы являются достаточно квалифицированными, особенно когда привлекается большая группа. Кроме того, даже хорошо тренированные, добросовестные операторы могут допустить при дешифрировании грубые ошибки (промахи), никак не связанные ни с качеством изображений, ни с опытом или степенью мотивации этих операторов. Все это означает, что вероятность распознавания объектов при и­ спытаниях ТВП, согласно формуле для вероятности суммы совместных событий [3], с­ оставляет

PS = Pó + (1- Pó )Pê P,

(1)

где Pк – вероятность того, что любой данный оператор достаточно квалифицирован и не совершает промахов; Р  – вероятность того, что квалифицированный и не совершающий промахов оператор распознает объект по его изображению; именно эта вероятность и является предметом контроля при испытаниях ТВП.
Для определения вероятности Pк, вообще говоря, необходимо выполнить серию дополнительных экспериментов, а именно: предъявить данной группе операторов изображения тех же самых тест-объектов, но находящихся на до-

66 “Оптический журнал”, 79, 3, 2012

статочно близком расстоянии, таком, что за-
ведомо выполняется условие P  =  1, и получить экспертную оценку Р*Sо соответствующей вероятности распознавания РSо, равной согласно (1)

PSo = Pó + (1- Pó )Pê.

(2)

Выделяя из (2) значение Pк и подставляя его в (1), находим

PS = Pó + (PSo - Pó )P,

(3)

откуда получаем выражения для искомой вероятности Р и ее оценки Р* в виде

P

=

PS - Pó PSo - Pó

,

P*

=

PS* - Pó PS*o - Pó

.

Именно последняя формула и рекомендует-
ся, например в [4], для “очищения” получен-
ной при испытаниях ТВП экспертной оценки Р*S вероятности распознавания объектов от рассмотренных побочных эффектов.
В случае, когда эти дополнительные испытания не проводятся, вероятностям РSо или РS*о для достаточно большой группы операторов (nд  =  15–20) можно придать типичное значение, равное 0,9. Если же эта группа невелика и тщательно подобрана, то можно считать РSо и Р*Sо близкими к 1 [4].
Из вышеизложенного вытекает, что искомая доверительная вероятность R(P ≥ P1) совпадает с доверительной вероятностью R(PS ≥ PS1), где согласно (3)

PS1 = Pó + (PSo - Pó )P1.

(4)

Аналогично оценивается доверительная вероятность R(P  ≥  P1) при контроле вероятности обнаружения объектов с априори неизвестным местоположением с тем лишь очевидным отличием, что, поскольку слишком большое число ложных обнаружений недопустимо, в данном случае вероятность угадывания Рy = 0.
Согласно работе [5] доверительная вероятность R(PS  ≥  PS1) того, что PS  ≥  PS1, если в nS независимых испытаниях получено n положительных результатов, равна вероятности того, что в nS  +  1 испытаниях при вероятности положительного исхода единичного испытания P = PS1 будет получено не более n положительных результатов. Это позволяет для расчета R воспользоваться формулой для биномиального распределения

åR = n CniS + 1PSi1(1- PS1 )nS + 1 - i. i=0

(5)

В частности, когда все попытки дешифрирования изображений оказались успешными (n = nS), формула (5) принимает вид [5]

R = 1- PSn1S +1.

(6)

При Р1 ≥ 0,8 вместо (5) применима пуассоновская аппроксимация [3]

R = Y(nS -n +1,(nS +1)(1- PS1)),

(7)

åгде

Y(x,

m)

=

¥ i=x

e-mmi i!

– функция, табулирован-

ная, например, в [3].

Из (7) следует, что если, например, при рас-

познавании объектов трех возможных катего-

рий группой из четырех квалифицированных

операторов эти объекты были правильно рас-

познаны в 11 случаях (что отвечает оценке ве-

роятности распознавания Р*S = 11/(4×3) = 0,92), то с доверительной вероятностью, равной

лишь R(PS  ≥  PS1)  =  0,51, можно утверждать, что фактическая вероятность распознавания РS данных объектов в данных условиях не мень-

ше определяемой по (4) нижней границы до-

верительного интервала РS1 =  0,33  +  (1  -  0,33)×  ×0,8  =  0,87 или что искомая вероятность их

распознавания P не ниже требуемого значе-

ния P1  =  0,8. Для обеспечения минимально приемлемого уровня доверительной вероятно-

сти R(P  ≥  P1)  ≥  0,8 необходимо, чтобы данные объекты были распознаны во всех 12 попыт-

ках, т.  е. при оценке РS*  =  1, что согласно (6) дает доверительную вероятность R(PS ≥ 0,87) = = R(P ≥ 0,8) = 0,84.

Из сравнения (6) и (7) вытекает, что мини-

мальное число испытаний nSmin, необходимое для обеспечения соответствующей доверитель-

ной вероятности R(PS  ≥  PS1), достигается при реализации критерия вскрытия Р*S  =  nS/nS и оно согласно (6) составляет

nSmin = int(ln(1 – R)/lnPS1),

(8)

где int(x) – целая часть x. Поскольку доля успешных попыток вскры-
тия объектов Р*S  =  n/nS до начала испытаний (процедуры дешифрирования изображений) неизвестна, то определить априори требуемое число nS этих попыток невозможно; по формуле (8) можно рассчитать лишь минимально необходимое их количество (оценку снизу). Поэтому можно рекомендовать рассчитывать значения R по (5) или (6) после каждого испытания или малой серии испытаний (актов

“Оптический журнал”, 79, 3, 2012

67

дешифрирования) до тех пор, пока значение доверительной вероятности R не достигнет минимально приемлемого уровня.
Для снижения числа испытаний nS при ф­ иксированной доверительной вероятности R или увеличения доверительной вероятности R при фиксированном числе испытаний nS целесообразно изменить (при оценке R(PS  ≥  PS1)  – увеличить, при оценке R(PS  ≤  PS1)  – уменьшить) заданную дистанцию D1 до объекта до такого значения D2, чтобы ему отвечала вероятность вскрытия объекта, близкая к PS2 = 0,5. Тогда, получив для этой новой дистанции D2 достаточно высокое значение R(PS  ≥  PS2), где аналогично (4)

PS2 = Pó + (PSo - Pó )P2,

(9)

можно утверждать, что доверительная вероятность R(PS  ≥  PS1)  =  R(P  ≥  P1) для исходной, ­заданной дистанции D1 до объекта столь же ­высока.
При этом фактические условия контроля (тепловой контраст объектов, метеоусловия), соответствующие дистанции D2, в общем случае могут отличаться от нормированных, для которых, как правило, и требуется выполнение контроля вероятности вскрытия объектов, находящихся на дистанции D1.
При PS2, близких к 0,5 (практически при 0,2  0,75 имеем Е(zi) → ∞.

68 “Оптический журнал”, 79, 3, 2012

Из (11), (12) вытекает, что соотношение между нижними границами P1 и P2 доверительных интервалов для вероятностей вскрытия объектов в нормированных и фактических условиях контроля имеет вид

P2 = 1-(1- P1 )Q2,

Q

=

D1E-1 (m2 ) D2E-1 (m1 )

=

(13)

= D1 min(0,75; 0,59( D2 min(0,75; 0,59(

1+ 0,78ln(m2/0,3) 1+ 0,78ln(m1/0,3)

-1)) -1))

.

Рациональный выбор фактической дистанции контроля D2 определяется двумя конкурирующими требованиями: с одной стороны, она должна быть достаточно малой для обеспечения соответствующей оценки вероятности вскрытия Р*S2, близкой к 1, а с другой  – достаточно большой, чтобы нижняя граница доверительного интервала РS2 была близка к 0,5. Следовательно, строго говоря, эта дистанция априори не может быть установлена. Однако если есть основания предполагать, что соответствующая доверительная вероятность будет находиться в интервале R(PS  ≥  PS2)  =  0,8–0,95 (и  такая вероятность действительно реализуется при контроле), то, как показывает анализ, при ограниченном числе испытаний она достигает слабовыраженного максимума при таком значении D2, при котором отношение Q = 0,6–0,8. В частности, для высококонтрастных объектов, когда mi  >  62, эта дистанция, согласно (13), составляет D2  =  D1/Q  ≈  D1/(0,6– 0,8). На практике дистанцию контроля D2 рекомендуется выбирать максимально большой, но такой, чтобы ей отвечала достаточно высокая (но не равная 1) оценка Р*S2.
Таким образом, оценку доверительной вероятности R(P  ≥  P1), являющуюся мерой достоверности результатов экспертного контроля вероятности вскрытия объектов в нормированных условиях, необходимо проводить в сле­ дующем порядке:
–– для выбранной согласно изложенным рекомендациям фактической дистанции контроля D2 установить число n успешных попыток дешифрирования (из общего количества nS этих попыток) полученных изображений тестобъектов;
–– определить для исходной (нормированные условия контроля) D1 и скорректированной (фактические условия контроля) D2 дистанции до объектов соответствующие значения коэф-

фициентов пропускания атмосферы ta1 и ta2, разности температур, эквивалентных шуму, DT1 и DT2, а также среднего теплового контраста объектов DTR1 и DTR2;
–– рассчитать по формуле (12) значения m1 и m2, по формуле (13)  – значения Q и P2 (для выбранного значения P1) и далее, по формуле (9),  – соответствующую нижнюю границу PS2 для вероятности PS;
–– вычислить по формуле (10) критериальную доверительную вероятность R(PS ≥ PS2).
При превышении этой вероятностью некоторого достаточно высокого уровня, обычно 0,8– 0,95 (выбор этого уровня строго обоснован быть не может, он определяется исключительно из эвристических соображений  – человеческого опыта, здравого смысла и интуиции [3]), можно с достаточной достоверностью утверждать, что вероятность вскрытия посредством ТВП данных объектов, расположенных на заданной дистанции D1, в нормированных условиях имеет значение, не меньшее Р1, или, иначе говоря, что дальность действия ТВП в нормированных условиях, отвечающая заданной вероятности вскрытия объектов Р1, не меньше з­ начения D1.
Пример оценки достоверности контроля
Пусть для некоторого образца ТВП (спектральный рабочий диапазон 8–12  мкм, разность температур, эквивалентная шуму, определенная для нормированной температуры фона T1  =  295  К, равна DT1  =  0,1  К, частота кадров F  =  25  Гц) требуется проконтролировать выполнение в нормированных условиях (температура воздуха tв1  =  17  °С, метеорологическая дальность видимости Sм1  =  10  км, относительная влажность f1  =  75%, средняя разность радиационных температур объектов и фона DTR1  =  1,5  К, требуемая вероятность вскрытия объектов по их изображениям Р1  =  0,8) дальности распознавания объектов D1  =  3  км. Фактически же контроль проводится, например, в следующих условиях: T2  =  280  К, tв2  =  10  °С, Sм2  =  20  км, f2 =  90%, DTR2 = 1 К; при этом число распознаваемых категорий объектов no = 3, а число задействованных квалифицированных операторов в группе nд = 4.
Выбрав дистанцию контроля, например D2  =  4  км, устанавливаем число успешных попыток распознавания объектов, например n  =  11. Далее по методикам, изложенным,

“Оптический журнал”, 79, 3, 2012

69

в частности в [2], рассчитываем значения ta1  =  0,45, ta2  =  0,51 и DT2  =  0,12  К, а по формуле (12) – (для типовой величины Tгл = 0,1 с) значения m1  =  15 и m2  =  9,6. Вычисляем по формуле (13) значения Q  =  0,68 и P2  =  0,53, по формуле (9)  – значение PS2  =  0,69 и, наконец, по формуле (10) – искомую доверительную ­вероятность R(PS  ≥  PS2)  =  0,94. Следовательно, с  этой доверительной вероятностью можно ­утверждать, что вероятность распознавания по тепловизионным изображениям данных объектов, находящихся на дистанции 3  км, в  нормированных условиях будет иметь зна­ чение, не меньшее P1 = 0,8.

Как видно, по сравнению с прямым контролем вероятности распознавания объектов (без корректировки первоначальной дистанции до них, равной здесь 3  км) в нормированных ­условиях достоверность результатов контроля действительно повысилась – даже в том случае, если бы при прямом контроле все 12 попыток распознавания объектов были успешными: 0,94  >  0,84 (см. предыдущий пример расчета доверительной вероятности).
Можно полагать, что полученные результаты будут полезны для рациональной организации контроля эффективности ТВП в натурных условиях.

*   *   *   *   *

Литература
1. Rotman S., Gordon E., Kowalczyk M. Modeling human search and target acquisition performance // Opt. Eng. 1989. V. 28. № 11. Р. 1216–1222.
2. Иванов В.П., Курт В.И., Овсянников В.А., Филиппов В.Л. Моделирование и оценка современных тепловизионных приборов. Казань: Отечество, 2006. 595 с.
3. Справочник по вероятностным расчетам / Г.Г. Абезгауз, А.П.Тронь, Ю.Н. Копенкин, И.А. Коровина. М.: Воениздат, 1970. 536 с.
4. Driggers R., Jacobs E., Vollmerhausen R., O’Cane B., Self M., Mouer S., Hixson J., Page G. Current IR target acquisition approach for military sensor design and wargaming // Proc. SPIE. 2006. V. 6207. P. 620709-1– 620709-17.
5. Щукин А.Н. Теория вероятностей и ее применение в инженерно-технических расчетах. М.: Сов. радио, 1974. 136 с.

70 “Оптический журнал”, 79, 3, 2012