Методологические основы

Данные натурных экспериментов с объектами внешней среды мо­гут подготавливаться заранее вне сеансов испытаний ПС, например, при отладке аппаратной части системы обработки информации. Эти данные отражают характеристики и динамику функционирования объектов, кото­рые трудно или опасно подключать для непосредственного взаимодей­ствия с недостаточно проверенным ПС. Кроме того, такие данные могут использоваться для аттестации адекватности имитаторов некоторых объек­тов внешней среды. Они полезны в тех случаях, когда создание опреде­ленных условий функционирования объектов внешней среды очень доро­го или опасно и может быть выполнено только в исключительных случа­ях. Однако данные натурных экспериментов не всегда удается адекватно описать условиями и обобщенными характеристиками их поведения. На­личие ряда случайных неконтролируемых факторов усложняет картину исходных данных и может затруднять сопоставление результатов натур­ных экспериментов с полученными при программной имитации тестов. В этом случае невозможно изменять и учитывать обратную связь от испыты­ваемого ПС.

При тестировании в ряде случаев необходимо иметь эталонные ха­рактеристики данных, поступающих на испытываемое ПС. При работе с реальными объектами зачастую приходится создавать специальные изме­рительные комплексы, которые определяют, регистрируют и подготавли­вают к обработке все необходимые характеристики в процессе реального функционирования этих объектов (например, координаты движения само­летов при испытаниях систем УВД). Такие измерения проводятся при автономном функционировании объектов или при их взаимодействии с ПС в реальном времени. Результаты измерений используются для опреде­ления характеристик качества ПС при работе с реальными объектами.

Имитация эталонных характеристик объектов внешней среды служит для определения качества функционирования ПС в идеальных ус­ловиях — при отсутствии искажений исходных данных, ошибок в измере­ниях их параметров, сбоев и предумышленных отказов. Проверка при таких исходных данных позволяет оценить характеристики дефектов и ошибок результатов, обусловленные недостаточным качеством ПС. Затем эталонные данные объединяются с определенными калиброванными иска­жениями и дефектами исходных данных, что обеспечивает подготовку тестов с динамическими и статистическими характеристиками, максимально приближающимися к реальным. На промежуточных стадиях проверки с эталонными характеристиками помогают разделять причины дефектов ре­зультатов, зависящие от искажений исходных данных и от качества испы­тываемых программ обработки информации.