Методологические основы

Конфиденциальность всех компонентов и документов испытаний ПС должна защищаться оценщиком. Требования конфиденциальности ох­ватывают многие аспекты оценочной работы: включая получение, управ­ление, хранение и передачу всей информации, касающейся характеристик продукта. Конфиденциальность промежуточных данных испытаний долж­на защищаться, так же как и конфиденциальность оригиналов компонен­тов и документов. Испытатель должен приложить усилия, чтобы предотв­ратить любые случайные, ошибочные или злоумышленные модификации этих данных.

2. 
   Организация и методы оценивания характеристик
   сложных комплексов программ
   

• 
  Характеристики качества функционирования программных средств зависят не только от их внутренних свойств, но и от свойств внешней среды, в которой они применяются (см. ISO 12119). Для сокращения не­определенностей и прямых ошибок при оценивании качества ПС необхо­димо до начала испытаний определить основные параметры внешней сре­ды, при которых должен функционировать комплекс программ с требуе­мыми характеристиками при оценивании его качества и эксплуатации. Для этого заказчик и разработчик совместно должны структурировать, описать и согласовать модель внешней среды и ее параметры в среднем, типовом режиме применения ПС, а также в наиболее вероятных и крити­ческих режимах, в которых должны обеспечиваться требуемые характери­стики качества функционирования ПС. Такая модель должна отражать и фиксировать характеристики*.
  

• 
  внешних потоков информации, в том числе их распределение по видам источников, характеристикам качества данных и возможности их дефектов;
  
• 
  интенсивность и структуру типовых сообщений от оперативных пользователей и администраторов и их необходимую квалификацию, отра­жающуюся вероятностью ошибок и качеством выдаваемой информации;
  
• 
  возможных негативных и несанкционированных воздействий от внешней среды при применении ПС;
  
• 
  необходимые характеристики вычислительных средств, на кото­рых предназначено функционировать комплексу программ с требуемым качеством.
  

• 
  При сопоставлении результатов оценивания характеристик качества с требованиями технического задания и спецификаций разработчик или по­ставщик обязан удовлетворять требования заказчиков только в преде­лах согласованных параметров модели внешней среды. Оценивание ка­чества ПС за этими пределами должно дополнительно согласовываться испытателями с разработчиком. При этом невыполнение требований мо­жет квалифицироваться как их расширение за пределы, ограниченные кон­трактом, и не учитываться при оценивании заказчиком характеристик ка­чества ПС, или как дополнительные работы, подлежащие соответствую­щему финансированию со стороны заказчика, для доработки программ с целью удовлетворения этих требований.
  
•