Также в процессе валидации проверяют работоспособность системы в так называемых нерасчетных условиях эксплуатации (аварийные ситуации, устойчивость к внешним воздействиям, и др.). Иногда необходимо оценить ряд специфических вопросов. Например, могут ли использовать систему люди, которые находятся в стрессовых ситуациях (например, операторы электростанций, полиция, диспетчеры скорой помощи), допустив разумное количество ошибок.

В нашей практике подрядчикам поручили спроектировать и изготовить поворотный дроссель для перекрытия входного участка трубопровода на испытательном стенде. На сборке дроссель работал нормально, а после установки на стенд при прокачке потока воздуха дроссель заклинило. Усилий гидравлического привода не хватало для поворота сектора заслонки. Пригласили экспертов и начали задавать вопросы:

• Какие материалы были выбраны при анализе поворотной части дросселя?

• Подходят ли допустимые пределы прочности деталей для этого использования?

• Какие допущения приняты при моделировании работы поворотного сочленения для учета условий окружающей среды?

• Что потребуется, в части времени и ресурсов, для изменения механизма?

• Существуют ли прототипы механизма, которые можно было бы включить в проект, даже если они не совсем отвечали заданным требованиям?

Причина заклинивания поворотной заслонки при работе стенда оказалась в том, что при прокачке скоростного потока воздуха на дроссельной заслонке возникал перепад давлений, который прижимал поворотную часть к неподвижной с большим усилием. Для доработки дросселя было предложено снизить возникающую силу трения путем разделения поворотной заслонки и неподвижного диска шариковыми шарнирами. Через неделю стенд был введен в строй.

При валидации сложного продукта также требуется заранее сформировать комплексный план. Он включает согласованный набор испытаний и оценок результатов с входными данными и целевыми ожиданиями продукта соответственно утвержденным требованиям заинтересованных сторон (пользователей, экспертов, заказчиков, инвесторов, а также регуляторов, ответственных за разработку и обеспечение соблюдения нормативных требований к продукту).

Задача оценки результатов верификации и валидации может состоять из множества шагов или подзадач. Например, задача посадки в транспортное средство будет включать в себя выполнение пользователем ряда подзадач, таких как отпирание двери, открытие двери, вход в транспортное средство, посадка на сиденье водителя, и закрытие двери.

При валидации план испытаний системы в целом может быть достаточно объемным. Типичная высокотехнологичная система насчитывает от 1000 до 10 000 требований. Какие-то из них можно проверить одновременно, с помощью набора связанных действий. При этом снижается стоимость программы испытаний. Планирование процедур верификации и валидации узлов и компонентов осуществляется еще на ранних стадиях проекта с учетом потребных сроков на проектирование и изготовление стендов и моделей. В ходе верификационных процедур удобно использовать типовые вопросники (чек-листы), составленные и пополняемые с учетом традиций компании и накапливающегося опыта. На этапе валидации завершается процесс разработки системы.

Типы оценок результатов испытаний можно разделить на объективные и субъективные. К объективным данным относят такие, на которые не влияет человек. Субъективные измерения обычно основаны на восприятии и опыте оценщика во время выполнения задач по использованию продукта. Объективные показатели более точны и беспристрастны. Удовлетворенность клиентов, вероятно, является наиболее важной субъективной мерой проверки продукта, которую можно оценить, общаясь непосредственно с пользователями.