Документирование

Для поэтапного задания требований по надежности применяют расчетно–экспериментальные методы, основанные в моделях роста надежности в процессе отработки изделий и освоения их в производстве. Модели роста определяют по статистическим данным, полученным при создании и (или) эксплуатации изделий–аналогов [из 4.7 ГОСТ 27.003–90]

Ручное тестирование - эксплуатационный органолептический метод испытаний мобильного приложения экспертом на мобильном устройстве без использования специальных инструментов или программных средств. В рамках данного типа тестирования эксперт пользуется мобильным приложением как рядовой пользователь, оценивая степень соответствия свойств мобильного приложения конкретному критерию. По завершении ручного тестирования эксперт дает оценку по тестируемому критерию, руководствуясь стандартом и основываясь на экспертном понимании предмета исследования и опыте эксплуатации тестируемого приложения. Характеристики, подвергающиеся испытаниям методом ручного тестирования, указаны в таблице 1 [из подр. 5.1 ПНСТ 277-2018]

Инструментальное тестирование - метод испытания мобильного приложения экспертом с применением специальных инструментов и программного обеспечения с последующей оценкой полученных при помощи инструментов результатов на основании экспертного понимания предмета исследования и их конвертацией в итоговый балл. Характеристики, подвергающиеся испытаниям методом инструментального тестирования, указаны в таблице 1.

Типы инструментария, используемые при проведении испытаний методом инструментального тестирования:

• программное обеспечение для выявления возможных программных уязвимостей;
• программное обеспечение для выявления вредоносного программного обеспечения;
• программное обеспечение для анализа сетевого трафика;
• секундомер.

[из подр. 5.2 ПНСТ 277-2018]

Визуальная оценка - органолептический метод испытания мобильного приложения, при котором экспертом оценивается степень соответствия свойств мобильного приложения или его информационных характеристик конкретному критерию и выставляется оценка, при этом ручное или инструментальное тестирование не проводится. При выставлении оценки эксперт руководствуется стандартом и проводит испытание на основании экспертного понимания предмета исследования. Визуальной оценкой является получение общих сведений о мобильном приложении (таких как размер загружаемого распаковываемого пакета приложения, дата последнего обновления, пользовательский рейтинг и др.) из общедоступных источников (магазина приложений и сайта разработчика). Характеристики, подвергающиеся испытаниям методом визуальной оценки, указаны в таблице 1 [из подр. 5.3 ПНСТ 277-2018]