(Вредные советы)

Когда мы говорим «программа удобная», каждый представляет своё. Разработчик — чистый код и быстрый отклик. Менеджер — закрытые вовремя задачи. Бухгалтер — чтобы ничего не зависло в конце квартала.

Проблема в том, что «удобство» — это не свойство кода, а результат взаимодействия пользователя с системой в конкретных условиях. Именно это и описывает ГОСТ Р ИСО/МЭК 25022—2021 (и связанный с ним ГОСТ Р 71998-2025).

А теперь умное определение из ГОСТа.

Качество при использовании — это степень, в которой продукт или система могут быть использованы конкретными пользователями для удовлетворения их потребностей в достижении конкретных целей с эффективностью, результативностью, удовлетворённостью и свободой от риска в конкретных контекстах использования.

Вопрос: так что ж нам теперь, всех потенциальных пользователей опрашивать, если мы хотим, чтобы все пользовались нашим ПО?

Ответ: ну, кто сильно богатый — у него на проект выделен бюджет всей Российской Федерации, а почему бы и нет.

Но есть один способ никого не опрашивать. Правда, перед этим один вредный совет.

Вредный совет №1. Никогда не фиксируйте контекст использования. Какая разница, кто, где и зачем работает с системой? Удобство — оно универсальное! Сравнивайте метрики новой системы с метриками старой, с показателями конкурентов и с чем угодно ещё — цифры же есть.

Если совет не сработал — читаем дальше.

Три вещи, которые нельзя игнорировать

Первое. Нельзя сравнивать «удобство» двух систем, если измерения проводились в разных условиях. Другая аудитория, другие задачи, другая среда — другие цифры.

Второе. Качество при использовании измеряется на выходе, а не внутри кода. Это эффект от использования, а не характеристики архитектуры.

Третье. Контекст использования включает три группы факторов:

Группа факторов

Что входит

Пользователь

Кто он, какой у него опыт

Задача

Что именно он делает

Среда

Физические и социальные условия, в которых он работает

Где это применяется

Показатели качества при использовании работают на всех этапах жизненного цикла:

·         Требования — задать цель: «задачу нужно выполнять не дольше 10 минут».

·         Прототипы (формирующая оценка) — найти проблемы на небольшой выборке репрезентативных пользователей.

·         Прототипы (итоговая оценка) — сравнить проектные решения на большой выборке с нормализованными метриками.

·         Приёмка и контроль — проверить внедрённую систему на соответствие требованиям.

·         Сопровождение — улучшать продукт по фактическим метрикам.

Основные потребители этих измерений — те, кто управляет

1.    Разработкой – Директор ИТ- Компании, или Департамента, что бы получилось BMW, а не отечественный автомобиль.

2.    Закупкой – Заказчик, когда покупает себе ПО (Обычно это кот в мешке)

3.    оценкой и обслуживанием ПО – Support, потому что это ему разгребать «оры» недовольных пользователей

Как интерпретировать цифры

Вредный совет №2. Верьте одной цифре. «Время выполнения задачи — 4 минуты» — отличный показатель! С чем сравнивать? Да ни с чем, цифра же красивая.

Если совет не сработал — вот пять способов сравнения:

Способ

Суть

Пример

Соответствие требованиям

Сравнить с заявленным порогом

«Должно быть не дольше 10 минут»

Контрольные показатели

Сравнить с эталоном

«В новой системе не медленнее, чем в старой»

Временные ряды

Сравнить с прошлыми версиями

«Ошибок становится меньше с каждой версией»

Квалификация

Сравнить новичка с экспертом

«Сколько времени у новичка против опытного»

Популяционные нормы

Сравнить с базой значений

«В каком проценте случаев пользователи оценивали так же»

Одиннадцать характеристик — по-простому

Стандарт выделяет 11 характеристик. Вот они в бытовой формулировке:

№

Характеристика

По-простому

1

Результативность

Насколько система реально «делает дело»

2

Эффективность

Насколько это выгодно и быстро

3

Общая удовлетворённость

Насколько пользователи в целом довольны

4

Доверие

Можно ли доверять системе

5

Удовольствие (UX)

Приносит ли работа с системой удовольствие

6

Эргономический комфорт

Удобно ли физически

7

Снижение экономических рисков

Окупается ли и приносит ли выгоду

8

Снижение рисков для здоровья и безопасности

Не вредит ли людям

9

Снижение экологических рисков

Какое воздействие на экологию

10

Полнота контекста

Понимает ли система ситуацию

11

Гибкость

Адаптируется ли под изменения

Каждая характеристика раскрывается через подхарактеристики — конкретные измеримые показатели. Суть сжимается в одну строку:

Подхарактеристика качества при использовании = измеримый показатель того, как система работает для пользователя.

И вывод, забегая в самый конец: пока вы не научились считать эти показатели в конкретном контексте, «удобство» останется личным ощущением соседа.

Пример расчёта №1: «Выполненные задачи» (результативность)

Подхарактеристика: доля задач, выполненных правильно и без посторонней помощи.

Формула: X = A / B, где

·         A — количество выполненных уникальных задач;

·         B — общее количество выполненных уникальных задач.

Кейс: система обработки заявок на ИТ-обслуживание.

За месяц система закрыла 100 уникальных заявок (сброс пароля, предоставление доступа, настройка ПО и т.д.). Из них 80 были доведены до статуса «Выполнено» — то есть достигли нужного результата для пользователя. Остальные 20 — отклонены или закрыты без решения.

text

X = 80 / 100 = 0,8  (80%)

Интерпретация: 80% обработанных заявок завершились успешно. Показатель результативности по подхарактеристике «Выполненные задачи» — 80%.

Пример расчёта №2: «Достигнутые цели» (результативность, с весами)

Здесь каждая упущенная или неправильно достигнутая цель получает пропорциональное значение упущения (максимум = 1), потому что цели различаются по критичности.

Формула: X = 1 − ΣAᵢ / B, где

·         Aᵢ — вес упущения по каждой цели (0 — достигнута, 1 — полностью провалена);

·         B — общее количество целей.

Кейс: предоставление удалённого доступа к корпоративной сети.

За месяц обработано 5 уникальных запросов:

Запрос

Цель

Статус

Вес упущения (Aᵢ)

1

Доступ для нового сотрудника

Достигнута

0

2

Доступ для подрядчика (срочный проект)

Не достигнута (заявка потеряна)

0,8

3

Восстановление доступа после блокировки

Достигнута

0

4

Доступ для аудитора (срок — 1 день)

Достигнута неправильно (выдан доступ не к тем ресурсам)

0,5

5

Продление доступа для существующего пользователя

Достигнута

0

ΣAᵢ = 0 + 0,8 + 0 + 0,5 + 0 = 1,3
B = 5
X = 1 − 1,3 / 5 = 1 − 0,26 = 0,74  (74%)

Интерпретация: с учётом критичности каждой упущенной или неправильно достигнутой цели услуга реализовала примерно 74% от «идеального» результата. Провал срочного доступа для подрядчика «стоит» дороже, чем частичная ошибка с доступом аудитора, — и это отражено в весах.

Обращаю Ваше внимание, что в ГОСТ Р ИСО/МЭК 25022—2021 более 30 разных метрик для измерения удобства использования, и они не исчерпывающие.

Если понять принцип, можно добавить сколько угодно своих метрик под запросы вашего ПО.

Что важно запомнить

1.    «Удобство» — это не свойство кода, а результат использования в конкретном контексте. Меняется контекст — меняются цифры.

2.    Сравнивать метрики можно только в одинаковых условиях (та же аудитория, те же задачи, та же среда).

3.    Одна цифра ничего не значит — ей нужна база сравнения: требования, эталон, динамика, уровень эксперта или популяционная норма.

4.    Результативность можно считать двумя способами: простой долей (A/B) или с весами критичности (1 − ΣAᵢ/B). Второй точнее, когда цели неравноценны.

5.    Стандарт даёт каркас, а не готовые нормативы. Конкретные пороги («не дольше 10 минут», «не более 2% ошибок») вы устанавливаете сами — под свой продукт и своих пользователей.

Вопрос для обсуждения: а вы на своём проекте измеряете «удобство» цифрами — или пока ориентируетесь на ощущение соседа?