Критерии ценности информации и минимума эвристик

Информация ценна не сама по себе, а если она способна изменить решение и ожидаемый результат.

Ценность информации

Пусть без дополнительного наблюдения выбирается действие с полезностью в неизвестном состоянии . Ожидаемая ценность полной информации:

Смысл формулы: сначала сравниваем лучший выбор после раскрытия состояния с лучшим выбором при текущей неопределённости.

На практике информация неполна и стоит денег. Поэтому проверяю:

Лог или метрика могут быть технически точными, но бесполезными, если при любом их значении действие останется тем же.

Шум и дезинформация

  • шум увеличивает объём наблюдений, не помогая различать состояния;
  • устаревшие данные описывают уже изменившийся объект;
  • смещённые данные систематически искажают картину;
  • дезинформация намеренно ведёт к неверному решению.

Полезность данных проверяется через происхождение, время, точность и связь с доступными действиями.

Минимум эвристик

Эвристика — быстрое правило выбора без полного перебора. Оно уместно, когда точный расчёт дороже возможной ошибки.

Критерий минимума эвристик я понимаю как требование не накапливать неявные догадки. Сначала использую измеримый критерий и модель; если данных или времени не хватает, явно фиксирую:

  1. какое упрощение принято;
  2. в каких условиях оно работает;
  3. каков ущерб от ошибки;
  4. какой сигнал заставит пересмотреть решение.

Например, «перезапустить экземпляр при одном сбое» — опасная эвристика. «Перезапустить после трёх подряд ошибок здоровья, если соседние экземпляры стабильны» — уже проверяемое правило с границами.

Когда остановить поиск

Дополнительное исследование невыгодно, если его ожидаемая ценность меньше цены задержки и сбора данных. Это защищает и от поспешности, и от бесконечного анализа.

Связано: Оценка качества управления, Измерение количества информации по Шеннону.

Самопроверка

  • Может ли уменьшение энтропии не иметь ценности для решения?
  • Чем эвристика отличается от случайной догадки?
  • Как определить, что дальнейший сбор данных уже не окупается?