要件定義が完了したように見えても、「何をもって成功と判断するのか」が決まっていなければ、システムを客観的に評価することはできません。
例えば、「音が良いシステムを作りたい」という目標だけでは、完成後に設計が成功したのか失敗したのかを判断できません。一方で、「周波数特性は±3 dB以内」「左右の到達時間差は0.1 ms以内」「暗騒音はNC20以下」のように具体的な評価指標を設定しておけば、測定結果と比較することで要求を満たしているかを客観的に判定できます。Toole 2018ISO 3382-2:2008
評価指標(Performance Metrics)とは、システムが要求仕様をどの程度満たしているかを数値や判定基準によって評価するための尺度です。評価指標を定義することで、設計・測定・検証の各工程が共通の目標を持つことができます。INCOSE Handbook 2023
なぜ評価指標が必要なのか
評価指標を定めない設計では、評価が担当者の主観に依存しやすくなります。同じシステムでも、人によって「十分良い」「まだ改善が必要」と判断が分かるため、設計品質を安定して管理できません。
一方、評価指標が明確であれば、設計変更や機器交換を行った場合でも、変更前後を同じ基準で比較できます。また、システムを長期間運用する際にも、定期測定によって性能劣化の有無を確認できるため、保守や更新の判断にも利用できます。INCOSE Handbook 2023Taylor 1997
オーディオシステムでは、測定可能な物理量を評価指標の中心に据え、必要に応じて聴感評価を補助的に組み合わせることが重要です。本シリーズでも、測定と聴感を対立させるのではなく、相補的に利用する立場を採用しています。
オーディオシステムで用いられる代表的な評価指標
評価指標は、システムの利用目的によって異なりますが、代表的なものには次のような項目があります。
- 周波数特性
- 音圧レベル(SPL)
- 左右チャンネルのレベル差
- インパルス応答
- 残響時間(RT60)
- 明瞭度(Clarity)
- 歪率(Distortion)
- ノイズフロア
- 最大再生音圧
- レイテンシー
これらの指標をすべて同じ重要度で扱う必要はありません。例えば、音楽制作スタジオでは周波数特性や定位精度が重要になりますが、ホームシアターでは最大音圧や低域再生能力も重要な評価対象になります。利用目的に応じて必要な評価指標を選択することが、要件定義の重要な作業です。Toole 2018McCarthy 2016
【リファレンス】
項目:評価指標
推奨事項:
- すべての主要要求に対応する評価指標を設定する。
- 評価指標は可能な限り測定可能な物理量で定義する。
- 判定条件は数値と測定条件を併記する。
- 聴感評価を用いる場合は、測定結果と組み合わせて評価する。
注意:
評価指標そのものに普遍的な正解はありません。システムの利用目的や要求仕様に応じて適切な指標を選定することが重要です。
エンジニアリングノート
「良い音」という表現は設計目標にはなりますが、評価指標にはなりません。
設計では、「どのような状態を良いと判断するのか」を測定可能な形へ変換する必要があります。この変換ができて初めて、設計・検証・改善のサイクルを再現可能なものにできます。
まとめ
評価指標とは、システムが要求仕様を満たしているかを客観的に判断するための基準です。
要件定義の段階で評価指標を明確に定義しておくことで、設計・測定・検証・保守のすべての工程を共通の基準で進められるようになります。また、評価指標は可能な限り測定可能な物理量として定義し、必要に応じて聴感評価を補助的に利用することが、再現性の高いリファレンスオーディオシステム設計につながります。
参考文献
- [Toole 2018] Floyd E. Toole. Sound Reproduction: The Acoustics and Psychoacoustics of Loudspeakers and Rooms. 3rd ed., Routledge, 2018.
- [ISO 3382-2:2008] ISO 3382-2:2008. Acoustics — Measurement of room acoustic parameters — Part 2: Reverberation time in ordinary rooms. ISO.
- [INCOSE Handbook 2023] International Council on Systems Engineering. INCOSE Systems Engineering Handbook: A Guide for System Life Cycle Processes and Activities. 5th ed., Wiley, 2023.
- [Taylor 1997] John R. Taylor. An Introduction to Error Analysis: The Study of Uncertainties in Physical Measurements. 2nd ed., University Science Books, 1997.
- [McCarthy 2016] Bob McCarthy. Sound Systems: Design and Optimization. 3rd ed., Routledge, 2016.
