要件を満たしたはずなのに、「本当に完成したのか判断できない」という状況は、オーディオシステムの構築で珍しくありません。
例えば、部屋の音響処理を終え、スピーカーを設置し、DSPも調整したにもかかわらず、「もう少し良くなる気がする」と調整を繰り返してしまうことがあります。このような状態では、作業の終了条件が定義されていないため、改善と調整が際限なく続いてしまいます。
この問題を防ぐために必要なのが成功基準(Success Criteria)です。
成功基準とは、「システムが完成したと判断するための客観的な条件」を定義したものです。要求仕様が「何を実現するか」を示すのに対し、成功基準は「どのような状態になれば要求を満たしたと判断するか」を示します。INCOSE Handbook 2023
なぜ成功基準が必要なのか
オーディオシステムでは、音質だけを理由に完成を判断すると、評価する人や評価する日によって結論が変わる可能性があります。聴感評価は重要ですが、単独では再現性や客観性を十分に保証できません。Toole 2018
そこでシステム設計では、あらかじめ測定可能な評価項目と合格条件を定め、その条件を満たしたときに「設計目標を達成した」と判断します。
例えば、小規模モニタリングシステムであれば、次のような成功基準を設定できます。
- 周波数応答が目標範囲内である。
- 左右チャンネルの応答差が許容範囲内である。
- システムノイズが運用上問題ないレベルである。
- 必要な最大音圧を歪みなく再生できる。
- すべての機器が安定して動作する。
このように、「何を測り、どこまで達成すれば成功とするのか」を事前に定義することで、設計の終了条件が明確になります。
成功基準は測定可能であることが重要
成功基準は、「音が良い」「自然に聞こえる」のような抽象的な表現ではなく、できる限り測定可能な条件で表現します。JCGM 200:2012
例えば、
- 周波数応答
- 最大音圧(Maximum Sound Pressure Level:Max SPL)
- 全高調波歪率(Total Harmonic Distortion:THD)
- 残響時間(Reverberation Time:RT60)
- 背景騒音レベル
- システム稼働率
などは、測定方法を定めれば誰が測定しても同じ基準で評価できます。
一方で、「解像度が高い」「音場が広い」といった主観的な表現は、そのままでは成功基準になりません。これらを採用する場合は、ブラインド試験や比較試験など、再現可能な評価方法を併せて定義する必要があります。ITU-R BS.1116-3Toole 2018
要件・評価指標・成功基準の関係
第2章で説明した内容は、それぞれ異なる役割を持っています。
- 要件:システムが実現すべき内容を定義する。
- 評価指標:要件を評価するための測定項目を定義する。
- 成功基準:評価結果をどのように判定するかを定義する。
例えば、「リスニング位置で高精度な再生を実現する」という要件があるとします。
この場合、評価指標として周波数応答や左右差、歪率などを選定し、それぞれに許容範囲を設定します。そして、すべての評価指標がその範囲を満たした場合に「設計目標を達成した」と判断します。
このように、成功基準は要件と測定結果を結び付ける役割を持っています。
エンジニアリングノート
成功基準は、できる限り設計開始前に決定しておくことが重要です。
測定結果を確認した後で合格基準を変更すると、都合の良い結果だけを採用する「後付け評価」になり、設計の客観性が失われます。評価方法と判定条件は、測定前に固定しておくことがシステムズエンジニアリングの基本原則です。INCOSE Handbook 2023Montgomery 2019
まとめ
成功基準とは、システムが要求仕様を満たしたと判断するための客観的な条件です。
評価指標だけでは、システムが完成したかどうかは判断できません。評価指標ごとに合格条件を定め、それを満たしたときに設計を完了と判断します。
リファレンスオーディオシステムでは、「測定可能で再現可能な成功基準」を設計初期に定義することが、品質を安定して実現するための重要な考え方です。
参考文献
- [INCOSE Handbook 2023] International Council on Systems Engineering. INCOSE Systems Engineering Handbook: A Guide for System Life Cycle Processes and Activities. 5th ed., Wiley, 2023.
- [Toole 2018] Floyd E. Toole. Sound Reproduction: The Acoustics and Psychoacoustics of Loudspeakers and Rooms. 3rd ed., Routledge, 2018.
- [JCGM 200:2012] JCGM. International vocabulary of metrology — Basic and general concepts and associated terms (VIM). JCGM 200:2012.
- [ITU-R BS.1116-3] ITU-R BS.1116-3. Methods for the subjective assessment of small impairments in audio systems. International Telecommunication Union, 2015.
- [Montgomery 2019] Douglas C. Montgomery. Design and Analysis of Experiments. 10th ed., Wiley, 2019.
