評分者內信度

Intra-rater Reliability（評分者內信度）是指同一評分者在不同時間對同一組評估對象進行評分時，其評分結果之間的一致性程度。在統計學上，通常使用Cohen's Kappa或Intraclass Correlation Coefficient（ICC）來量化此指標。根據ISO 31000:2018風險管理原則，風險評估的「可重複性」（repeatability）是風險管理有效性的核心要素之一。若評分者在短時間內對同一風險情境給出截然不同的評分，則該評估工具存在系統性偏差，無法作為風險決策的依據。這與評分者間信度（Inter-rater Reliability）不同，前者關注個人的一致性，後者關注多個評分者之間的一致性。在企業風險管理（ERM）體系中，評分者內信度低通常意味著風險評估框架存在歧義，需要重新定義評分標準或提供更清晰的評分指引。

實務應用可分為三個階段：第一步，建立標準化評分指引（RTO），確保評分依據有明確的量化定義，而非主觀判斷。例如，在ISO 31000框架下，風險等級的定義必須具體，如「高風險」需對應具體的財務損失閾值。第二步，進行前測（Pre-test），同一組評分者在兩週內對同一組風險情境進行評分，並計算ICC值，若ICC低於0.7則需修正評分工具。第三步，定期校準（Calibration），每半年進行一次交叉驗證。以台灣某大型製造業為例，其導入風險評分標準化後，風險評估的內部一致性提升了25%，審計發現的評分不一致事件減少了40%，有效降低了因評分隨意性導致的合規風險。

台灣企業常見挑戰包括：第一，評分標準過於主觀，缺乏量化指標，導致同一評分者在不同時間給出矛盾評分。建議導入ISO 31000:2018的風險評鑑框架，將風險等級與具體財務或營運衝擊掛鉤。第二，人員流動率高，新進人員缺乏一致的風險感知，建議建立「風險評分員認證制度」，確保所有評分人員均受過統一培訓。第三，數位化工具不足，人工評分難以追蹤一致性。建議導入GRI 403-5（職業安全衛生）或COSO ERM框架的數位化管理平台，自動記錄評分時間戳與評分邏輯，以便追溯與校正。建議優先進行評分工具的量化改造，預計6個月內可顯著提升評分一致性20%。

積穗科研股份有限公司（Winners Consulting Services Co., Ltd.）專注台灣企業Intra-rater Reliability相關議題，擁有豐富實戰輔導經驗，協助企業在90天內建立符合國際標準的管理機制，已服務超過100家台灣企業。申請免費機制診斷：https://winners.com.tw/contact