英語の発音を複数人の英語母語話者に採点をしてもらいました。採点者間での評価が信頼に足るものかを調べるための統計的計算方法として、クロンバックαが知られています。
クロンバックのアルファ（α） - 統計WEB
性格検査の質問項目のように、ある特性に対して複数の質問項目を設け、回答の合計値（尺度得点）を特性尺度として用いるときに、各質問項目（変数）が全体として同じ概念や対象を測定したかどうか（内的整合性）を評価する信頼係数。0か … 続きを読む ク...
bellcurve.jp
今回は、3人のネイティブに日本人が発話した英語のアルファベットの発音を5段階で評価してもらいました。
計算式に若干苦労しましたが、Googleスプレッドシートを使って、関数の手入力で計算をしてみました。Rやエクセルの拡張、SPSSなどを使って計算することもできますが、自分で計算をするとより数式の内容まで理解を深めることができました。
評価者間信頼性のクロンバックαは=.98で、8を超えたので信頼に足る数字かと思います。ここから採点内容を調べていきます。
