「統計学関連なんでもあり」の過去ログ---016

★ 審査結果の統合 ★

　57　審査結果の統合　　RYO　　2001/10/31 (水) 00:22
　　70　Re: 審査結果の統合　　sb812109　　2001/11/01 (木) 00:39
　　59　Re: 審査結果の統合　　DISIR　　2001/10/31 (水) 11:07
　　58　Re: 審査結果の統合　　名無しさん　　2001/10/31 (水) 10:45

57.　教えてください　　RYO　　2001/10/31 (水) 00:22

統計学に詳しい方教えてください。私の会社でプレゼンテーションの大会が行なわれる事になりまして、その順位を決める方法がわからず悩んでいます。
何故、難しいかというとＡの会場とＢの会場とで同時進行され、それぞれの会場で審査員（しかもＡとＢとでは人数も違う。Ａが15名、Ｂが12名）が審査します。その審査結果をＡ・Ｂの会場一緒にして順位をつけるというからです。加えて審査員は不慣れですので、主観的なもので審査されます。この採点方法は変えることが出来ず、いずれかの会場に高得点が偏る可能性もありえます。
わたしは、統計学や数学的知識についてまったくの無知で、手法も平均値と偏差値ぐらいしかわかりません。そこで簡単に素人でも導き出せる順位のつけ方をどなたか教えてください。できれば素人の私が素人の審査員を納得させなければなりませんので、詳しくご説明くださいますようよろしくお願いします。

　　　　　[このページのトップへ]

70.　Re: 教えてください　　sb812109　　2001/11/01 (木) 00:39

（１）審査員の選定
　　　重要な因子は、A,B会場で均衡がとれていることが
　　　望ましいと思います。重要な因子とは、例えば、
　　　性別、年代、会社での地位等です、、、とつい言い
　　　たくなるのですが、プレゼンテーションをするので
　　　あれば、その結果、何かを売ったり、採用して貰っ
　　　たりすることを最終目標とするわけでしょう？
　　　となると、採否を決定する人と属性の似ている人を
　　　審査員としたくなります。

（２）審査結果の評価
　　　常識的には、審査員の評価の合計点を基準にすべき
　　　なのでしょうが、インパクトの強さを重要視するの
　　　であれば、最高得点のみで決めるのもいいでしょう
　　　し、嫌われないことを重要視するのであれば、審査
　　　員結果下位２名づつの合計点が高い方を採ると云う
　　　のも悪くないでしょう。

統計学的答えになっていない？失礼。（-.-）

　　　　　[このページのトップへ]

59.　Re: 教えてください　　DISIR　　2001/10/31 (水) 11:07

どのような項目をどのような尋ね方をした採点用紙
を作成するかという問題になります。
別の言い方をすれば新たな評価尺度の開発ということ
になります。妥当性と信頼性の検討が十分なされ,使用
に耐えるものを開発するには大変な労力と時間がかかる
ものですので、簡単ではありませんが、既存のものが
あればそれを使えば対応可能でしょう。

　　　　　[このページのトップへ]

58.　Re: 教えてください　　名無しさん　　2001/10/31 (水) 10:45

> できれば素人の私が素人の審査員を納得させなければなりませんので、詳しくご説明くださいますようよろしくお願いします。

たとえ話でいたしましょう。

アメリカ人20人にジョージ・ブッシュとトニーブ・レア，タリバン兵15人に，ウサマ・ビンラディンとムハンマド・ナワズ・シャリフに関する評価を100点満点でつけてもらうとします。
さて，35人の評価を元に4人の人物の好ましさについて，順位を決めることができますか？

それと同じレベルの話でしょう。

違うスケールで違う対象を評価（測定）して，統一的な評価ができるわけがありません。

　　　　　[このページのトップへ]