ユーザーは複数回答の質問に何を期待していますか？
いくつかのテスト/調査システムがあります。大きな議論の1つは、複数の回答が必要な質問への対処方法です。
構成＃1
ユーザーは、正確なチェックボックスをオンにする必要があります。彼らがそうするなら、彼らは「1」ポイントを得ます、そうでなければ、彼らは「0」ポイントを得ます。
構成＃2
ユーザーは、選択した正解ごとにポイントを獲得します。 4つのうち2つの正解があった場合、それぞれが「.5」ポイントの価値があります。そして、質問の作成者は他の回答に否定的なポイントを与えることができます（質問の「0」よりも悪いスコアを付けることはできません）。したがって、他の2つの回答が「-.5」であり、ユーザーが2つの正しい回答と1つの間違った回答を選択した場合、質問の1から「.5」ポイントが得られます。
構成＃
＃2と同じですが、1つの間違った回答が「0」を取得することを意味します。したがって、2つの正しい選択肢のうち1つだけをマークした場合、クレジットは半分になります。
スコアを追跡する最も正確な方法は何ですか？そして、複数の答えに答えるとき、ユーザーは何を期待しますか？私の立場からすると、複数の回答を使用する理由はすべて、より難しい質問を作成することです。
これは興味深い質問です。ユーザーの視点だけでなく、学習/教育的なデザインの視点からの回答も検討する必要があると思います。
構成＃1は正しい答えと間違った答えだけがあり、その間に何もないことを示唆しているため、質問はこの哲学に一致する必要があります。おそらく詳細が非常に重要で、安全関連情報の場合のように、「ほぼ正しい」ものが得られない場合に、それは非常にうまく適用できると思います。
構成＃は、最適な答えがあることを示唆していますが、有効な結果ですべてを正しく取得する必要はないため、質問は、物事をより深くカバーする人々を区別するために理想的に構成されています知識と、物事の幅広い概要のみをカバーする知識との比較。
構成＃2は、不正解に負のスコアを割り当てるので興味深いです。したがって、すべての構成から最低のスコアを得ることができ、したがって、さまざまな能力の学生。
最適な構成はないと思いますが、スコアリングのタイプが質問の意図と一致することを強調する必要があります。したがって、実際には、生徒が学習能力に応じて生徒を明確に区別しようとするのではなく、生徒が学習目標に確実に到達することを目的とする場合、混合構成のセットアップを推奨することもできます。
実際、学生はまた、答えを正すことに自信を持って質問に答えるためのさまざまな戦略を選ぶため、各質問のスコアリング構成を明らかにするかどうかについても興味深い見方があります。
私の立場からすると、複数の回答を使用する理由はすべて、より難しい質問を作成することです。
自由回答は、回答についてさらに精度を必要とするため、最も難しい質問タイプです。ただし、これらの質問の評価はマシンにとって難しいものです。
複数の選択タイプの質問をバインドする必要があり、質問を難しくすることを目的としている場合、ソリューションにはすべてまたは何もない戦略が適しています。
これに加えて、報酬と罰の戦略も機能しますが、否定的な点が多すぎると、残りの質問を続行したり、テストの再開などの望ましくない行動を起こしたりする動機に悪影響を与える可能性があります。