-
Qualtrics Platform -
Customer Journey Optimizer -
XM Discover -
Qualtrics Social Connect
回答の品質
回答品質について
ExpertReview 回答品質は、分析を開始する前に収集したデータの全体的な品質をチェックするクアルトリクスプラットフォームの機能です。可能な限り最高の品質のデータを回収するため、アンケートの改善方法について最善の提案をします。以下に、回答の分析時に表示される可能性のあるエラーメッセージと、それぞれを解決する方法を示します。
データと分析のExpertReviewの使用方法については、回答品質機能を参照してください。
回答者のアンケート完了までの時間が異常に短い
アンケートに早く回答した回答者には「速すぎる回答者」のフラグが付けられます。これは、質の高い回答を提供する代わりに、アンケートをすばやく完了するために回答をランダムに選択したことを意味します。
回答者がアンケートに回答するのにかかる期間の中央値から 2 つ以上の標準偏差があり、アンケートで少なくとも 100 件の回答を収集する必要がある場合、回答にはフラグが付けられます。除外された回答、プレビュー回答、およびテスト回答100件に対してカウントされません。
考えられるボット
Googleの目に見えないreCaptcha技術を用いることで、回答が人間ではなくボットから寄せられた可能性を検出できる。ボット検出を有効にすると、埋め込みデータフィールド「Q_RecaptchaScore」で各回答者にスコアが割り当てられ、回答がボットから取得された可能性が示されます。このスコアが 0.5 未満の場合、応答にボットフラグが設定されます。
ボットの防止
ボットがアンケートに回答する可能性を減らすには、いくつかの方法があります。
- 分岐ロジックでQ_RecaptchaScoreを使用してボットをアンケートの最後に送信するか、またはボットを完全に除外します。
- アンケートの最初にCAPTCHA認証の質問を使用します。
- パネルに配信する場合は、認証機能またはパスワードを使用して、アンケートに参加できるユーザーを制限します。
- アンケートのセキュリティオプションを調整してください。
回答者が複数回アンケートに回答しました
ヒント：重複している可能性のある回答は、アンケートオプションで次のうち少なくとも1つが選択されている場合にのみフラグを付けることができます。
場合によっては、ユーザーがアンケートに複数回回答を試みることがあります。調査の目標に応じて、重複は、再犯者のフィードバックに結果をバイアシングすることで、データの品質を低下させることができます。
有効にした調査オプションに応じて、回答が重複としてフラグ付けされる方法は 2 つあります。
- RelevantID が有効です。Q_RelevantIDDuplicateScore フィールドが 75 以上です。
- 複数送信の防止が “回答にフラグ設定:” に設定されている場合、Q_BallotBoxStuffing フィールドは “true” と等しくなります。
繰り返しの回答を禁止する
アンケートの設定方法によっては、データ収集を開始する前に回答の重複を防ぐことができます。
- 回答者が分かっている場合は、アンケートを回答者にメールで送信します。
ヒント：誰も匿名リンクを使用できないようにするには、 招待者のみへのアンケートアクセス.
- 回答者がわかっている場合、または組織でシングルサインオン（SSO）を使用している場合は、認証機能を使用し、やり直しを無効にします。
- ［匿名リンクで複数の送信を禁止する］を使用する場合は、［アンケートを終了］または［リダイレクト］オプションを選択します。
ヒント：匿名リンクを使用している場合、RelevantIDを有効にしても重複はすぐには削除されませんが、データ収集の終了後に重複を削除できるため、データ品質が強化されます。
低い合計完了率
回答者がアンケートを始めてから24時間以内に終了しない場合、戻ってアンケートを完了できない可能性があります。こうなるほど、アンケートの書き方やフォーマットに関する何かが回答者を遠ざけている可能性が高くなります。
完了した回答を 100 件以上収集した後にのみ、アンケートの完了率が悪いことを示すフラグを付けることができます。（未完了の回答と進行中の回答は除外されます）また、直近 24 時間以内に回答が開始されていない場合、完了率にフラグは設定されません。（これには完了した回答、不完全な回答、進行中の回答が含まれます）これにより、数カ月前に調査で回答の収集が停止された場合に、不十分な回答に対して偽陽性が生じることがなくなります。
24 時間完了率がフラグ設定されている場合
次の計算により、調査の完了率が低いと判断されました。
(現在時刻から24時間開始して完了した調査の数) / (現在時刻から 24 時間で開始された調査の数)
- マイナー：過去24時間以内に開始された回答のうち、完了していないのは1～9%のみです。
- 中程度：過去24時間以内に開始された回答の10～20%が完了していません。
- 重大：過去24時間以内に開始された回答の21%以上が完了していません。
アンケートの再設定
完了率が低い場合は、調査の作成方法に問題がある可能性があります。アンケートを再設定して完了率を向上させる際には、アンケートに最初に割り当てられたiQスコアExpertReviewを考慮することが重要です。次のページには、ExpertReview フラグのすべての問題に関するアドバイスが含まれています。
低い合計完了率
アンケートの完了率が悪いほど、アンケートの記述やフォーマットに関する何かが回答者を遠ざける確率が高くなります。
完了した回答を 100 件以上収集した後にのみ、アンケートの完了率が悪いことを示すフラグを付けることができます。(インポートされた回答、未完了の回答、および進行中の回答は除外されます。)
全体完了率がフラグ設定されている場合
アンケートは、
（完全なアンケート回答の合計数）/（記録された回答の合計数＋進行中の回答の合計数）を計算することで完了率が低いと判断されました
- マイナー：過去24時間以内に開始された回答のうち、完了していないのは1～9%のみです。
- 中程度：過去24時間以内に開始された回答の10～20%が完了していません。
- 重大：過去24時間以内に開始された回答の21%以上が完了していません。
アンケートの再設定
完了率が低い場合は、調査の作成方法に問題がある可能性があります。アンケートを再設定して完了率を向上させる際には、アンケートに最初に割り当てられたiQスコアExpertReviewを考慮することが重要です。次のページには、ExpertReview フラグのすべての問題に関するアドバイスが含まれています。
機密情報を含む回答
回答者に回答者に関する機密情報が含まれる場合があります。電話番号から社会保障番号まで、任意の電話番号を指定できます。どの組織にも、機密性を考慮した独自のコンテンツ標準があります。回答者が入力した情報は機密すぎて分析に含めることができないため、このデータをデータセットから除外したい場合があります。
ブランドの設定によっては、機密情報も回答から編集される場合があります。この場合、機密情報はアスタリスクに置き換えられ、機密情報を取得する方法はありません。分析に編集済み情報を含む回答を含めるかどうかは、ユーザー次第です。
機密データの収集の防止
回答者は自由回答でプロンプトを表示せずに機密情報を提供する場合がありますが、機密データの違反を防ぐ最善の方法は、個人情報を求めていないことを確認することです。アンケートからこれらの種類のリクエストを削除する方法については、「機密データの問題の解決」を参照してください。
ブランド管理者の場合は、編集を機密データポリシーに追加することを検討してください。これにより、アンケート作成者が回答者に関する機密情報にアクセスできないようにすることができます。編集する機密トピックと編集しない機密トピックを選択できます。
あいまいなテキスト
自由回答欄フィールドにあいまいなテキストを入力した回答者にフラグが設定されます。あいまいなテキストには「gibberish」または回答者がランダムな文字や記号を入力して質問に回答するケースが含まれます。あいまいなテキストは、英語 (US、UK)、スペイン語 (ES、ES-ES)、フランス語 (FR、FR-CA)、ドイツ語 (DE)、ポルトガル語 (PT、PT-BR)、およびイタリア語 (IT) で検出することができます。別の言語で提供される回答、および頭辞語（CX など）を含む回答にはフラグが付けられません。
あいまいな応答の防止
この動作を完全に防ぐ方法はありませんが、回答者が自由回答形式の質問により高い品質の回答を提供するように促す方法があります。
- すべての回答者に適用されない質問を非表示にする：回答を強制したために回答者があいまいなテキストを入力しても、質問の内容が該当しないことがあります。たとえば、一般母集団を測量しているものの、回答者に子供について質問を始める場合、アンケートに回答する人のうち、これらの質問が適用されない人がいる可能性があります。一般的な質問から始めると、世帯内の子供に関する質問を非表示にすることができます（子どもはいますか？）。回答者の回答を使用して、以下の質問の分岐、表示、またはスキップロジックを設定します。
- 質問が一般的すぎないことを確認してください。回答者に自由回答欄を提供する場合、回答者は探しているデータの種類に関するガイダンスを必要とすることがよくあります。プロンプトが広すぎる場合、回答者は回答方法がわからない場合があります。
例：「追加のコメントを入力しますか？」は、「サポート体験に関してご意見を追加したいことはありますか？」ほど具体的ではありません。後者は、一般的な製品または会社のフィードバックではなく、サポートチームでの特定のエクスペリエンスに関するフィードバックを求めることを示します。
- 該当する場合、回答が特定の形式に適合している必要があります。たとえば、メールアドレスを要求する場合は、質問にコンテンツ検証を追加できます。
あいまいなテキストを含む回答のフラグ設定
ExpertReviewはデフォルトではこれらの種類の回答にフラグを設定しませんが、次の手順でオンにすることができます。
- ［データと分析］タブの［データ］セクションが表示されていることを確認します。
- 回答品質をクリックします。
- 提案をクリックします。
- あいまいなテキストを有効にします。
この指標に基づく回答にフラグを設定しない場合は、同じ手順でこの設定を無効にすることができます。この分析を有効にすると、現在使用しているアンケートにのみ適用され、アカウントのすべてのアンケートを対象としないため、必要に応じて回答品質分析をカスタマイズできます。
あいまいな回答で質問を特定する
回答にフラグが設定されているかどうかに関係なく、回答にあいまいなテキストがあるかどうかや、影響を受ける特定の質問について、より具体的な情報を取得することができます。クアルトリクス内のデータを表示するには：
- ［データと分析］タブの［データ］セクションが表示されていることを確認します。
- [列] 選択リストをクリックします。
- ［埋め込みデータ］を選択します。
- 以下の項目を選択します。
- Q_AmbiguousTextPresent：アンケートの回答にあいまいなテキストがあったかどうか。これは、アンケートの任意の自由回答形式の質問に答えることができます。0は［いいえ］、［1］は［はい］を示します。
- Q_AmbiguousTextQuestions: あいまいな回答を受け取った特定の質問。これは、編集可能な質問番号ではなく、内部の QID として提供されます。
ヒント：QIDを検索するには、内部ID番号で質問に番号を自動採番します。番号付けは後でいつでも戻すことができます。または、これらの変更を公開しないことを選択することもできます。
- これらの列はデータに表示されます。
未回答の質問のパターンはありません
アンケート回答者が多くの質問に回答しなかった場合でも、回答にはフラグが設定されます。回答は、表示された質問の 30% 以上が未回答のままになった場合にフラグが設定されます。これにより、わずかなミスや、1 つの無関係な質問をスキップするための意図的な決定にフラグが付けられません。
未回答の質問パターンの防止
回答者が質問をスキップする傾向があるとフラグ設定されている場合、以下の原因が考えられます。
- 質問は対象者には関係ありません。サンプルを選ぶことは、調査を行う上で非常に重要なステップです。アンケートを非常に一般化された対象者に配信すると、聞き手に答えられない質問をしてしまうことがあります。たとえば、ワークスペースの人間工学で人口を測量する場合、おそらく現在失業している回答者は含めないでください。配信サンプルを制御できない場合は、除外を設定して無関係な回答者を削除することを検討してください。
- 質問が明確ではありません。適切な質問をしている可能性がありますが、あなたの言葉は回答者にとってややこしい場合があります。できるだけ短く明確にするために、これらの質問を書き換えてください。受動的な音声ではなく、アクティブボイスを使用してください。
- 回答者はできるだけ早くアンケートを故意に終了しようとしています。あいまいなテキストと直線回答を使用することで、アンケートを終了することもできます。回答者がすべてのアンケート質問に回答するように促すには、質問に検証を追加することを検討してください。回答者に各質問に回答させるように強制したり、アンケートのページを終了したときに未回答の質問に戻るようメッセージ要求したりできます。
ヒント：回答者の疲労が要因であるかどうかを検討することも重要です。
未回答の質問のパターンによる回答のフラグ設定
ExpertReviewはデフォルトではこれらの種類の回答にフラグを設定しませんが、次の手順でオンにすることができます。
- ［データと分析］タブの［データ］セクションが表示されていることを確認します。
- 回答品質をクリックします。
- 提案をクリックします。
- 未回答の質問を有効にします。
この指標に基づく回答にフラグを設定しない場合は、同じ手順でこの設定を無効にすることができます。この分析を有効にすると、現在使用しているアンケートにのみ適用され、アカウントのすべてのアンケートには該当しないため、必要に応じて回答品質分析をカスタマイズできます。
特定と質問：回答者が回答しなかった
回答にフラグが設定されているかどうかに関係なく、スキップされた質問、および調査の未回答のままになった質問の割合 (%) について、より具体的な情報を取得することができます。クアルトリクス内のデータを表示するには：
- ［データと分析］タブの［データ］セクションが表示されていることを確認します。
- [列] 選択リストをクリックします。
- ［埋め込みデータ］を選択します。
- 以下の項目を選択します。
- Q_UnansweredPercentage：回答者が回答しなかったアンケートの質問の割合（%）。これらの質問のみが、この値にカウントされます。これは比率として表されます。たとえば、100% は 1、66.7% は 0.667 です。
- Q_UnansweredQuestions: 回答されなかった特定質問。これは、編集可能な質問番号ではなく、内部の QID として提供されます。
ヒント：QIDを検索するには、内部ID番号で質問に番号を自動採番します。番号付けは後でいつでも戻すことができます。または、これらの変更を公開しないことを選択することもできます。
- これらの列はデータに表示されます。
直線回答
直線的回答とは、同じ回答をマトリックス表の下に入力して、質問を迅速に解決することです。たとえば、回答者は、どのように感じているかに関係なく、すべての記述に対して常に最初の回答を選択できます。
回答者は、特にスピードやボットではなく、アンケート開始時の回答が普通だった場合、疲労しているために直線的になることがあります。
直線回答を含む回答にフラグを設定
ExpertReviewはデフォルトではこれらの種類の回答にフラグを設定しませんが、次の手順でオンにすることができます。
- ［データと分析］タブの［データ］セクションが表示されていることを確認します。
- 回答品質をクリックします。
- 提案をクリックします。
- 直線回答を有効にします。
この指標に基づく回答にフラグを設定しない場合は、同じ手順でこの設定を無効にすることができます。この分析を有効にすると、現在使用しているアンケートにのみ適用され、アカウントのすべてのアンケートには該当しないため、必要に応じて回答品質分析をカスタマイズできます。
回答者が直線に並べた質問の特定
回答者に直線回答のフラグを付けるには、以下の両方が必要です。
- 少なくとも 3 つのライカートマトリクステーブル（ステートメントではなく質問全体）をストレート線で囲む
- アンケートのマトリックス表の 80% に直線化
ただし、より深い分析を行う場合は、行列の数、および直線化された質問を評価することができます。Qualtrics内でデータをスキップするには：
- ［データと分析］タブの［データ］セクションが表示されていることを確認します。
- [列] 選択リストをクリックします。
- ［埋め込みデータ］を選択します。
- 以下の項目を選択します。
- Q_StraightliningCount: 回答者に直線的に並べられたマトリックス質問の数。
- Q_StraightliningPercentage：回答者が直線的に並べたアンケートのマトリックス表の割合。これは比率として表されます。たとえば、100% は 1、66.7% は 0.667 です。
- Q_StraightliningQuestions: 直線的な質問です。これは、編集可能な質問番号ではなく、内部の QID として提供されます。
ヒント：QIDを検索するには、内部ID番号で質問に番号を自動採番します。番号付けは後でいつでも戻すことができます。または、これらの変更を公開しないことを選択することもできます。
- これらの列はデータに表示されます。
