評価研究とは何ですか？
評価研究は、プログラム評価としても知られていますが、特定の方法ではなく、研究目的を指します。 評価研究とは、目標を達成するために費やした時間、資金、労力、資源の価値やメリットを体系的に評価することです。 従来の社会調査で使用されるのと同じ方法の多くを使用するが、組織の文脈の中で行われるため、チームのスキル、対人関係スキル、管理スキル、政治的な賢さなど、社会調査ではあまり必要とされないスキルが必要とされるのである。 また、評価研究は、利害関係者の利益を念頭に置く必要があります。
評価研究は応用研究の一種であるため、何らかの実世界での効果を意図して行われます。 調査や実験など、多くの方法を用いて評価研究を行うことができる。 データ分析と報告からなる評価研究のプロセスは、組織、プロセス、プロジェクト、サービス、および/またはリソースに関するデータを収集する、厳密で体系的なプロセスです。 評価研究は、知識と意思決定を強化し、実用化につなげます。
なぜ評価研究を行うのか
ほとんどの評価の共通の目標は、対象者から有意義な情報を引き出し、スポンサー、寄付者、顧客グループ、管理者、スタッフ、その他の関連する構成員など評価者に価値ある洞察を提供することです。 多くの場合、フィードバックは、意思決定に役立つものであれば、有用であると認識される。 しかし、評価研究は、必ずしも他に応用できるようなインパクトを与えるとは限らず、短期的な意思決定に影響を与えることができない場合もある。 また、当初は影響力がないように見えても、状況が好転したときに遅れて影響力を発揮することも、同様にある。 それにもかかわらず、評価研究の主要な目標は、測定可能なフィードバックを体系的に活用することによって意思決定を改善することである、という一般的な合意があります。
以下に、評価研究の利点をいくつか挙げます。
- プロジェクトやプログラム、その運営に関する洞察を得られる
評価研究によって、何がうまくいき、何がうまくいかないのか、過去と現在の状況と向かうべき方向が把握できる。 改善すべき点を見つけ、強みを特定することができます。 つまり、何にもっと力を入れるべきか、ビジネスに脅威はないかを把握することができるのです。 また、現在、市場にまだ開拓されていない隠れた分野があるかどうかを調べることもできます。
- Improve practice
顧客によりよいサービスを提供するためには、過去のパフォーマンスを測定し、何が問題だったのかを理解することが不可欠です。 双方向のコミュニケーションでない限り、提供するものを改善することはできない。 評価調査は、従業員や顧客がどう感じているか、何か変えたいと思うことがあるかどうかを表明する機会を提供します。 また、成功の可能性を高めるように、実践を修正したり採用したりすることもできます。
- Assess the effects
取り組みを評価すると、目的や目標をどの程度達成できているかがわかります。 評価によって、意図した利益が本当に対象者に届いているのか、届いているのであれば、どれだけ効果的に届いているのかを測定できます。
- Build capacity
評価によって、需要パターンを分析し、さらに資金やスキルアップ、業務の効率化が必要なのかを予測できます。
評価調査の方法
すべての市場調査の方法は、データの収集と分析、情報の有効性に関する判断、およびそこから関連する推論を導き出すことを含みます。 評価研究は、データ収集技術の使用や統計手法の適用を含む、計画、実施、結果の分析で構成されています。
非常に一般的な評価方法には、入力測定、出力またはパフォーマンス測定、影響または結果評価、品質評価、プロセス評価、ベンチマーク、標準、コスト分析、組織効果、プログラム評価法、LIS中心の方法などがあります。 また、記述的研究、形成的評価、実施分析など、必ずしも意味のある評価にはならないタイプもいくつかある。 評価研究とは、どちらかというと評価の情報処理やフィードバックの機能を重視するものである
これらの方法は、量的方法と質的方法に大別される。
定量的方法
定量的研究方法の成果は、以下の質問に対する答えであり、目に見えるものを測定するために使われます。
- いくつ？
- 誰が関与した？
定量的なデータを集めるには、調査、アンケート、世論調査などが最適な方法です。 また、プレテストやポストテストを作成したり、既存の文書やデータベースをレビューしたり、臨床データを収集することもできます。
アンケートは、社員や顧客の意見、フィードバック、アイデアを収集するために使用され、さまざまな質問タイプで構成されています。 対面または電話、郵便、あるいはオンラインで実施することができます。 オンライン調査は、人間の介入を必要としないため、はるかに効率的で実用的です。 調査結果は、リサーチツールのダッシュボードで確認でき、年齢、性別、場所など、さまざまな要素に基づいたフィルター基準を使って、さらに深く掘り下げることができます。 また、アンケートの設問に分岐、ノルマ、連鎖調査、ループなどの調査ロジックを保持し、アンケートの作成と回答の両方にかかる時間を短縮することができます。 また、統計式を含むレポートを多数作成し、会議で吸収しやすいデータを提示することができます。 リサーチツールの仕組みや自分に合っているかどうかを知るには、今すぐ無料アカウントに登録しましょう！
定量データは、例えば非営利イベントに参加した人の数、大学の新しいコースに登録した人の数など、取り組みの深さと広さを測定するものです。 プログラムの前後に収集された定量的データは、その成果や影響を示すことができます。
評価研究に使用する定量的データの精度は、サンプルがどれだけ集団を代表しているか、分析の容易さ、その一貫性に依存します。 量的手法は、質問の枠組みが正しくなく、適切な対象者に配布されないと失敗することがある。 また、定量的なデータは文脈を理解することができず、複雑な問題には適さない場合があります。
詳しくはこちら。 定量的市場調査。
Qualitative methods
Qualitative research methodsは、定量的手法では解決できない問題、すなわち無形の価値を測定するために使用されます。
- 付加価値は何か
- 当社のサービスにどの程度満足しているか
- 当社を友人に推薦する可能性はどの程度か
- 何があなたの経験を改善するか
質的データは観察、インタビュー、ケーススタディ、フォーカスグループを通じて収集されます。 質的調査の作成手順としては、調査、比較対照、パターンの把握などがあります。 分析者は、テーマを特定し、類似のデータをクラスタリングし、最終的に意味のあるポイントに還元した後に結論を出します。
観察は、一般的に定量的手法では発見できない社会的背景だけでなく、行動を説明するのに役立つかもしれません。 行動やボディランゲージの観察は、参加者を観察したり、音声やビデオを記録することによって行うことができる。 構造化インタビューは、コントロールされた条件下で、一人またはグループで行うことができ、また、自由形式の質的研究質問をすることもできます。 質的調査の方法は、人の認識や動機を理解するためにも使われます。
この方法の強みは、グループディスカッションによってアイデアが提供され、議論が起こるにつれて話題が連鎖し、記憶が刺激されることです。 質的データの精度は、文脈のデータが複雑な問題を説明し、量的データをいかに補完するかにかかっています。 What “の答えを得た後、”Why “と “How “の答えを得るのに役立ちます。 評価研究における質的データの限界は、主観的であること、時間がかかること、コストがかかること、分析と解釈が難しいことです。
詳しくはこちら。 定性的市場調査。
Survey Softwareは、どちらの評価調査方法にも使用することができます。 上記の評価調査用のサンプル質問を使用し、調査ソフトを使用して数分でアンケートを送信することができます。 調査用ツールを使用すると、アンケートの作成から、連絡先のインポート、アンケートの配布、調査を支援するレポートの作成までのプロセスを簡略化できます。 それらは、評価されるトピックを定義します。 評価研究の質問を用意しておくと、時間と費用を節約できるだけでなく、収集するデータ、分析方法、報告方法を決めやすくなります。
評価研究の質問は、計画段階で作成し合意する必要がありますが、既製の研究テンプレートを使用することもできます。
プロセス評価リサーチクエスチョンの例：
- 当社の製品を1日に何回使用しますか？
- すべての関係者から承認を得ましたか？
- システムから問題を報告することは可能でしょうか？
- システムからフィードバックを送信できますか。
- 各タスクは標準作業手順通りに行われましたか。
- 各タスクを実施する上で障害となったものは何ですか。
- 改善点は見つかりましたか？
成果評価リサーチクエスチョン例：
- 当社の製品にどのくらい満足していますか？
- プログラムは意図した成果を生み出しましたか？
- 意図しない成果はありましたか？
- プログラムは参加者の知識を増やしましたか？
- プログラム参加者はコース開始前から就職可能でしたか？
- プログラム参加者はコース終了後に就職するためのスキルを持っていますか？
- プログラムに参加しなかった人に比べて参加者の知識は向上していますか？