DEやってみよう！_ver1.5

DEやってみよう！

今の積み重ねでも、

ありたい未来から

の逆算でも

どっちでもOK！

従来型の評価のプロセス

例えば、質的データを含めたデータの収集方法は以下のようなものがあります。

　●文献、既存資料のレビュー

　●質問紙調査（アンケート調査）

　●インタビュー調査

　●グループアプローチ

　●観察

　●テスト/測定

DEが実現を目指すもの

関係性の構築

伴走先の団体と関係性をつくりながら、事業のことを知っていこう

(C) CSOネットワーク

制作：千葉直紀、中谷美南子、今田克司、伴走評価エキスパート育成プログラム2017年度研修受講生

（アドバイス協力：マイケル・クィン・パットン、ケイト・マッケグ）

伴走先団体との関係性の構築は、

仕事の基本。

すべての始まりであり、

終わりまでずっと続く。

事業の

イノベーション

姿勢

スキル

効果

全体像の把握

DE評価者は団体と

どう接していけば

いいのだろう？

①多面的に情報を集める

②相手にあわせた

　いろんな引き出しを使う

事業や外部環境のファクトを示すために、

相手が持っている情報を引き出すスキルが

必要。

絵でも、写真でも、音楽でも、ダンスでも、

引き出しをたくさん持っておいて相手に

合わせて使えるようになることが大切。

この時にも

『３つの質問』

は有効です

ソーシャル・イノベーションの実現

★組織の全体像を把握する

（組織の力学、空気感も含めて）

★個別インタビューにより、多角的に事実を把握する

（窓口や代表者一人にしかヒアリングしないのはNG）

★相手にあわせた引き出し方を使う

（そして相手が話しやすい環境づくりを）

★相手の想いに寄り添い、なんでも話を聞く

（一見関係ないことでも、大切な情報が眠っているかも）

★確信にせまるように、問いを繰り返す

全体像を

把握する

④システムとして把握する

③ゆらぎを捉える

現実世界は複雑だし、どんどん変化する。

単純化することのデメリットを知り、

複雑さとうまく付き合おう。

”ゆらぎ”とは、全てのモーメントにつながる変化の種です。そのためには、自分のかけている眼鏡の色（価値観のフィルター）を認識して、ファクト（事実）を見逃さないこと。評価者は客観的なファクト集めが大切なのです。

複雑系理論

システム

思考

★『ゆらぎ』を捉えるために、先入観なしに関わること。発生するのを待つこと。

★『ゆらぎ』を生み出すために、介入しすぎないこと。でも逆に『ゆらぎ』生み出すために、あえて介入しすぎることがあってもいいかもしれない。

事業の改善

まず評価のおさらい

組織の

キャパシティ

ビルディング

評価者への依頼が事業やプログラムでも、木を見て森を見ずにならないように、

伴走先団体が向き合う社会課題や事業・組織の全体像を捉えましょう

じゃあ「事業評価／プログラム評価」って？

あらためて「評価」とは？

社会プログラムの介入の効果を社会調査の方法で調査し、評価する手法である。

評価対象は、一般的に「事業」「プログラム」「プロジェクト」などである。

評価結果は、社会活動の改善のための情報源になる。

評価はある「評価対象の価値を引き出すもの」であり、「価値を見極めること」なんだね

DE評価者の役割

まず

はじめに

評価とは社会の

改善活動である

(スクリヴェン)

DEの冒険が

いきつく先は・・・

評価には

目的があって、目的に

よって評価のアプローチは異なるんだね。

外部評価者、

内部評価者の

いずれも成立

しうる

変遷する状況を

受けて、継続的にリアルタイムで

データにもとづく意思決定を

支援する

説明責任

（アカウンタビリティ）

の確保

知識創造

評価の目的

（主な用途）

プログラム

（事業、政策、活動）の開発・改善

組織学習、

意思決定過程

の強化

評価の

種類は？

ソーシャル・イノベーターに伴走する立場で、

イノベーターのチームの一員となる

革新・適合の

プロセスを

見える化する

長期的かつ　継続的な関係性が効果的

評価と◯◯の違いは？

DE（発展的評価）って？

Developmental Evaluation

評価とモニタリングの違い

評価と（社会科学系）調査の違い

評価者にもとめられる倫理とは？

計画（指標、外部条件等）に対して、

進捗を確認するのが「モニタリング」。

計画自体の妥当性も含め、成果を体系的に（因果関係等）を検証するのが「評価」。

「Xは良い」と価値判断を述べるのが「評価」。

「XはYを起こした」と因果関係を述べるのが「調査」。

　社会イノベーションなど、目的が固定されているというよりも目的自体が変化し、時間軸も予め設定されているというよりも流動的で前進的な対象を評価するための評価のやり方である。そこから得ようとするのは、外部への説明責任というよりも、イノベーションや変化から学習することである。

事業評価の３類型

評価とマネジメント支援の違い

複雑な状況に

対応するために

評価者に求めら

れる役割は？

一緒に走る

評価のあり方

”伴走評価”

が求められる

手法ではなく、

姿勢や考え方など一連の評価アプローチを示す

プログラムが成果を挙げるために組織に寄り添い、その都度フィードバックを行うのが「マネジメント支援」。

プログラムの成果を挙げるために、計画、実績（データ）を確認し、そこから原因と結果を検討するのが「評価」。

総括的評価

形成的評価

発展的評価

（Summutive Evaluation）

（Formative Evaluation）

（Developmental Evaluation）

事業の改善の余地があり、主に事業改善（improvement）を志向する

事業がすでに確立しており、主にアカウンタビリティ確保を志向し、判断（judgment）をあおぐ

事業（や事象）が発展・変遷・様変わり（development）しているときにふさわしく、主に発展・変革を志向する

評価者として

忘れては

いけないこと

（日本評価学会ホームページより）

右脳

左脳

直感力、音楽力、図形力、全体を見渡す力、

空間認知力(音楽、絵、想像、幾何学、総合力)

言語力、論理的に考える力、計算力、

物事の分析力、（言語力、分析、推理、数字）

例えば、

●価値の可視化が難しいアート分野

●震災復興のような状況変化が激しい分野

●環境保全などのネットワーク活動

●アドボカシー活動

●組織戦略

●多様なステークホルダーが関わる

「コレクティブ・インパクト」

などで、活用が期待されています。

特に、

★従来型評価の方法論

特に、

★関係性の構築

★評価ファリシテーション

★エンパワーメント

全体像を捉えたら

（捉えながら）、

従来の評価に入ろう

DEに向いている団体／事業は？

リッチピクチャー

ロジックモデル

いろんなスキルを

持つ評価者と

チームで実践する

のが理想だよ

すべてのNPO等の団体／事業がDEに向いているわけではありません。

以下のリストを参照して、チェックしましょう。

tea break

システム・マッピング

フォト・ボイス

DE評価者に

もとめられる

左脳と右脳のチカラ

肥満に関するシステム・マップ

Government Office for Science, UK Foresight Tackling Obesities: Future Choices - Building the Obesity System Map October 2007より引用

どんな団体／事業がDEに向いているの？

DEの道具箱

a)　社会的課題の解決にむけて、事業を通して持続的かつインパクトの

　　ある変化を目指しているか？

b)　事業をとりまく状況は複雑で、団体は次に何が起こるか、何を計画　　　　したらいいいか、見通しが困難な状況か？

c)　伴走先団体は積極的に評価に参加するための時間を確保し、評価者と　　　関係性を構築する意思があり、またそのためのキャパシティがあるか？

d)　評価者からの良いフィードバックも悪いフィードバックに対しても

　　前向きにうけとめられる土壌があるか？評価者のフィードバックを

　　もとに、現行を変えることに前向きか？

e)　事業内外の様々な状況を把握し、振り返り、失敗も含め学びの機会を

　　とらえ、それを得ることに重きを置いているか？ 

３つの質問シート

価値観ワーク

これだけは押さえたい！

DEの基本

状況の分析

*CSOネットワークが開発したオリジナルツールです。

さあ、DEをはじめるときに、

まずは伴走先団体の事業が

おかれた状況を見極めよう。

Paraire Huata (Te Ngaru Learning

Systems, 1995）

”肝心なものはレシピ”

　レシピがよければ、

　毎回ほぼ同じケーキが

　焼ける

状況の分類

実用重視の評価

の系譜

評価は役にたってなんぼ

DEの提唱者：

マイケル・クイン・パットン

子育てって・・・

ケーキを

焼く

ソーシャル・イノベーションとは、社会問題に対する革新的な解決法。既存の解決法より効果的・効率的かつ持続可能であり、創出される価値が社会全体にもたらされるものである。

サクセス・イメージ

私の伴走評価シート

単純

*CSOネットワークが開発したオリジナルツールです。

クリス・デイグルマイヤー氏

スタンフォード大学ビジネススクール

ソーシャルイノベーションセンター[当時]

子どもを

育てる

DE

３つの特徴

ロケット

を飛ばす

• 子どもを一人育てれば経験にはなるが、　　　下の子もうまくいく保証はない
• 専門能力は役立つこともあるが、　　　　　　すべての子どもに有効とはかぎらない
• 子どもは唯一無二の存在、　　　　　　　　　個として理解しなければならない。
• 子どもが置かれる環境（学校、友達など）は　さまざまであり変化するものとして　　　　　理解しなければいけない

まだまだたくさんあるよ。

たくさん知って、

相手にあわせて、柔軟に

使えるようになろう！

プリンシプルを大切にしよう

煩雑

複雑

ソーシャル・

イノベーション支援

複雑系理論の活用

イノベーションとは「やり方を大きく変える」ことであり、それを「見える化」し、促進し、支援するのがDEである

常に状況が生成中（予測困難である）で、

ダイナミックな動きが見られ（変化が早い）、非単線系の事象の連鎖（原因結果の

因果関係が特定できない）が見られる

現実世界で、いかに評価をおこなうか。

プリンシパルは、

組織の価値観にもとづいたガイドの役割を果たす。

それによって、望ましい考えや行動につながる。

DEの８原則

こんな複雑な

状況を捉える

ためにやる

ことは・・・

DEを実践する

ための道具は

どんなものが

あるの？

パットンと

一緒に８原則を整理したよ

①評価の目的は革新・適合・システム変更を

　支援すること

②評価の厳格さを兼ね備えること

③実用重視

④イノベーターに革新を気づかせること

⑤複雑系の考え方

⑥システム思考

⑦イノベーターとの共創

⑧タイムリーなフィードバック

『３つの質問』をしよう！

『３つの質問』を回し続けよう

by.ケイト・マッケグ

複雑な状況は「生成中」だし「予測困難」。

その中で予期せぬ事態にオープンでいるために、「課題」や「機会・可能性」に適応していくことが大切です。

これらの質問は、

・常に「状況」を把握し続ける

・常にそれらの「状況」を読み解こうとする

・そして、常に「状況」に適応しようとする

ものです。

DEは、目の前で起きていることを事業者に対して、リアルタイムにフィードバック、学習、意思決定、そして発展を支援するものです。この３つの質問サイクルをいかにたくさん、そして的確に行うかが、評価者としての仕事の質を左右するといっても過言ではないでしょう。

予測困難な将来ではなく、目の前の事実をみて、データを積み重ねていく

評価フィードバック

評価で得られたデータを相手に返すフィードバックをおこないます。

「こう出ましたけど、どう捉えますか？

ここからどういう意味を抽出しますか？」

と伴走先団体に問いかけるような、共創的なフィードバックを心がけるとよいでしょう。

答えは団体側が持っているし、

それを実行できると信じる姿勢が大切です。

相手に伝えるタイミングを意識しましょう。

（急ぐことも、待つことも）

サクセス（成功した状態）を

イメージしよう

評価対象の事業やプログラムが、

どんな状態となっていることが

成功ですか？

ありたい未来から逆算したバックキャスティング思考

評価報告書

データ分析

評価設問・評価指標の設定

評価結果の可視化

質的データを含めたデータの分析には、以下のような方法が使える。

評価目的の設定

いよいよデータを取るための、設問づくり。

伴走先団体側が知りたいことを、うまく言語化して

設問・指標に落としてみましょう。

評価調査（データ収集）

得られたデータを、相手が見やすいようにまとめましょう。

DEは、伴走先団体の気づきの支援とも言えるかもしれません。団体側の気づきを促すために、客観的なデータを示すことが必要で、数値やグラフのみならず、相手にあわせた見せ方を意識するとよいでしょう。

プログラムロジックが明らかになると、評価目的が明確になるのである。これが明らかになると、さらにWhatを捉えやすくなる

評価結果をまとめて報告書づくりに入ります。

このときに、評価報告書の”墓場”行きにならないように、以下の３点を意識しましょう。

①重要なステークホルダーの情報アクセスを

　保障する

②提言を協働で作成する

③活用を高める仕組みをつくる

１．事例分析/素材活用

　・何が起こっているのか、どう認識されているのかを

　　ありのまま捉えて活用する

２．カテゴリー化（分類）をする

　・同じ概念ごとにコーディング(キーワード付け)し、

　　分類する

３．モデル化する

　・情報相互の関係（因果関係/論理性）を概念化する　

　（KJ法やフローチャートなど）

＊質的データの場合には、量的データや第三者の意見による「裏づけ」も必要。上記以外の総合的な分析を行う

このとき、評価が伴走先団体にとって自分ごとになることが必要です。

評価者が一方的に設問をつくって

しまうのはNGです！

伴走先団体側が、この評価を通して知りたいことを言語化するための支援。

相手のことを知り、

引き出す姿勢が大切です。

二つの手法の比較

『事業評価コーディネーター研修』（日本NPOセンター、三好崇弘）講義資料より

Copyright 2018　CSO Network Japan All Rights Reserved.

この一連のプロセスで

大切にして欲しいことは

”相手の評価ニーズに

あわせる”こと。

なぜなら、

「評価は役になってなんぼ」

だからね。