71 〈 研 究 ノ0ト 〉
第4世
代 評 価
一 そ の 背 景 と評 価 手 法 を 中心 に一
百
海
正
一
序
日 本 経 営 情 報 学 会 「情 報 シ ス テ ム 評 価 の 研 究 部 会 」 は 当 初(1998>,「 情 報 シ ス テ ム の 評 価 に 関 す る 研 究 」 す る と い う セ 旨 で,情 報 シ ス テ ム の 評 価 に 関 す る 文 献 を 調 査 し よ う と し て 設 立 さ れ た 。 こ の な か でf我 々 メ ン バ ーllの 目 に と ま っ た の は,英 国 ラ ン カ ス タ ー 大 学 の ホ.___ム ペ ー ジ に 掲 載 さ れ て い るEvalu-ationofCooperativeSystems(MagnusRamage,1995)2}で あ っ た 。 こ の 文 献 は,コ ン ピ ュ ー タ 協 調 作 業 支 援 シ ス テ ムCSCW(ComputerSupportedCoopera-tiveW。rk,通 称CSCW)の な か で,評 価 の た め の 新 し い 方 法 論 を 提 案 し て い る だ け で な く,情 報 シ ス テ ム の み な ら ず,社 会 …般 の 改 革 プ ロ グ ラ ム を 対 象 と し て い る 。 ま た,従 来 の 評 価 方 法 の 多 く が,主 に 合 理 豆義 者 の 航 場 か ら,あ ら ゆ る 状 況 に 適 応 で き る 評 価 方 法 を 求 め て い る こ と,マ ネ ジ メ ン トや 情 報 シ ス テ ム 構 築 者 の 視 点 か ら 情 報 シ ス テ ム の 評 価 を 捉 え て い る こ と を 問 題 点 と し て あ げ て い る,, こ の 文 献 を 通 し て,我 々 は 評 価 に 関 す る 基 本 的 な 知 識 を 得 る こ と が で き た 。 こ の 著 者 が 評 価 に 関 し て,著 者 の 考 え に 近 い 文 献 と し て 「第4世 代 評 価(Egon G.CubaandYvonnaS.Lincoln,FourthGenerationEvaluation,SagePublicationInc., 1989)」 を あ げ て い る 。 「第4世 代 評 価 」 に 関 す る 文 献 解 読 と 討 議 を 重 ね た 結 果f情 報 シ ス テ ム 評 価 に 対 し て も,① 従 来 の 評 価 法 は,評 価 対 象 で あ る 「改 革 プ ロ グ ラ ム 」 に 関 す る 情 報 を 評 価 者 が 意 思 決 定 者 な ど に 提 供 す る こ と を 目 的 と し て い る の に 対 し,第4世 代 評 価 で は,「 改 革 プ ロ グ ラ ム 」 の 影 響 を 受 け る72商 糸xt:1論」叢 第37巻 第3写 全 て の 関 係 者 が,評 価 結 果 に 基 づ い て そ れ ぞ れ 適 切 な 行 動 を と る よ う に な る こ と を 目指 して い る,r2)情 報 シ ス テ ム の 開 発 は,組 織 に お け る あ る 種 の 改 革 を も た らす こ と に な る,な ど の 理 由 で 有 効 で あ る と 考 え る に 至 っ た 。 部 会 メ シ バ ー は,研 究 活 動 を 通 じて 共 有 し得 た 成 果 を,2000年 度 経 営 情 報 学 会秋 期 研 究 発 表 大 会(於 岩f県"11大)の ワ ー ク シ ョ ッ プ で 報 告 し,2001年6 月研 究 報 告書3)と して ま とめ る こ とが で きた 。 しか し,こ の 報 告 書 は 紙 面}なの 制 約 か ら,や や 総 花 的 に 書 か れ て い る,,そ こで,本 稿 は 筆 者 が 第4世 代 評 価 の 背 景 と評 価 ス テ ップ を 中 心 に ま と め な お した もの で あ る 。
1評
価 の 時 代
1)評 価 と は こ の 研 究 が,評 価 に 関 す る研 究 で あ る な ら ば,ま ず"評 価 と は な に か,.,に つ い て 定 義 す る 必 要 が あ る の で は な い か と思 わ れ る 。 しか し,こ こ で 「評 価 」 の 定 義 に つ い て 説 明 す る こ と は,こ の 研 究 の 中 心 テ ー マ で は な い 。 な ぜ な ら ば,こ の 研 究 は,評 価 活 動 を ど の よ う に進 め て 行 くべ きか,評 価 の 目的 は ・体 な に か,に 関 す る 論 議 が 中 心 で あ り,か つ 我 々(注:グ バ と リ ン カー ン達)は 「評 価 を"」E確 に"定 義 す る 方 法 は 存 在 しな い 」 と は 考 え る 。 さ ら に,我 々 は 「評 価 は}人 間 の 頭 の な か に存 在 す る構成 物(コ ン ス トラ クシ ョン)で あ る」,と 定 義 す る。 定 義 に 関 す る論 議 は そ の く らい に して,過 去100年 の 間 「評 価 」 と い う 言葉 の 意 味 が どの よ う に 変 化 して きた かfを 簡 挙 に ス ケ ッチ して み る,, 「評 価 」 の 意 味 は,皆 時 代 時 代 の 歴 史 的 な 文 脈,人 々 が 実 施 し よ う と した 目 的,評 価 に 関 す る 研 究 者 や 実 務 家 に よ っ て1.ｺLつ価 値 前 提,な ど を 反 映 して い る。 そ して,評 価 活 動 の 結 果 得 られ る構 成 物 は,時 代 を経 る につ れ,新 た な情 報 に 基 づ き,よ り洗 練 され た も の に な っ て きて い る 。 そ して,今 我 々 は 第4世 代 評 価 と呼 ぶ,新 しい 構成 物 を生 み 出 す 地 点 に 立 っ て い る。 も ち ろ ん,こ の よ う な評 価 に 関 す る コ ンセ ンサ スが 必 ず し も得 られ た わ け で は な い 。 そ れ は,以 前 か ら あ る 評 価 法 に 関 す る 評 価 と 同 じで あ る 。 しか し,我 々が 提 案 す る 第4世第4量 仕イ気こ言平イi面73 代 評価 に よ る構 成物 は,従 来 の 評価 法 か ら得 られ た構 成 物 が 持 って い た問 題 を 克服 す る,あ るい は 少 な く と も改 善す る もの であ る,と 思 う。 2)第1世 代 一 測 定 の 時 代 一一 今 日,我 々が 知 っ て い る 「評 価 」 は あ る 日突 然 現 れ た の で は な く,長 い 年 月 を 経 て,改 良 さ れ て き た 結 果 で あ る 。 早 くか ら評 価 に 影 響 を'チえ た もの の 中 に,小 学 生 の 持 っ て い る様 々 な 能 力 を 測 定 す る評 価 法 が あ 惹 J例 え ば,生 徒 が 授 業 で 学 ん だ 内 容 を ど の 程 度 理 解 した か を 知 る た め の テ ス トは ,既 に100年 以 上 の 歴 史 を持 っ て い る 。 な か で も,テ ス トを採 用 す る 要 因 の ・つ に ,ア メ リ カ 産 業 界 に お け る 科 学 的 な 管 理 法 の 出 現 が あ っ た 。 商 品 の 生 産 や サ ー ビ ス活 動 に お い て,人 間 が 重 要 な 経 営 資 源 で あ る とす る な ら ば,人 間 に よ る 作 業 を 出 来 る 限 り効 果的7効 率 的 に 管 理 す る の は経 営 管 理 者 の 役 割 で あ る}と 考 え られ て き た 。 こ の よ う な 考 え 方 は,1939年 レ ス リス バ ー ガ ー や デ ィ ク ソ ン(Roethlisberger &Dixson)に よ る ホ ー ソ ンL場 の 実 験 に よ っ て 批 判 さ れ る 頃 に は,科 学 的 管 理 法 の 考 え は,す で に学 校 全 体 に浸 透 して い た 。 す な わ ち,学 校 に 在 籍 す る 生 徒 は,校 長 が 管 理 す る学 校 とい う"工 場"で 処 理 す べ き"材 料"で あ る と 考 え ら れ て い た 。 そ して,テ ス トは 学 校 が 設 定 した"仕 様(教 育 目標)"を 生 徒 が 満 た し て い る か ど う か を 確 か め る た め の 手 段 で あ る,と 見 な さ れ た 。 当 時 の 教 育 目 標 は,主 と して 上 級 学 校 へ の 進 学 の 準 備 の た め で あ っ た 。 こ れ ら諸 要 因 に よ り,学 校 に お け る テ ス トは 著 し く普 及 し,1920年 代 か ら 1930年 代 に か け て 頂 点 に 達 した 。 特 に,1908年 よ り始 め られ た ア チ ー ブ メ ン ト ・テ ス トは,そ の 後 様 々 な 形 で 広 く実 施 され,今 日 に 至 っ て い る 。 ま た,1922年 出 版 さ れ た ス タ ン フ ォ ー ド ・ア チ ー ブ メ ン ト ・バ ッ テ リ ー (Stan#'ordAchievementBattery)に よ り初 め て,一 人 の 一生徒 が 複 数 の 科 目の な か で 相 対 的 に ど の よ う な 順 位 に い る か,を 評 価 す る こ と が 可 能 に な っ た 。1933年 に な る と,ミ ネ ソ タ 大 学 ゲ ル トル ー ド ・ヒ ル ド レ ッ ヒ(GertrudeHildreth) は,3,500以[_の メ ン タ ル テ ス トと評 価 尺 度 に 関 す る リ ス トを 公 表 し た 。 そ の
74商 経 論 叢 第37巻 第3}ナ 後,1945年 に 出 版 さ れ た 彼 女 の 文 献 に よ れ ば,そ の 数 は5,200を 越 え て い た 。 こ の 時 代 に は,FI測 定"と い う 言 葉 と"評 価"と い うa葉 は 同 じ意 味 で 使 わ れ て い た 。 評 価 者 の 役 割 は技 術 的 な も の で あ っ た か ら,調 査 対 象 と さ れ る どの よ う な 変 数 で も測 定 す る こ とが で き る よ う,利 用 可能 な全 て の 測 定 方 法 に熟 知 して い る こ とが 求 め られ た 。 注 目す べ き こ とは,評 価 を技 術 的 な もの で あ る とす る 第1肚 代 の 考 え 方 が, 今 で も根 強 く残 っ て い る 。 例 え ば,生 徒 が 高 校 を 卒 業す る た め,あ る い は 大 学 に 入 学 す る た め の 手 続 きの 一一部 と して,テ ス トに 合 格 す る こ とが 当 然 の こ と と して 要 求 され る こ とや,多 くの 国 に お い て 学 校 や 時 と して 一人 一入 の 教 師 を そ の 能 力 を ラ ン ク付 け す る た め に,こ の 種 の テ ス トが 使 わ れ て い る こ と か ら も明 ら か で あ る。 3)第2世 代 一 記 述 の 時 代 一 第2世 代 の 評 価 は,第1世 代 が 持 っ て い た 重 要 な 欠 陥 に よ っ て 引 き起 こ され た 。 す な わ ち,第1次 大 戦 終 」後 ま も な く,ア メ リ カ の 高 校 に,中 学 校 レベ ル の 教 育 しか 受 け て い な い 学 生 が 大 量 に 入 学 して きた 。 こ れ ら の 学 生達 は,現 行 の カ リキ ュ ラ ム で は,彼 ら の 要 求 を 満 た す こ とが で き な い と し,教 育 内 容 の 変 革 を 訴 え た 。 なぜ な ら,学 生 達 は 高 校 を,社 会 で 働 くhで 必 要 な ス キ ル を 身 に つ け る 場 所 で あ る,と 考 え て い た が,当 時 の カ リ キ ュ ラ ム で は こ れ ら学 生 の 要 求 を満 た す よ う な プ ロ グ ラ ム は提 供 さ れ て い な か っ た か らで あ る。 こ れ に 対 して,高 校 も履 修 単位 や 条 件 を変 え る な ど して,学 生 の 要 求 に 対 応 し よ う と した 。 しか し,こ の 変 更 に 対 す る 障 害 は,現 行 の カ ー ネ ギ ー ・ユ ニ ッ ト ・シ ス テ ムー す な わ ち 卒業 に 必 要 な科 目 と履 修 単 位 数 を 取 得 す る 規 定 一 が 大 幅 に 変 更 さ れ た 場 合,大 学 の 標 準 的 な カ リ キ ュ ラ ム に つ い て い け な い 高 等 学 校 卒 業 生 を 受 け 入 れ ざ る を え な く な る こ と を 恐 れ た 大 学(単 科 大学お よび総 合 大 学)で あ っ た 。 大 学 側 の 懸 念 に 対 し,そ の 懸 念 が 妥 当 で あ る か ど う か を 調 べ る プ ロ ジ ェ ク
第'4世 代 評 価75 ト8年 調 査 プ ロ ジ ェ ク ト と呼 ば れ た 一 が1933年 に ス タ ー ト した 。 調 査 の 旧 的 は,従 来 の カ リ キ ュ ラ ム 基 準 を 満 た して い な い 高 校 生 が 大 学 に 入 学 し た 場 合,は た して 大 学 の 授 業 に つ い て い け る か ど うか,を 調 査 す る た め で あ っ た 。 こ こで,8年 とい う調 査 期 間 が 選 ば れ た 理 由 は ,従 来 の 高 校 教 育 を 変 更 し た 場 合 ・ 高 校(公 ・私 の に 入 学 した 学 崖 が,4年 後 大 学 に 入 学 し,4年 間 の 大 学 教 育 に成 功 裏 に終 ∫す る こ とが 出 来 た か ど う か,を 調 査 す る た め で あ っ た 。 調 査 を 設 計 す る担 当 者 が 最 初 に 直 面 した 問 題 は,新 カ リ キ ュ ラ ム が 果 た して 意 図 した よ う に 機 能 して い る か ど うか,を 確 か め る た め の 評 価 法 を,ま ず 考 案 す る こ と で あ っ た 。 当時,調 査 プ ロ ジ ェ ク ト本 部 の あ っ た オ ハ イ オ 州LIJ_大 学 に ラ ル フ ・テ イ ラ ー(RalphW .Tyler)が い た 。 彼 は,そ の 後 この 調 査 に 携 わ る こ とに な っ た が,こ れ ま で の 伝 統 的 な 評 価 法 と は 大 き な違 い が 一つ あ っ た。 そ れ は 調 査 目的,す な わ ち 一 新 カ リキ ュ ラ ム の 開 発 が 確 か に 機 能 して い る か ど うか と い う"プ ロ グ ラ ム 評 価"一 を実 際 に確 か め る こ と で あ っ た ,,調 査 に 参 加 した 高 校 が,新 カ リキ ュ ラ ム を 開 発 す る に伴 いaテ イ ラ ー は新 プ ロ グ ラ ム が 定 め ら れ た 教 育 目標 を どの 程 度 達 成 して い る か,を 評 価 す る た め の 情 報 を収 集 した。 こ れ らの 情 報 は,旧 カ リキ ュ ラ ム と新 カ リキ ュ ラ ム に よ る 学 習 目標 に 対 す る達 成 度 の 違 い,新 旧 カ リ キ ュ ラ ム の 長所 と短 所 を 分 析 す る と と も に ,旧 カ リ キ ュ ラ ム の 改 善 と 見 直 しの た め に 利 用 さ れ た 。 この 評 価 プ ロ セ ス は ,今 日形 成 的 評 価(Formativeevaluation)と 呼 ば れ て い る が,新 カ リ キ ュ ラ ム が 適 切 な 成 果 を 生 み 出 して い る か ど うか,を 確 認 さ れ る まで,繰 り返 し実 施 され た 。 この 調 査 結 果 か ら,今 日第2世 代 と呼 ば れ る 評 価 法 が 出 現 した。 第2世 代 評 価 の 特 徴 は,あ らか じめ 定 め ら れ た 目標 に 対 す る 強 み と弱 み を 記 述 す る こ と に あ っ た 。 従 っ て,評 価 者 の 役 割 は 第1世 代 の 測 定 者 の 役 割 か ら 記 述 者 の 役 割 へ と変 わ っ た 。 た だ し,第1世 代 評 価 の 特 徴 で あ る技 術 者 と して の 役 割 り も,第 2世 代 で も同 じよ う に要 求 され た 。 そ して}第2世 代 で は"測 定 す るISと い う 仕 事 は,も は や 評 価 そ の もの で は な くて,評 価 者 の 仕 事 の な か で 使 わ れ る ツ ー ル の ・つ で あ る と再 定 義 され た,,
76商 経 論 叢 第37巻 第3号 4)第3世 代 一 判 定 の 時 代 第2世 代 評 価 は,目 標 指 向 の ア プ ロ ー チ で あ り,基 本 的 に は 評 価 対 象 に 対 し て 正確 に 記 述 す る こ と に あ っ た 。 ス テ ー ク(RobertStake)は1967年 教 育 評 価 に 関 す る 論 文(Thecountenanceof educationalevaluation)の な か で 丁 第2世 代 評 価 の 問 題 点 を 以 ドの よ う に 指 摘 し て い るC、 従 来 の 評 価 法 は,評 価 に お け る判 定 の 役 割 を無 視 して い る 。 教 育 者 に よ る視 点 と評 価 者 博 門家)に よ る 視 点 と は 同 一の 視 点 で は な い 。 評 価 の 専 門 家 は, 自分 自 身 を 記 述 者,す な わ ち 生 徒 の 素 質,教 育 環 境 成 績 な ど を1E確 に 記 述 す る 者 で あ る}と 考 え て い る,,こ れ に 対 し,教 師 や 学 校 の 管 理 者 は,生 徒 に 対 し て 評 価 者 と して の 役 割 は持 っ て い る も の の,生 徒 を 外 的 基 準 に照 ら して,生 徒 を 適 切 に 評 価(測 定)さ れ る こ と を 期 待 して い る。 評 価 に は,"記 述"と"判 定"は 何 れ も不rrJ欠 な も の で あ る 。 ワ ー ス ン と サ ン ダ ー ス(Worthen&Sand-ers)も,1973年 出 版 の 「教 育 評 価:理 論 と実 戦(Educationalevaluation=Theory andpractice)」 の な か で,"記 述"と"判 定"の=つ は,評 価 にお け る 基 本 的 な 行 為 で あ る,と 述 べ て い る 。 ・判 定 ・ と い う行 為 を 評 価 に 含 め るべ き だ,と い う ス テ ー ク 等 の 一i三張 は ・ 第 3世 代 評 価 と1呼ば れ る 評 価 の 出現 を も た ら した 。 す な わ ち,評 価 者が 評 価 に お け る 技 術 的 ・記 述 的 機 能 の 他 に,"判 定"と い う役 割 を 併 せ 持 つ 世 代 で あ る 。 評 価 に お け る"判 定"と い う機 能 は,当 時 の 専 門 家 か ら広 く支持 され た 。 そ し て,彼 ら は 従 来 の 評 価 法 が 対 処 で き な か っ た 問 題 点 を 幾 つ か 指 摘 した 。 まず 第 1に 評 価 目標 自 身 に 問 題 が あ る。 評 価 目標 も評 価 結 果 と同 じ よ う に 評 仙 の 対 象 とす べ きで あ る,と い う一i脹で あ る。 第2に,評 価 活 動 の 結 果,評 価 を行 う際 に,な ん らか の 判 定 基 準 が 必 要 に な る。 しか しな が ら,判 定 に は な ん らか の 価 値 観 が 伴 う 。 従 来 評 価 の よ う に 科 学 的 で,価 値 観 か ら 独 立 し て い る と 考 え ら れ て きた 業 務 に,価 値 観 を伴 う基 準 を 導 人 す る こ とは,当 時 の 評 価 者 に と っ て 受 け 入 れ が た い こ とで あ っ たC/さ らに,評 価 に 判 定 が 必 要 で あ る とい う こ と は, 評 価 を 行 う 判 定 者(審 判 掬 が 必 要 に な る。 しか し,評 価 者 は,評 価 者 自 身 判
第4世 代 評 価77 定 す る 、k場で 行 動 す る だ け の 能 力 を持 ち あ わ せ て い な い,と 感 じて い た 。 さ ら に 評 価 者 は,判 定 著 と して 行 動 した 場 合,そ の 結 果 受 け る か も しれ な い 政 治 的 リ ス ク を恐 れ た 。 そ れ に も関 わ らず 客 観 的 な 理 由 で,評 価 者 は 判 定 す る と い う 役 割 を 受 け 入 れ ざ る を 得 な くな っ た 。 5)第1世 代 か ら第3世 代 評 価 に 共 通 す る 問 題 点 評 価 に 関 す る こ れ まで の 論 議 は 比 較 的 簡 単で あ っ た が,評 価 の 成 果 で あ る構 成 物 に 含 まれ る 内 容 は,そ の 対 象 範 囲 の 広 さ と洗 練 さ両 面 に お い て,第1世 代 か ら第2世 代 へ,第2世 代 か ら第3世 代 へ と 一歩 ・歩 前 進 して い る(図 表1)。 1981年 グ バ ・リ ン カ ー ン ら の 「効 果 的 な 評 価(EffectiveEvaluation)」 に よ れ ば,第1世 代 を 特 徴 づ け る 適 切 な測 定 手 法 が 開 発 され る まで は,各 個 人 の デ ー タ を体 系 的 に 収 集 し,分 類 す る こ と は 出 来 な か っ た。 第2世 代 に 人 る と,評 価 プ ロ グ ラ ム,評 価 活 動 に 必 要 と さ れ る マ テ リ ア ル(材 料 〉,評 価 に 関 す る 政 策 と組 織 的 な 取 り組 み の 必 要性 な ど,多 くの 人 間 以 外 を 評 価 対 象 とす る 評 価 法 を 開 発 した 。 第3世 代 で は,評 価 対 象 の メ リ ッ ト(内 的 あ る いは 本 質的 な価 値)と そ の 価 値(外 的 ある いは 文脈 的価 値)の 両 面 に わ た る 判 定 を 導 く よ う な 評 価 が 求 め られ る よ う に な っ た 。 しか し,こ れ ら 第3世 代 ま で の 評 価 を す べ て 一 つ の グ ル ー プ と 見 な し た と き,さ ら な る 改rl∫が 必 要 で は な い か,と い うあ る 種 の 共通 す る 問 題 点 を 抱 え て 図表1各 時代 にお ける評価 とその要 点 評価 目的例 評価 音の役割 成 果例 第1【1ヒ代 与 え ら れ た カ リ キ ュ ラ ム ドで 学 習 目標 に 対 す る 生 徒 の 理 解 度 測 定 者 (測 定) ア チ ー ブ メ ン トテ ス ト に よ る 標 準 的 な 評 価 尺 度 評 価 項Li 第21{ヒ 代 ユ ラ 旧 カ リ キ ュ ラ ム の 問 特定 の 対す 題点 と改 善点 さ れ た 新 カ リ キ ュ ラ ム 導 人 有効性 後の 追跡 調査 記述 者 判定 者 (測 定+記 述) (測 定 ス ト 8年 調 査評価 幾つか 価 プ ロ ジ ェ ク ト,籔 告 意思決 書 目標 自 第3世 代 特 定 の 政 策 の ドで 策 定 さ れ た カ リ キ ュ ラ ム の (測 定+記 述+判 定) 幾 つ か の 判 定 モ デ ル 意 思 決 定 モ デ ル 目 標 自 由 モ デ ル
78商 経 論 叢 第37巻 第3}」 ・ い た 。 そ の 第1は,管 理 主義 へ の 傾 斜 が あ げ られ る 。 こ こ で,管 理 者 とい う 言葉 に は さ ま ざ ま な 人 が 含 ま れ る が,こ の 場 合 評 価 を 依 頼 した り,資 金 を提 供 す る ク ラ イ ア ン トあ る い は スポ ンサ ー,ま た は 評 価 レポ ー トに 基 づ い て 実 行 す る 責 任 を もつ エ ー ジ ェ ン トを指 して い る 。 後 者 の 例 と して,学 校 に お け る 理 事 会 の メ ンバ ー,教 育 長,カ リ キ ュ ラ ム改 革 を検 討 中 の 学 校 長 な どが あ げ ら れ る 。 一一一般 に,評 価 者 が 評 価 プ ロ ジ ェ ク トを 引 受 け,指 示 を 受 け,そ の ア ウ トプ ッ トで あ る報 告 書 を提 出 す る先 は 管 理 者 で あ る。 管 理 者 と評価 者 との 関 係 は,時 に は 以 ドの よ う に,幾 つ か の 望 ま し くな い 結 果 を 生 み 出 す 。 ① 管 理 者 と 評価 者 の 関 係 か ら,管 理 者 は 評価 結 果 に 対 して責 任 を 負 わ な く て す む 。 管 理 者 が 評 価 の 外 に い る 限 り,管 理 者 と して の 資 質 や 能 力 は 問 題 に な ら な い し,評 価 の 結 果,何 を ア ウ トプ ッ ト し よ うが,そ の 責任 は 問 わ れ な い 。 も し,問 題 が 生 じた 場 合 に は,評 価 者 に 責 任 を転 化 す れ ば よい か らで あ る。 ② 典 型 的 な 管 理 者 と 評価 者 の 関 係 は,権 限 を持 っ て い る もの と,持 っ て い な い も の の 関 係 に あ る。 管 理 者 は,評 価 に際 しTど の よ う な 質 問 を し,そ の 解 答 を どの よ う に収 集 し,解 釈 す べ きか,そ して そ の 結 果 をf誰 に 報 告 す べ きか を決 定 す る 最 終 権 限 を 有 して い る 。 も ち ろ ん,こ れ らの 事項 は評 価 者 との 同 意 に 基 づ い て 決 め られ る 。 しか し,も し意 見 の 一・致 を 見 な か っ た場 合,最 終 決 定 権 は管 理 者 に あ る 。 こ れ に 対 して,も し管 理 者 が 評 価 者 の 意 見 に 合 わ な い 評 価 を 下 す こ と に な っ た 場 合,評 価 者 が 意 見 を 表 明 す る 唯 一の 手段 は,管 理 者 に対 して拒 否 す る こ とだ け で あ る。 こ の よ う な 関 係 で は,評 価 対 象 に対 す る 質 問 項 目 に疑 問 を持 っ た り,別 の 解 答 を 持 っ て い た り,別 の 解 釈 を す る 旺 能 性 の あ る ス テ0ク ホ ル ダ ー(Stake-holder)は,事 ・実 ヒ弱 い 疏場 に 置 か れ る こ と に な る。 第1か ら第3代 の 評 価 法 で は,管 理 者 が 評 価 に 大 き な 権 限 を 有 し て い る 以 ヒ,評 価 に 関 心 を 持 つ ス テ ー ク ホ ル ダ ー の 意 見 を 反 映 す る こ と は不 可能 で は な い が,・ 般 的 に 難 しい 。 ③1管 理 者 と評 価 者 の 関 係 と の 関係 は,特 権 を有 して い る もの と有 して い な い も の の 関 係 に あ る 。 しば しば,管 理 者 は 評 価 の 結 果 判 明 した こ と を公 表 す べ
第4量 老イu7'価79 きか ど うか,そ して 公 表 す る な ら誰 に 対 して 公 表 す べ きか,を 決 定 す る権 利 を 有 して い る。 評 価 者 は適 切 な 評 価 報 告 書 を作 成 す る 権 利 を有 して い る が,そ の 権 利 を情 報 開 示 す る 権 限 を有 す る管 理 者 と取 引 す る こ と は 別 に珍 しい こ とで は な い 。 しか し なが ら,本 当の 評 価 結 果 を 知 ら さ れ な い ス テ ー ク ホ ル ダ ー は,評 価 の 結 果取 る こ と が 出 来 た か も し れ な い 一一連 の 行 動 一 例 え ば,自 分 自 身 の 利 益 を 守 る な ど一 を とれ な いc,情 報 を 知 り う る 立場 に な い ス テ ー ク ホ ル ダ ー は,結 局 馬 鹿 を み る こ と に な る 。 第2に,多 元 的 価 値 の 問 題 に 対 応 で き て い な い こ とが あ げ ら れ る。1960年 代 後'卜以 降,ア メ リ カ 人 は 政 党 間 の 対 立 だ け で は な く,人 種,性 別,そ して 簡 単 に 解 決 で き な い 価 値 観 の 対 重が あ る こ と を 学 ん だ 。 評 価 に お け る 判 定 を 求 め る声 が 現 れ た の は,多 元的 価 値 に 対 す る 理 解 が 出 現 した の とほ ほ 同 じ頃 で あ る。 従 来,価 値 の 違 い が 問 題 と して 取 り ヒげ られ な い 限 り,"客 観 的 な"評 価 手 法 の 開 発 に も価 値 判 断(ValueJudgement)が 関 わ り あ っ て い る こ と や}明 確 な 目 標 設 定 の 際 に も 当然 の こ と な が らi価 値 の 合 意 (ValueAgreement)を 前提 に して い る こ と,な ど の 事 実 が 見 過 ご され て き た 。 しか し,・ 度 価 値 の 問 題 が 表 面 に現 れ て し ま う と,そ れ を も と に戻 す の は 不 可 能 で あ る 。 評 価 の 際 ・体 誰 の 価 値 を優 先 す る の か,あ る い は価 値 の 違 い を ど う取 り扱 うの か,が 主 要 な 問 題 と な っ た 。 従 来 か ら,価 値 の 問 題 が 存 在 して い た に も 関 わ らず,評 価 結 果 が 信 用 さ れ て きた の は,評 価 ヨト法 が 科 学 的 で あ れ ば,価 値 の 問 題 に 無 関 係 で あ る(Valuefree),と い う論 議 が 行 わ れ て き た 。 評 価 に 客 観 性 が 求 め られ る 最 大 の 根 拠 は,価 値 の 影 響 を 出 来 る だ け 除 去 す る こ とで あ っ た 。 も し,科 学 的 評 価 手 法 が 価 値 と無 関 係 で な い とす る と,評 価 結 果 に 対 し て1様 々 な 解 釈 が 可 能 に な る だ け で な く,"事 実"そ の も の も価 値 シ ス テ ム との 相 互 作 用 に よ っ て 決 ま る こ と に な る。 そ う な る と,評 価 に お け る あ らゆ る 行 為,そ れ が 評 価,調 査 あ る い は 政 策 分 析 で あ れ,政 治 的 行 為 と な るO
80商 経 論 叢 第37巻 第31」 第3に,あ ま り に も科 学 的 パ ラ ダ イム に 依 存 して きた こ とが あ げ られ る 。 社 会科 学 に お け る 調 査 に 関 わ っ て き た 人 々 は,自 然 科 学 に お け る 手法 を 積 極 的 に 取 り入 れ て きた 。 しか し,科 学 的 手 法 へ の 極 端 な依 存 は,い くつ か の 望 ま し く な い 結 果 を もた ら した 。 ① そ れ は,"文 脈 剥 離(c・ntext-stripping)"とII乎 ば れ る現 象 を 導 い た 。 文 脈 剥 離 と は,評 価 対 象 が あ た か も現 実 の 文 脈 の な か で は な く,人 工 的 に 注 意 深 く コ ン トロー ル され た環 境 下 だ け に 存 在 し,評 価 対 象 を ア セ スす る こ とで あ る。 ② 科 学 的 パ ラ ダ イム へ の 依 存 は,不Ilf避 的 に 形 成 的 定 量 的 測 定(formative quantitativemeasurement),す な わ ち,評 価 プ ロ セ ス で 扱 うデ ー タの"ハ ー ドさ" に 依 存 す る,,こ こ で,ハ ー ドな デ ー タ と は 正 確 に 定 量 化 で き る デ ー タで,測 定 し,評 価 分 析 用 モ デ ル あ る い は 統 計 式 に イ ン プ ッ ト可能 な デ ー タで あ る 。 従 っ て,第1世 代 か ら第3世 代 評 価 までY測 定 しに くい 質 的 デ ー タの 問 題 は あ ま り 取 り扱 わ れ て い な い 。 ③ 科 学 的 手 法 に 基 づ い た 評価 結 果 は,あ る 種 の 権 威 を 持 っ て い る。 評 価 者 は,被 評 価 者 が 提 出 した デ ー タ を も と に 科 学 的 手 法 を使 っ て 処 理 し た結 果 で あ る,と ク ラ イ ア ン トに 自信 を持 っ て 、衿 こ とが で き る 。 従 っ て,被 評 価 者 は そ の 結 果 に つ い て 議 論 す る こ とや,拒iiす る こ と も難 し い 。 第4に,科 学 的 手法 を使 う こ と に よ っ て,評 価 対 象 を 異 な っ た 視 点 か ら考 察 す る 機 会 が 失 わ れ る。 科 学 の 本 質 は,物 事 の 真 実 を 明 ら か に す る こ とで あ る か ら,評 価 法 に 対 す る代 替 案 を提 案 し に くい特 徴 を持 っ て い る 。 評 価 者,ク ラ イ ア ン ト,そ し て ス テ ー ク ホ ル ダ ー も 一様 に,そ の 結 果 を"真 実(Truebeliev-ers)"と して 受 け 入 れ る よ う 強 制 さ れ る 。 す な わ ち,科 学 的 に 根 拠 の あ る もの は す べ て 額 面 通 りに 受 け 入 れ な くて は な らな い,と い う こ と に な る。 か りに, も し 評 価 に 問 題 が あ る と す る な ら ば,代 替 案 も 科 学 的 な 根 拠 が な け れ ば,取 り ヒげ られ る こ と は な い 。 最 後 に,科 学 は 価 値 観 と無 関 係 で あ る,と さ れ て い る か ら,評 価 者 は 科 学 的
第4世 代 評価81 パ ラ ダ イ ム を 信 奉 す る こ と に よ り,評 価 活 動 に 対 す る 道 義 上 の 責 任 を 軽 減 さ れ る 。 ま た,評 価 者 は 評 価 結 果 が そ の 後 どの よ う に使 わ れ る か ,コ ン トロ ー ル で き な い と1Jえ る。 そ の う え,評 価 者 の 役 割 は 報 告 書 を提 出 した 時 点 で 終 了す る か ら,評 価 者 は 評 価 を フ ォ ロ ー す る責 任 を 有 して い な い と 主張 す る こ と もで き る 。 何 れ にせ よ,第3世 代 まで の 評 価 者 は,評 価 か ら ど の よ う な結 果 が 生 じて も,あ る い は 評 価 結 果 が どの よ う に 使 わ れ て も,道 義Lの 責 任 は 問 わ れ る こ と は な い(図 表2),, 図表2共 通の問題点 第1世 代 第21仕 代 第3鮭 代
測定
一匿 到 一
毛 判定 記述 測定 共 通1の問 題 点 1.管 理 主{義へ の 傾 斜 2.多 元 的 価 値 に 適 応 出 来 ず 3.科 学 的 パ ラ ダ イ ム に 準 拠 4.科 学 的 手 法 に よ る 異 な っ た 視 点 排 除 r l基 本 的 前 提 実 証 主 義 パ ラ ダ イ ム i L 6)代 替 的 ア プ ロ ー チ 今 日}第3世 代 ま で の 評 価 法 が 抱 え て い る 問 題 を 解 決 す る た め の 代 替 的 な ア プ ロ._...チが 求 め ら れ て い る 。 そ の 代 替 案 の 一一一つ と し て ,「 状 況 対 応 型 構 成 主 義 的 評 価(ResponsiveC。nstructivistEvaluation)」 と 名 づ け る 評 価 法 を 提 案 し た い 。 第3世 代 ま で の 評 価 モ デ ル で は,評 価 の ス ペ シ フ ィ ケ ー シ ョ ン(仕 様)で あ る パ ラ メ ー タ ー や そ の 境 界 は,通 常 ク ラ イ ア ン ト と 評 価 者 と の 協 議 に よ っ て 時 前 に 決 め ら れ て い た 。 ロ バ ー ト ・ス テ ー ク(RobertStake)は,第3世 代 ま で の 評 価 が 事 前 に 評 価 の 仕 様 を 決 め て い た こ と に 注 目 し,r前 決 定 型 評 価(Preor-dinateevaluation)」 と い う 用 語 を 考 案 し た 。 こ れ に 対 し て,「 状 況 対 応 型 評 価 (Responsiveevaluation)」 と い う 呼 び 方 は,1975年 ス テ ー ク に よ っ て,初 め て 提 案 さ れ た も の で あ る が,「 状 況 対 応 型 評 価 」 で は3評 価 の 影 響 を 受 け る ス テ ー ク ホ ル ダ ー も 加 わ っ た 多 く の 人 達 が,評 価 プ ロ セ ス を 通 じ て,パ ラ メ ー タ ー や そ の 境 界 を 多 く の 時 間 を か け て 決 め る こ と に 特 徴 が あ る 。82商 経 論 叢 第37巻 第3号 こ の ア プ ロ ー チ の 背 後 に あ る 基 本 的 前 提 は,科 学 的 パ ラ ダ イ ム に 代 わ る構 成 主 義(Constructivist)と 呼 ば れ る パ ラ ダ イ ム に 基 づ い た 評 価 を 行 う 際 に 使 わ れ る 手 法 で あ る。 こ こで,「 構成 主 義 的 」 とはs端 的 に い う と 「"真実"は 人 々の 考 え と 無 関 係 に 存 在 す る の で は な く,人 々 の 相 互 作 用 の 中 か ら社 会 的 に 構 成 さ れ る 」 と い う 考 え で あ る 。 ま た,あ る 人 は 「構成 主 義 的 」 の か わ りに,「 解 釈 学 的 ・弁 証 法 的(lnterpretive,あ るい はHermeneutic)」 と い う用 語 を 使 う 人 も い る 。 名 称 は そ れ ぞ れ,パ ラ ダ イ ム に 対 す る あ る特 定 の 洞 察 を 表 して い る の で, こ こで は,状 況 対 応 的 な 焦 点 の 当て 方 と,構 成 主 義 的 な や り方 の そ れ ぞ れ の 特 徴 を 表 す 代 表 的 な 考 え 方 を 紹 介 す る 。 (1)状 況 対 応 的 な 焦 点 の 当 て 方:「 状 況 対 応 型 評 価 」 の 進 め 方 は,評 価 プ ロ セ ス に 対 す る ア ル ゴ リ ズ ム も,ま ず どの よ う な項 目 を 質 問 し,ど の よ う な情 報 を収 集 す べ き か を検 討 す る こ とか ら始 ま る 。 第1世 代 評 価 の 場 合 は,幾 つ か の 変 数 が 特 定 さ れ,収 集 す べ き情 報 は,そ れ ら変 数 を測 定 す る と考 え られ る測 定 モ デ ル上 で,生 徒 各 個 人 の 点 数 一 例 え ば,ア チ ー ブ メ ン ト ・ス コ アー か ら構 成 さ れ る 。 第2世 代 の 場 合 はe幾 つ か の 評 価lj標 が 特 定 さ れ,収 集 す べ き情 報 は,例 え ば 生 徒 個 人 の 実 績 が,学 校 で 記 述 さ れ た 学 習 目標 と どの 程 度 強 く結 び 付 い て い る か の 評 価 か ら構 成 さ れ る。 第3世 代 評価 の 場 合 は,評 価 モ デ ル に よ っ て 必 要 な情 報 は 異 な る 。 例 え ば,意 思 決 定 モ デ ル の 場 合,代 替 案 を 比 較 す る た め の 情 報 を 収 集 す る こ と が 求 め ら れ る 。 ま た,ゴ ー ル ・フ リ ー(goal-free)モ デ ル の 場 合 は,経 験 さ れ た"効 果"に 関 す る情 報 が 求 め られ る 。 こ の よ う な 焦 点 と な る 要 素(変 数,目 標,意 思 決定 な ど)は ア ドバ ン ス ・オ ー ガ ナ イ ザ ー(advanceorganizer)と 呼 ば れ る。 評 価 者 は,ど の よ う な 焦 点 と な る 要 素 を 使 っ て い る か は,評 価 者 が 例 え ば,「 あ な た の 目標 は 何 で す かP」,あ る い は 「こ の 評 価 は,ど の よ う な 意 思 決 定 に 対 し て,情 報 を 提 供 す る 必 要 が あ り ま す か?」 な ど とい う 質 問 を提 起 し た 瞬 間 に 明 らか に な る。 状 況 対 応 型 評 価 も ア ドバ ン ス ・オ ー ガ ナ イ ザ ー を 持 っ て い る 。 そ れ は,ス テ ー ク ホ ル ダ ー,す な わ ち 評 価 に よ っ て 何 らか の リ ス ク に さ ら さ れ る 可 能 性 の
第4世 代 評 価83 事前決定型評価 焦点 の決 め方 第3世 代 ま で は,何 を 調 査 す る ス テ のか は評 価 を実施す る以 前に ク て い ラ イ ア ン ト と 評 価 音 と の 協 議 に 点 は 基づ い て決め られ る い く き な 焦点 の内容例 第1世 代=生 徒 の能力 を表す と ス テ 考え られ る変 数の それ を示 す テ ば教 ス トの 点 数 い る 第2世 代:教 育 プ ロ グ ラ ム 目標 要求 と生徒 の成績 との関係 を記述 懸念 第3世 代:評 価 モ デ ル に よ り異 争点 な る あ る 個 人 あ る い は グ ル ー プ が,評 価 対 象 に 関 して 認 識 して い る 要 求(Claims), 懸 念(Concern)お よ び 争 点(lssues)を 評 価 の ア ル ゴ リ ス ム に 組 み 込 ん で あ る 。 こ こ でT「 要 求 」 と は,ス テ ー ク ホ ル ダー に よ る 童 張 で あ っ て,評 価 対 象 に 対 して 肯定 的 な 内 容 を い う。 例 え ばeあ る 教 育 方法 を導 人 す れ ば,学 生 の 読 む(reading)能 力 は 標 準 テ ス トの ス コ ア ー で 一 年 以L改 善 さ れ る で あ ろ う,と い うi三張 は 要 求 で あ る 。 「懸 念 」 と は,ス テ ー ク ホ ル ダ ー に よ る 主 張 で あ っ て,評 価 対 象 に 対 して 否 定 的 内 容 で あ る。 例 え ば,コ ン ピ ュ ー タ を利 用 す る教 育 の 導 入 した 場 合,学 生 の 計 算 能 力 は 後 退 す る で あ ろ う,と い う主 張 は 懸 念 で あ る。 ま た,「 争 点 」 とは,合 理 的 に 思 考 す る 能 力 を持 っ た 人 が 賛 成 しか ね る よ う な 状 況 を い う。 例 え ば,小 学 校 にAIDS教 育 を 導 入 し よ う,と い う 主 張 は,争 点 で あ る(図 表3)。 図表3評 価 の 焦点 状 況 対応評価 ステー クホル ダーが評価 対 象に持 っ て いる評価 の焦点,要 求,懸 念,争 点 は相 正il作用の進 行 と共 に変化 して い くので 夢前 に決 めてお くこ とはで ステー クホ ルダーが評価 対象,例 え ば教 育プ ロ グラムにつ いて認識 して い る次の 事項; 肯定 的意 見 否定 的意 見 常 識的 に 賛成 しか ね る ような 意見 異 な る ス テ ー キ(利 割 を 持 っ た 関 係 者 達 は,そ れ ぞ れ 異 な っ た 要 求,懸 念,争 点(Claims,Concern&Issues,以 ドCC&1)を 持 っ て い る で あ ろ う 。 こ れ ら ス テ ー ク ホ ル ダ ー の 持 つCC&1を 捜 し 出 し,解 決 の た め に 対 応 す る こ と が, 「状 況 対 応 型 評 価 」 に お け る 評 価 者 の 仕 事 で あ る 。 評 価 さ れ る 人 々 に は,多 く の 異 な っ た ス テ ー ク ホ ル ダ ー が 存 在 す る こ と を, グ バ と リ ン カ ー ン(GubaとLincoln)は,1981年 出 版 の 「効 果 的 な 評 価(Effec一
84商 経 論 叢 第37巻 第311Xj tiveEvaluation)」 の な か で 指 摘 し て い る 。 そ し て,彼 等 は ス テ ー ク ホ ル ダ ー を 大 き く3つ の ク ラ ス と,サ ブ ク ラ ス に 分 類 し て い る 。 ⑦ エ ー ジ ェ ン ト(agents>:評 価 結 果 を プ ロ デ ュ ー ス す るs使 用 す る,あ る い は 実 施 す る こ と に 関 わ る 人 々 を 指 す 。 エ ー ジ ェ ン ト に は,以 下 の 人 々 が 含 ま れ る 。 ) ) ) a lD C ) d ラ e (D 9 評 価 プ ロ グ ラ ム を 開 発 す る 人(developers) 地 方 と 国 を 含 む 出 資 者 現 行 プ ロ グ ラ ム に 対 して,何 らか の 改 善(例,地 域 のニー ズ に合 った)あ る い は 変 更 の 必 要 性 を 認 識 して い る 評 価 者(assessors) 評 価 対 象(例,ロ ー カルなプ ログ ラム)を 開 発,あ る い は 使 用 す る こ と を 決 定 す る 、乞場 に あ る 意 思 決 定 者 評 価 の 結 果,影 響 を受 け る 施 設 ・補 充 品 ・材 料 な どの 供 給 者 評 価 を 依 頼 す る 人(ク ラ イア ン ト)あ る い は 契 約 者 評 価 の 結 果,実 行 す る こ と に 関 係 あ る 人(例,授 業を担 当す る 先 生,ス タ ッフ,警 察官,看 護婦 な ど) ② 受 益 者(beneficiaries):評 価 結 果 に よ り 何 ら か の か た ち で 利 益 を 得 る 人 を 指 す 。 受 益 者 に は,以 ドの 人 々 が 含 ま れ る 。 ) ) a tD ) C 直接 的 な 受 益 者,評 価 を 設 計 す る 際 に"タ ー ゲ ッ トと な る グ ル ー プ" 間 接 的 な 受 益 者,直 接 的 な 受 益 者 と の 関 係 が 改 善 さ れ た り,強 化 さ れ る な ど プ ラ ス の 影 響 を受 け る 人 評 価 の 結 果,な ん らか の 利 益 を 得 る 人,例 え ば}教 材 を 提 供 す る 出 版 社,必 要 と さ れ る サ ー ビ ス を 供 給 す る 業 者 な ど ③ 犠 牲 者(victims):評 価 結 果 か ら何 らか の マ イ ナ ス の 影 響 を 受 け る 人 々 を 指 すC,犠 牲 者 の な か に はf何 らか の 問 題 が 生 じ た 場 合,不 利 益 を被 る 受 益 者 の 一部 も 含 ま れ る 。 犠 牲 者 に は,次 の 人 々 が 含 ま れ る 。 a)評 価 対 象 か ら排 除 さ れ る 人,例 え ば,才 能 の あ る 人 向 け の 特 別 な プ ロ グ ラ ム か ら排 除 され た 普 通 の 生 徒 な ど。 b)マ イ ナ ス の 影 響 を 受 け る 人,例 え ば,元 の 学 校 施 設 が 障 害 を 持 っ た 生
第4世 代 評 価85 徒 達 に使 われ る こ とに な っ た た め,遠 方 の 学 校 にバ ス通 学 す る こ とを 余儀 な くされ た生 徒 達 とそ の家 族 c)評 価 結 果に よ り,政 治 的 に不 利 益 を受 け る 人,例 え ば,発 言 力 や 影 響 力 の低 ド,権 威 を失 う人 d)評 価 結 果に よ り機 会損 失 を受 け る 人,例 えば,教 材 を競 合 他社 に奪 わ れ た 出 版社,あ るい は必 要 な経 営 資 源 を別 の ベ ンチ ャー に投 資 して い た ほ うが 良 か っ た人 「状 況 対 応 型 」 評 価 と い う 名 称 は,評 価 対 象 に 関 し て 様 々 な ス テ ー ク ホ ル ダー のCC&1を 探 索 す る だ け で な く,ス テ ー クホ ル ダ ー か ら解 決 の た め の 情 報 を 収 集 し,対 応 す る こ と に 由 来 して い る 。 つ ま り,評 価 は 異 な っ た ス テ ー ク を 持 っ た 人 達 が,共 通 の 構 成 物 を構 成 す る た め の 相 圧作 用 の プ ロ セ ス で あ る か ら,よ り洗 練 され た構 成 物 に して い くた め の 手 法 が 必 要 に な る。 そ こ で,構 成 主 義 的 パ ラ ダ イ ム に 基 づ い た 「解 釈 学 的 ・弁 証 法 的(He㎜eneuticDialectic)」 プ ロ セ ス と呼 ぶ 手法 を採 用 す る。 「状 況 対 応 型」 評 価 は,す べ て のCC&1に 関 し,ス テ ー ク ホ ル ダ ー ・グ ル ー プ 間 で,コ ン セ ンサ ス に 到 達 す る こ と を理 想 と して い る が,そ れ は 不 可 能 で は な い に して も,極 め て 稀 で あ る。 通 常,コ ン フ リ ク トが 残 り,そ の 解 決 の た め に,外 部 か ら新 しい 情 報 を 入 手 す る こ とが 必 要 に な る 。 コ ン フ リ ク トを解 消 す る た め,新 た な 利 用 口∫能 な情 報 が,評 価 者 よ りス テ ー クホ ル ダ ー ・グ ル ー プ に 与 え られ る 、,次 に,評 価 者 は 交 渉 議 題 を準 備 し,交 渉 の 場 を 設 定 し,そ し て そ の 進 行 役 を務 め る。 交 渉 議 題 に 関 係 あ る ス テ ー ク ホ ル ダー,も し く は そ の 代 表 者 は ・ 争 点 と な っ て い る 議 題 を解 決 す る た め,交 渉 に 出 席 す る 。 交 渉 の 結 果 か ら 生 ま れ て く る 最 終 的 な 結 論 は,ス テ ー ク ホ ル ダ ー 間 の 交 渉 の 産 物 で あ る 。 得 ら れ た 結 果 はrも は や 第3世 代 まで の 評 価 法 の 特 徴 で あ る 評 価 者 や ク ラ イ ア ン トの専 有 物 で は な い 。 も ち ろ ん,交 渉 の 席 で解 決 で き な か っ た 項 目 は,依 然 争 点 と して 残 る 。 しか し,各 ス テ ー クホ ル ダ ー は 少 な く と も コ ン フ リ ク トは 何 で
86商 経 論 叢 第37巻 第3号 あ り,他 の ス テ ー ク ホ ー ル デ ィ ン グ ・グ ル ー プ が,争 点 に対 して ど うい う態 度 を と っ て い る か を 理 解 す る 。 そ の 後,再 評 価 を 行 う た め の 準 備 が な され る。 こ の よ う な繰 り返 し は,「 状 況 対 応 型 」 評 価 の 特 徴 で あ る 。 評 価 は完 了 す る こ と な く,利 用 可 能 な 時 間 な ど資 源 の 物 理 的 制 約 の た め に 中 断 さ れ る だ け で あ る 。 状 況 対 応 型 評 価 に は4つ の フ ェ ー ズ が あ る 。 そ れ ら は 反 復 さ れ る こ と もあ り,ま た 重 複 す る こ と もあ る。 第1フ ェ ー ズで は,ま ず ス テ ー ク ホ ル ダ ー が 特 定 され,各 ス テ ー ク ホ ル ダ ー は 主 張 した い と思 っ て い るCC&1を 文 書 で 提 出 す る こ と を 求 め られ る。 第2フ ェ ー ズ で は,各 ス テ ー ク ホ ー ル デ ィ ン グ ・グ ル ー プ が 提 出 したCC&1 は 全 て の ス テ ー ク ホ ー ル デ ィ ン グ ・グ ル ー プ に 公 開 さ れ,各 グ ル ー プ はCC&1 に 対 す る 自分 の 考 え,コ メ ン ト,反 論,同 意 な ど を提 出 す る よ う求 め られ る 。 こ の フ ェ ー ズ で,は じめ に提 出 され たCC&1の 多 くは 解 決 され る。 第3フ ェ ー ズ で は,前 の フ ェ ー ズ で 解 決 で き な か っ たCC&1を 解 決 す る た め に,評 価 者 は 新 た に,情 報 収 集 活 動 を 行 う。 情 報 収 集 用 の フ ォ ー マ ッ トは 基 本 的 な 論 点 が,ク レ ー ム で あ る か(例 え ば,ク レー ム をテ ス トす る情 報が 集 め られ る),懸 念 で あ る か(そ の懸 念 が どれ ほ ど正当な もの で あ るか を示 す情 報 が 集 め られ る),そ れ と も 争 点(賛 否両 側の それ ぞれ に対す る 支持 と反論 な ど)に よ っ て 変 わ っ て くる 。 収 集 す べ き情 報 は 定 性 的 か も しれ な い し,定 量 的 で あ る か も しれ な い 。 状 況 対 応 型 評 価 で は,多 くの 人 が 誤 っ て 信 じて い る よ う に,定 量 的 な分 析 を な ん ら排 除 す る も の で は な い 。 解 決 で き な か っ たCC&1に 関 す る情 報 で あ れ ば,ど の よ う な 情 報 で も収 集 す る 。 第4フ ェ ー ズで は,評 価 者 の 指 導 のFで,各 論 争 点 に 関 す る コ ンセ ンサ ス が 得 られ る こ と を 目指 し,ス テ ー ク ホ ー ル デ ィ ン グ ・グ ル ー プ 間 の 交 渉 が 行 わ れ る 。 しか し,必 ず し も全 て の 論 点 が 交 渉 の 場 で 解 決 さ れ る わ け で は な い 。 残 さ れ た 論 点 は,次 の 評 価 の メ イ ン ・テ ー マ に な る。
第4世 代 評 価87 (2)構 成 主 義 的 方 法 論(Construetivist):我 々 は この ア プ ロ ー チ を,今 世 紀 に 使 わ れ て い た す べ て の 評 価 を特 徴 づ け る科 学 的 方 法 論 に 代 わ る 方 法 論 と して 提 案 す る。 そ れ は 従 来 の 科 学 的 ア プ ロ ー チ と は 全 く反 対 の,構 成 主義 的 パ ラ ダ イ ム と呼 ば れ る 考 え に 基 づ い て い る(図 表4)。 図表4第4世 代 評価 へ 湘 の 搬 「麺]第2墨 第3世 代 ⇒[第4世 代(状 __.________W__一, 倉 倉 倉 移行?倉 基本的前提 ■ 二 群 的アブ・一チに準拠 ⇒1構 成 儀 的パラダイム1 存 在 論 的 に は,こ の パ ラ ダ イ ム は 客 観 的 な 真 実(objectivereality)が 存 在 す る こ と を 否 定 す る 。 そ の か わ り と して,こ こで 言 う"真 実"と は,社 会 的 な 心 の 構 成 物 で あ っ て,そ の よ う な構 成 物 は,個 人 の 数 だ け(明 らか に多 くの構 成物 は 共有 されて い るが)存 在 す る とい う,k張 で あ る 。 我 々 は 科 学 自 身 も,こ れ ら構 成 物 の ・つ で あ る と 考 え れ る 。 従 っ て,我 々 は 科 学 だ け が..1:し い あ る い は 真 の 構 成 物"で あ る と して,受 け 入 れ る よ う要 求 さ れ る の で な け れ ば,反 対 は し な い 。 ま た,認 識 論 的 に は,こ の パ ラ ダ イ ム は 主 体 一 客 体 一.7G論(subject-objectdu-ality)の 可 能 性 を 否 定 す る 。 そ の 代 わ り にs探 究 の 結 果 か ら得 られ る 構成 物 が 存 在 す る の は,観 察 者 と被 観 察 者 との 間 の 相 配作 用 が あ る か らで あ っ て,=構 成 物 が 評 価 プ ロ セ ス の な か か ら現 れ て く る もの は,文 字 通 り創 り出 す,と 考 え る。 方法 論 的 に は,こ の パ ラ ダ イ ム はe科 学 を特 徴 づ け る 操 作 的,実 験 的 な ア プ ロ ー チ の 代 わ りに,解 釈 学 的 ・弁 証 法 を 採 用 す る 。 解 釈 学 的 ・弁 証 法 は,構 成 さ れ る"真 実"を 創 り出 す 観 察 一者(評 価者)と 被 観 察 者 と の 間 の 相 正f作用 の 利 点 を ト分 に活 用 す る の で,観 察 す る時 点 で 得 ら れ る あ らゆ る 情 報 に 基 づ い た 洗 練 さ れ た も の に な る(図 表5)。 構成 主 義 的 な 方 法 論 を使 用 した 研 究 結 果 は,科 学 的 な研 究 に よ っ て 得 られ る で あ ろ う結 果 と は,全 く異 な る 、,例 え ば, ・"真 理(truth)"と は ,客 観 的 な 真 実 と ・致 す る こ とで は な く て,十 分 な情
881萄 糸釜 痢甫}叢 第37巻 第3}ナ 図表5前 提 とす るパ ラダイム ・実 在 論 的 存 在 論 ・観 察 者 の 意 図 と 無 関 係 に 客 観 的 な 真 実 が 存 在 す る 、 そ れ は,し ば し ば 因 果 関 係 の 形 を と るr_r1然の3的 な 法 則 に 従 っ て い る 二元 論 的 客 観 的 認 識 論 ・観 察 者 が ,評 価 対 象 か ら独 立 して, か つ 自 分 の 価 値 観 と 無 関 係 に,そ れ を 観 察 す る こ と は[iJ能 で あ る ・ イ ン タ ー ベ ン シ ョ ニ ス ト ventionist)的 方 法 論 ・ff".し い 法 則 を 発 見 す る た め に は,観1 察 対 象 を そ の 文 脈 か ら剥 離 す る こ と が 必 要 で あ る ・そ の 結 果 ,病 則す る こ とや 制 御 が μ∫ 能 に な る 新 しい 信 念(構 成iる義 的) ・番目文寸艮論 白勺イデ看三ri命 "真 実 軸 は ,社 会 的 な 相 正{=作用 を 通 して 構 築 さ れ る ・こ の 構 成 物 は 臼 然 法 則 ,因 果等 の 普 遍 的 な 法 則 に よ っ て 支 配 さ れ る も の で は な い ・元 論 的}三観 的 認 識 論 ・観 察 者 と観 察 対 象 は 独 、Lでは あ り え な い,研 究 成 果 は,観 察 者 と 被 観 察 者 と の 机'蘇作 川 の 創 造 物 で あ る 卜 繰 り 返 し,分 析,ク リ テ ィ ー ク 論 法 を 繰 り 返 し,調 査 者 と 回 答 者 の 問 か ら洗 練 さ れ た 構 成 物 を つ く り だ す 報 を 持 ち,洗 練 され た 構 成 者 の 間 で コ ン セ ンサ ス に 達 した もの で あ る 。 ・"事 実(facts>"と は ,同 じ価 値 観 を持 っ た 人 々 の な か で 意 味 を持 つ 。 ・"原 因"と"結 果"の 関 係 は ,相 対 的 な 関 係 で あ っ て,全 て の 相 互 作 用 の あ る ス テ ー ク ホ ル ダー と 関 係 が あ る 。 ・現 象 は,そ れ が 研 究 さ れ た 文 脈 の な か で しか 理 解 す る こ とが で き な い 。 一つ の 文脈 か ら得 ら れ た 知 見 を 別 の 文 脈 へ 一般 化 す る こ と は で き な い 。 問 題 も解 決 案 も一 つ の 設 定 か ら別 の 設 定 へ と 一一般 化 す る こ と は で き な い 。 ・評 価 の 結 果 作 ら れ る デ ー タ に は ,事 実 とそ の 言 葉 の もつ 意 味 に 価 値 の 問 題 が 含 まれ て い る。 ・評 価 者 は ス テ ー ク ホ ル ダー に と り,構 成 物 を創 り出 す 際 の 個 人 的 パ ー トナ ー と な る。 さ ら に 評価 者 は ス テ ー クホ ル ダー と共 に 洗 練 され た 構 成 物 を構 成 す る 際 の ま と め 役 に な る 。 そ の ヒ,評 価 者 は 交 渉 の 場 に お け る,ス テ ー ク ホ ル ダ0間 の 仲 介 役 に も な る 。
第4匿 代 評 価89 こ の よ うな 主張 は,・ 見 非 合 理 的 に 見 え る の で ,多 くの 人 か ら拒 否 され そ う で あ る 。 しか し.近 年 こ の パ ラ ダ イ ム が 提 起 す る 評 価 法 を支 持 す る 人 が 増 え て い る こ と も事 実 で あ る 。 評 価 者 を含 む 全 て の 人 が ,従 来 の 科 学 的 評 価 法 こ そ 選 択 す べ きパ ラ ダ イム で る,と い う意 見 に 同 意 す る とは 思 え な い が f多 くの 分 野 で 科 学 的 実 証 主義 に 対 す る 問 題 が 提 起 され て い る こ と も,ま た 事 実 で あ る 。 7)状 況 対 応 型 構 成 主 義 的 評 価 を 採 用 す る こ との 得 失 こ こで は,状 況 対 応 型 構 成 主 義 的 評 価 を,採 用 す べ きか ど うか ,そ の 得 失 を 検 討 す る 。 従 来 の 評 価 法 を 支持 す る 人 が,明 らか に状 況 対 応 型 構成 主 義 的 評 価 へ の 移 行 に 対 して ,次 の 様 な 懸 念 を抱 くで あ ろ うf, ① 構 成 主義 に は,「 物 事 に は確 実 な もの は 何 も な い 。 探 究 が 行 わ れ て も客 観 的 真 理 は 得 ら れ な い 」,と い う 暗 黙 の ゴ解 が あ るC,物 賢 が 実 際 ど の よ う で あ る か,ま た どの よ う に 機 能 す る か を 知 る こ と は 出 来 な い[)従 来 の 評 価 者 は ,こ の よ う な 不 明 確 な 評 価 に と う て い 耐 え ら れ な い 。 さ ら に ,評 価 に よ っ て 真 理 を 見 つ け る こ とが で き な い な ら ば,評 価 す る 意 味 は 一体 ど こ に あ る の か,疑 問 に 思 うf] ② 状 況 対 応 型 構 成 書義 的 評 価 へ 移 行 した 場 合,全 て の ステ.._.クホ ル ダ ー が 評 価 者 や ク ラ イ ア ン トと 同 様 に,評 価 の あ ら ゆ る段 階 で 決 定 的 に 重 要 な役 割 を 演 ず る こ と に な る。 従 っ て,評 価 プ ロ セ ス を コ ン トロ ー ル す る こ とが 出 来 な く な る恐 れ が あ る。 さ ら に コ ン トロー ル で き な い 場 合,手 法 的 に も また 政 治 的 に も 重 要 な影 響 を も た らす 恐 れ が あ る 。 す な わ ち,あ ま り評 価 手法 に 詳 し くな い 人 が 意 思 決 定 を行 う 、乞場 に 立 っ た場 合,そ の 特 権 を 行 使 す る こ と に よ り,調 査 の 技 術 的 適 切 性 が 脅 か さ れ る 危 険 が あ る 。 さ らに ,ス テ ー ク ホ ル ダ ー 達 に 決 定 す る 権 限 が 与 え られ た な ら ば}政 治 的 権 力 も手 に 入 れ る こ と に な る。 調 査 の 乎 法 が,政 治 的 な 意 見 を 異 に す る グ ル ー プ の 間 の}導 権 争 い の 対 象 に な る か も し れ な い 。 ⑤ 状 況 対 応 型 構 成 主 義 的 評 価 に コ ミ ッ トす る こ と は,ア ル コ ー ル 依 存 症 を 改 善 す る,成 績 の 低 い 学 生 を 再 教 育 す る,な ど の 課 題 を 達 成 す る た め の イ ン
90商 糸i…諸首 叢i第37巻 第3写 幽 タ_ベ ン シ ョ ン(す な わち処 置,プ ロ グラ ム,マ テ リア ル,戦 略 な ど)を 見 つ け だ す 可 能 性 を放 棄 す る こ と を 意 味 す る 。 イ ン タ ー ベ ン シ ョ ンの 一般 化 を仮 定 す る た め の 基 盤 が な い,あ る い は 明 確 な 因 果 関 係 に 基 づ い た イ ン タ ー ベ ン シ ョ ン を 考 案 す る た め の 基 盤 が な い とす る な ら ば,社 会 が 究 極 的 に は 自 分 を取 り巻 い て い る様 々 な 問 題 に 対 処 で き る,と 信 じ る理 由 は 殆 ど な く な る 。 逆 に,状 況 対 応 型 構 成L義 的 評 価 の 基 本 的 前提 を受 け 人 れ る こ と は,い つ か 社 会 的 な 問 題 に 対 す る 解 決 を見 い だ す こ とが で き る,と い う望 み を放 棄 す る こ とで あ る。 そ して も し,す べ て の 問 題 を,特 定 の 社 会 的 慣 行 と 文脈,文 化,経 済 な ど に 合 わ せ て 対 処 し な け れ ば な らな い と した ら,社 会 は 不 可 能 な ほ ど大 き くか つ 困 難 な 課 題 に 呑 み 込 まれ て し ま うだ ろ う こ と を従 来 の 評 価 者 は お そ れ て い る 。 これ に対 し,状 況 対 応 型 構戒 垂三義 評 価 を 信 奉 す る 人 は,社 会 の 諸 問 題 に 対 す る 有 効 な解 決 策 を 考 案 で き な い の は,一 般 的 な解 決 策 を 見 つ け な くて は な ら な い と考 え る 先 入 観 の た め で あ る,と 答 え る だ ろ う 。 伝 統 的 な 評価 法 に付 随 して 見 え て くる 確 実 性 を,状 況 型 構成 主義 的 評 価 が も っ て い る 相 対 主 義 的 な 性 質 に 置 き換 え る こ と は,決 して,"何 で も あ り主 義(anythinggoes)"的 な 姿 勢 を と る こ とで は な い 。 そ う で は な くて,そ の 違 い は,評 価 プ1ロセ ス か ら得 られ る 複 数 の 構 成 物 の う ち,ど の 構 成 物 が 望 ま しい か を どの よ う に して 決 め る の か,で あ る。 伝 統 的 に は,こ の よ う な 比 較 は,ど ち ら の 構 成 物 が.真 実 に よ り近 い かfと い う 基 準 で 行 わ れ て き た,,し か しe"客 観 的 な 真 実fが 存 在 す る可 能 性 が 否 定 され る と,そ の よ う な基 準 は 消 滅 し,も っ と微 妙 で 洗 練 さ れ た 識 別 方 法 が'必要 に な る。 状 況 対 応 型 構 成 主 義 的 評 価 者 が 心 す べ き こ と は,次 の よ うで あ る 。 す な わ ち,ど れ ほ ど大 勢 の コ ンセ ンサ ス に よ っ て 支持 され て い よ う と,現 在 普 及 して い る構成 物 に 対 し絶 え ず 着 目 し,い つ で も構 成 物 を 改 善 ・変 更す る,更 に,探 索 の 結 果,別 の 構 成 物 の 方 が そ の 場 合 に あ る 人 に と っ て も っ と 合 理 的 で,適 切 で あ る こ とが 明 らか に な っ た場 合 は,現 在 信 じ られ て い る構 成 物 を 否 定 して で も,新 しい 構 成 物 を提 案 す る だ け の 用 意 が 出 来 て い な くて は な ら な い 。 状 況 対 応 型 構 成 主義 的 評 価 に コ ミッ トす る こ と は,伝 統 的 な 評 価 者 が 自分 は
第4世 代 評 価91 真 実 を発 見 した,と 確 信 す る と き に あ れ ほ ど容 易 に 仮 定 した 傲 慢 さ を,我 々 は 物 事 が,"真 に"ど の よ うで あ る か を知 る こ と は 決 して で き な い,物 事 が そ の よ う で あ る か に つ い てs我 々が 持 つ 構 成 物 は,探 究 自 体 に よ っ て 創 り出 され る の で あ っ て,神 秘 的 な"自 然"に よ っ て 決 定 さ れ る の で は な い,と い う洞 察 に 相 応 し い 謙 虚 さで,置 き換 え る こ と で あ る 。 確 実 性 を相 対 性 に,コ ン トロ.__.ル を 機 能 強 化 に,般 化 さ れ た 説 明 を 局 所 へ の 理 解 に,傲 慢 さ を 人 間 性 に,そ れ ぞ れ 置 き換 え る こ とは,第4世 代 評 価 者 が 得 る こ とが で き る 明 らか な 連 の 利 点 で あ る。 読 者 は 従 来 の 評 価 法 か,そ れ と も こ の 評 価 法 を 採 用 す る か の 得 失 を,白 ら決 め な くて は な ら な い で あ ろ う。
2第4世
代 評 価 の ス テ ップ
第4世 代 評 価 は ス テ ー ク ホ ル ダ ー の 要 求,懸 念,争 点(CC&1)と い う 概 念 を 使 っ て,異 な っ た 意 見 を 持 っ た ス テ ー ク ホ ル ダ ー 問 で 合 意 を 形 成 し て い く 評 価 法 で あ る 。 こ こ で は 解 釈 学 的 ・弁 証 法 的 サ ー ク ル(Hermeneuticdialecticcircle) の 原 則 と 自 然 主 義 的 探 究 法(Naturalisticinquiry)を 使 っ て,第4世 代 評 価 の 実 際 一 ガ イ ド ラ イ ン ー を 紹 介 す る 。 評 価 は,以 下 の フ ロ ー チ ャ ー ト(図 表6)で 示 さ れ る よ う に,12の ス テ ッ プ か ら 構 成 さ れ る,, [ス テ ッ プ1]ク ラ イ ア ン ト と の 取 決 め 図表6 第4世 代 評価 の ステ ップ 1ク ラ イ ア ン ト ・ス ポ ン サ ー と の 取 決 1画
2評価 を実施す る ための組織 化 ↓ 3ス テ ー ク ホ ル ダー を 認 識 す る
4ス
テークホルダー間の共哺 勤 画
↓ i 192商 経 論 叢 第37巻 第3号 5ス テ ー ク ホ ル ダ ー 問 の 共 同 構 成 物 を 拡 大 す る 一一 一 一 一 一 一 一 一 一 一 一 一… 1
6鰍
したCC&面
類する
コ
ア ↓ ロユr孫
央のCC&1を亙
オ
互 互
ヨ
る一 一 丁一 一 剛【 痴cこ画 癒癒 塑 壁 墜列
コ ↓ ニ へ底
交 渉 す る た め に,協 議 匡}`項を 準 備 す る ド り ア り ↓「 混殉
… τ
唾
亜]
! ヒ匡 「 堕 イクルする
評 価 は,法 的 そ して 財 政 的 、Z場に 、kって,評 価 を 依 頼 す る ー.ｺ!場に あ る ク ラ イ ア ン トと ス ポ ン サ ー と呼 ば れ る,あ る パ ー テ ィ(関 係 者)あ る い は 関 係 者 達 に よ っ て 委任 され る 。 先 ず,評 価 を 実 施 す る に あ た り,評 価 を 実 施 す る者 は,ど の よ う な 仕 事 を遂 行 す る の か,に 関 す る 書:類,す な わ ち 契 約 書 が 当 然 の こ と な が ら必 要 と され る 。 契 約 吾 に は,次 の ポ イ ン トを カ バ ー す る必 要 が あ る 。 (1)ク ラ イ ア ン ト(依 頼 人)あ る い は ス ポ ンサ ー の 確 認:ま ず,評 価 を 委 任 さ れ る 人 は,ク ラ イ ア ン トが 誰 か を 認 識 す る 必 要 が あ る、,ク ラ イ ア ン トの 名 前,タ イ トル1所 属 す る組 織 は?,意 思 決 定 者 か?そ れ と も資 金 提 供 者 か? あ る い は 評 価 の 結 果 を 利 用 す る 人 か?な ど を 認 識 す る 。 (2)評 価 対 象 の 確 認:次 に,評 価 され る 対 象 は 何 か を認 識 す る 必 要 が あ る。 評 価 対 象 の 性 質 や 特 徴 は 契 約 す る ドキ ュ メ ン トq1}類)に 記 述 して あ る け れ ど第4骨 母=イ℃轟平価93 も,ド キ ュ メ ン トそ れ 自 身 か ら は何 も情 報 は 得 られ な い 、 ドキ ュ メ ン トを読 ん だ 人 は 異 な っ た 解 釈 を す る だ ろ う しtそ の 結 果 異 な っ た 構 成 物 を作 る こ と に な る だ ろ う。 ク ラ イア ン トあ る い は ス ポ ンサ ー に よ っ て 保 持 さ れ て い る構 成 物 は,公 式Lの 構 成 物 と呼 ば れ て い る。 しか し,評 価 を実 施 して い る プ ロ セ ス で,異 な っ た 構 成 物 が 支 配 的 に な る 場 合 が あ る 。 フ ィー ル ド調 査 に よ り,実 施 さ れ て い る 構 成 物 と 公 式 ヒの 構 成 物 間 の 違 い,お よ び 実 施 され て い る 構 成 物 間 の 違 い が 明 らか に な る だ ろ う0そ して,も し評 価 対 象 が ハ ッキ リ して い な か っ た 場 合,実 行 す べ き構 成 物 の 内 容(implementedversion)は,時 間 の 経 過 と共 に 変 わ っ て い くだ ろ う。 例 え ば,も し評 価 を実 施 す る エ ー ジ ェ ン トが.教 師 の 場 合,評 価 対 象 を ロ ー カ ル な 環 境 に 合 わ せ た り,資 源 の 配 分,ス ケ ジ ュ ー ル,マ テ リ ア ル(教 材)入 手 の 困 難 さ,な ど の 理 由 で,変 更 を 余 儀 無 く され る こ と も あ ろ う,,勿 論,優 秀 な 評 価 者 は 評 価 の プ ロ セ ス で 起 こ る で あ ろ う,そ の よ う な 変 化 を モ ニ タ ーす る た め の メ カ ニ ズ ム(措 置)を 事 前 に 用 意 して お くだ ろ う。 事 実,解 釈 学 的 ・弁 証 法 的 評 価 法 で はtア ウ ト プ ッ トで あ る構 成 物 も,変 わ っ て く る こ と もあ り う る の で ,評 価 プ ロ セ ス 中 に モ ニ ター す る メ カ ニ ズ ム を 見 つ け る こ と もあ り う る し,変 化 に 寄 与す る こ と も あ ろ う 。 そ れ に もか か わ らず,ま ず ㊤ 最 初 に,ク ラ イ ア ン トの 最 初 の 構 成 物 を 舞 類 の 形 式 で 用 意 す る,② 次 に,評 価 対 象 が 評 価 の プ ロ セ ス 中 に ,変 化 す る 可 能 性 が あ る こ と,を 契 約 書 の な か に 折 り込 む,③ ク ラ イ ア ン トの 最 初 の 構 成 物 は,評 価 の 結 果 明 らか に な る で あ ろ う構 成 物 に 対 す る ベ ンチ マ ー ク に な る。 勿 論 構 成 物 は,時 間 の 経 過 と と も に,依 頼 人 の 構 成 物 に 変 化 を与 え る が,排 除 す る も の で は な い 。 (3)評 価 目 的 の 記 述:グ バ と リ ン カ ー ン は"効 果 的 評 価"の 中 で,評 価 に 対 す る 目 的 は 次 の4つ の 方 法 で 概 念 化 で き る こ と を 示 し て い る,こ れ ら は 評 価 目 的 に よ っ て 異 な る が,一 般 に 構 成 主 義 者 は 要 約 的(Summative)評 価 よ り も 形 成 的(Formative)評 価 を 採 用 す る 傾 向 に あ る(図 表7)。 (1)形 式 的 ・ メ リ ッ ト評 価(aformativemeritevaluation);形 成 的 メ リ ッ ト 評 価
94商 経 論 叢 第37巻 第3号 図表7要 約的評価 と形成的評価 一 形 成 的(Form 一 メ リ ッ ト (Merit) qI形 式 的 ・ メ リ 一 価値 (Worth} (2 形 成 的 ・価f直 、 要 約 的(Summative) 6'要 約 的 ・ メ リ ッ ト 評 価 141要 約 的 ・価 値 評 価 と は,あ る 評 価 対 象 の 本 質 的 価 値 を ア セ ス す る こ と に 関 す る も の で,か つ 改 善 を は か る 意 図 を も っ た もの で あ る 。 例 と して,提 案 され た学 校 の カ リ キ ュ ラ ム が 従 来 の カ リ キ ュ ラ ム と比 較 して,近 代 性,統 合 性,継 続 性,順 序 性,な どの 点 で,従 来 の カ リキ ュ ラ ム と比 較 して,よ り改 善 され た もの で あ る と ア セ スす る こ とが で き た,と い う例 を あ げ て お く。 こ の 評 価 法 は,評 価 対 象 を デ ザ イ ン した り,新 た な 評 価 を構築 す る 開 発 チ ー ム に と っ て,大 変 興 味 が あ る 評 価 法 で あ る。 ま た,評 価 結 果 に 対 す る 関 心 が あ る オ ー デ ィエ ン ス は 評 価 を デ ザ イ ンす る チ ー ム で あ る。 ② 形 成 的 ・価 値 評 価(aformativewo曲evaluation);形 成 的 価 値 評 価 と は,あ る評 価 対 象 の 非 本 質 的 価 値 を ア セ ス す る こ と に 関 す る もの で,か つ 改 善 を は か る 意 図 を も っ た も の で あ る。 例 と して,提 案 さ れ た カ リ キ ュ ラ ム が 望 ま しい 結 果,す な わ ち,ど の 程 度 応 用 能 力 が 向.ヒ した か,な ど を ア セ ス す る もの で あ る 。 こ の 評 価 法 は,現 評 価 対 象 が どの 程 度 実 用 的 か,そ して 実 施 す る た め の 手 段 に 関 心 が あ る グ ル ー プ に とっ て,最 も興 味 が あ る 評 価 法 で あ る 。 ③ 要 約 的 ・メ リ ッ ト評 価(asummativemeritevaluation);要 約 的 メ リ ッ ト評 価 とは,あ る 評 価 対 象 の 本 質 的 価 値 を ア セ ス す る こ と に 関 す る 評 価 法 で, な お か つ 近 代 性,統 合 性,な ど に 対 す る ミニ マ ム ・ス タ ン ダ ー ドを 満 た し て い る か ど うか,を 決 め る 意 図 を持 っ た もの で あ る 。 こ の 評 価 法 は,評 価 対 象 を 利 用 した り,マ ー ケ テ ィ ン グ す る こ と に 関 心 あ る グ ル ー プ に と っ て,最 も 関 心 が あ る も の で あ る 。 オ ー デ ィ エ ン ス は,評 価 結 果 を 利 用 す る 可 能 性 の あ る グ ル ー プ と実 際 に 利 用 す る 人 で あ る。 ④ 要 約 的 ・価 値 評 価(asummativeworthevaluation);要 約 的 価 値 評 価 と は, あ る 評 価 対 象 の 非 本 質 的 価 値 を ア セ スす る こ と に 関 す る もの で,そ の 結 果
第4世 代 評 価95 が 実 際 に使 わ れ る か に 関 す る も の で あ る。 評 価 結 果 が ,実 際 に 採 用 さ れ た 場 合 に,そ の 結 果 に よ っ て 影 響 を う け る グ ル ー プ に 最 も関 心 が あ る か も し れ な い 。 評 価 に 関 す る オ ー デ ィエ ン ス は,評 価 結 果 に 基 づ い て な ん らか の 意 思 決 定 をす る 人 々 で あ る 。 こ の タ イ プ の オ ー デ ィエ ン ス は 様 々 で あ る 。 (4)依 頼 人 あ る い は ス ポ ンサ,_._か ら の 同 意 書(含 む付 帯 条fD:評 価 を 解 釈 学 的 ・弁 証 法 的 方 法 で 実 施 す る こ と に 同 意 す る ク ラ イ ア ン トあ る い は ス ポ ン サ ー か らの 合 意 と,さ らに 付 帯 条 件 に つ い て 記 述 す る。 同 意 書 に は,高 潔 な 立場 に い る 人 か らの 意 見 ・考 え が 含 まれ て い る こ と,交 渉 す べ き パ ー テ ィの な か で,明 確 か つ 効 率 的 に コ ミュ ニ ケ ー シ ョ ン す る 能 力 の な い 人 達(例 え ば,」 な供 や メ ン タルに ハ ンデ ィキ ャ ップ を もって い る人,精 神病 者や 自己管理 で きな い人)を 対 象 と して 除 く こ と,パ ワ ー を 共 有 す る 能 力 の あ る 人f説 得 的 な 交 渉 の 場 に お い て,相 手の 意 見 を 聞 き ・受 け 人 れ る 能 力 の あ る 人 ,価 値 観 の 違 い を 認 め る こ とが で き る 人iコ ミ ッ トす る能 力 の あ る 人,な どの 記 述 が 含 ま れ る 。 (5)評 価 者 は,評 価 を 実 施 中 に,ス テ ー ク ホ ー ル デ ィ ン グ ・オ ー デ ィエ ン ス が 出 現 す る 可 能 性 が あ る こ と を 記 述 す る:も し,ス テ ー ク ホ ル ダ ー のCC&1 が,評 価 の1三な 対 象 で あ る な ら ばi関 連 す る ス テ ー ク ホ ル ダー に は ,ど の よ う な 人 々 が 含 まれ る の か,捜 し出 した り,認 識 して お く必 要 が あ る 。 ク ラ イ ア ン トは,評 価 者 が そ の 意 図 に つ い て,知 っ て い な け れ ば な ら な い 。 評 価 を 実 施 す る 以 前 に,ス テ ー ク ホ ル ダー ・グ ル ー プ を特 定 で き た 場 合,契 約 の 際 に 記 述 して お く場 合 もあ る 。 また,ク ラ イ ア ン トは,評 価 の た め の 調 査 が ど の よ う に 進 行 して い る か,さ らに そ の 途 中 ,新 た に ス テ ー ク ホ ル ダ ー が 出 現 す る 可 能 性 も あ りう る,と い う こ と を理 解 して お くべ き で あ る 。 最 後 に ,ス テ ー ク ホ ル ダー も,評 価 を実 施 す る メ ンバ ー に 人 る の で ,ス テ ー ク ホ ル ダ ー も建 設 的 に 解 釈 学 的 ・弁 証 法 的 条 件 に 同 意 す る こ と を 求 め ら れ て い る こ と を,契 約 条 文 に 規 定 して お くべ きで あ る 。
