Comments
Description
Transcript
電子情報通信学会ワードテンプレート (タイトル)
DEIM Forum 2016 B4-5 レファレンス事例の分析による論文検索に効果的な要素の調査 難波 英嗣 広島市立大学大学院情報科学研究科 〒731-3194 広島市安佐南区大塚東 3-4-1 E-mail: [email protected] あらまし 本研究では，第一回 NTCIR ワークショップ情報検索タスクの検索課題およびレファレンス協同事例 や Yahoo! 知恵袋の回答欄に学術論文データベースへのリンクがあるものを対象に，論文調査目的のレファレンス 事例を分析し，求める論文を特定するのにどのような情報が効果的かという観点で，検索状況および検索手法を体 系的に調査する． キーワード 情報検索, 情報要求, 学術論文，レファレンス事例 1. は じ め に 学術論文検索では，情報要求を満たす論文を網羅的 に探す必要がある．しかし，初学者にとって，それは あ る [2, 3]． 図 1 は ， 実 際 に NTCIR-1 情 報 検 索 タ ス ク で 使 わ れ た 検 索 課 題 の 例 で あ り ，本 研 究 で は ，NTCIR-1 情報検索タスクのデータを分析に用いる． なかなか容易ではない．そこで，著者らは，初学者が 論文を検索する際，適切な検索語を推薦することで， <TOPIC q=0005> 検索作業を 支援するシステムの開発に取り組んでいる． <TITLE> こ の よ う な 検 索 支 援 シ ス テ ム を 開 発 す る に は ，「 ど 特徴次元リダクション のような情報要求に対し，検索者がどのようなプロセ </TITLE> スで検索しているのか」を調査する必要がある． そこ <DESCRIPTION> で，本研究では，論文調査目的のレファレンス事例を クラスタリングにおける特徴次元リダクション 大量に収集し，情報要求およびプロセスを 体系的に分 </DESCRIPTION> 析する． <NARRATIVE> 本論文の構成は以下のとおりである．次節では，論 オブジェクトのクラスタリングを行なうとき、オブジ 文検索および情報要求 の分類に関する関連研究につい ェクトを特徴ベクトルで表現することが望まれる。ア て述べる． 3 節では，論文調査目的のレファレンス事 プリケーションによっては、オブジェクトの次元は数 例の収集および分析結果について報告し， 4 節で本稿 千、数万となることがある。このような場合、事前に をまとめる． 次元を落とすことが必要になる。正解文書は、特徴次 元リダクションの方法について、理論面から、または 2. 関 連 研 究 実験によって、提案、比較などを行なっているもの。 2.1 学 術 論 文 を 対 象 と し た 情 報 検 索 画像処理などの実験の操作の一部として特徴次元リダ 学術論文を対象とした情報検索の研究は古くから クションを用いているだけでは要求を満たさない。 行 わ れ て お り ，Cranfield，Medlars，CACM，NPL，LISA </NARRATIVE> など，数多くのテストコレクションが作られてきた． <CONCEPT> よ り 最 近 の 研 究 プ ロ ジ ェ ク ト と し て ， TREC で 行 わ れ 特徴選択, 主成分分析, グラフ理論, 情報の粒度, 幾 た Chemical IR ト ラ ッ ク が あ る [1]． こ の ト ラ ッ ク の 中 何クラスタリング で実施された技術サーベイタスクでは，化学のある分 </CONCEPT> 野の動向を知るために必要な論文と特許を検索するこ <FIELD> とを目的としている．このタスクでは，例えばある化 1.電 子 ・ 情 報 ・ 制 御 合物の画像ファイルおよび構造ファイルが検索システ </FIELD> ムの入力として与えられ，その化合物に関する特許と </TOPIC> 論文を検索することが求められる． 図1 NTCIR-1 検 索 課 題 の 例 ([2]よ り 抜 粋 ) 上述のプロジェクトは英語を対象にしているが，日 本語論文を対象にしたものに，第一回および第二回 NTCIR ワ ー ク シ ョ ッ プ で 行 わ れ た 情 報 検 索 タ ス ク が 2.2 情 報 要 求 の 分 類 渡 邊 ら [4]は ， QA サ イ ト の 質 問 を ， 以 下 の 5 つ の タ イプに分け，機械学習に基づく手法で，自動的に分類 また，実際に知恵袋とレファ協から収集したレファレ する手法を提案している． ンス事例を図 2 および図 3 に示す．知恵袋の各エント リは，エントリ投稿時に投稿者自身が知恵袋で設定さ 事 実 ： 事 象 の 定 義 ， 真 実 ，客 観 的 な 理 由 や 手 法 を れているカテゴリを付与することになっている．知恵 問う質問 袋カテゴリは，3 階層から構成されており，最下層で 根拠：客観的な根拠，理由を問う質問 約 300 カ テ ゴ リ 存 在 す る ．図 2 の 事 例 は ， 「教養と学問、 経 験：回 答 者 の 経 験 や 体 験 が な け れ ば 回 答 で き な サ イ エ ン ス >生 物 、動 物 、植 物 >動 物 」と い う カ テ ゴ リ い質問 に 分 類 さ れ て い る ．一 方 ，レ フ ァ 協 の 各 エ ン ト リ に は ， 提 案：問 題 の 解 決 方 法 を 問 う 質 問 や 情 報 提 供 を 依 日 本 十 進 分 類 法 (NDC)の 分 類 コ ー ド が 付 与 さ れ て い る ． 頼する NDC は ， 3 階 層 か ら 構 成 さ れ て お り ， 最 下 層 で 約 950 意 見 ： 推 測 ，嗜 好 な ど ， 主 観 的 に 回 答 を し て よ い カテゴリ存在する．このうち，図 3 の事例には 2 つの 質問 コード「食品．料理」と「衛生学．公衆衛生．予防医 学」が付与されている．レファ協 レファレンス事例に 上 述 の も の と は 定 義 は 若 干 異 な る も の の ， 林 ら [5]も ， は ， さ ら に ， 回 答 を 導 き 出 す 過 程 (回 答 プ ロ セ ス )に つ 渡 邉 ら と 同 様 に ，質 問 を「 事 実 」， 「 根 拠 」， 「 経 験 」， 「提 い て も 記 載 さ れ て い る 場 合 が あ る ．3.2 節 お よ び 3.3 節 案 」，「 意 見 」 の 5 つ の タ イ プ に 分 類 し て い る ． 本 研 究 では，質問と回答だけでなく各事例に付与されたカテ で も ， QA コ ン テ ン ツ を 分 類 す る と い う 点 で は こ れ ら ゴリや回答プロセスを用いたレファレンス事例の分析 の研究と共通するが， 論文調査目的のレファレンス事 結果について報告する． 例に対象を限定し，学術に特化したカテゴリを扱う点 が異なる． 質問：皇居の生物相について皇居にはたくさんの生物 が生息していると知ったのですがどのくらいの生物が 3. レ フ ァ レ ン ス 事 例 の 収集 と 分 析 生息しているのですか 3.1 レ フ ァ レ ン ス 事 例 の 収 集 回 答 ： 1996〜 2000 年 度 の 生 物 相 調 査 で 3,638 種 の 動 以下の 3 種類のデータ ベースを論文調査目的のレフ ァレンス事例として収集し，分析に用いる． 物 と 1,366 種 の 植 物 が 見 い だ さ れ た そ う で す 。 動 物 の うちの殆どは昆虫をはじめとした節足動物です。この 第 1 回 NTCIR ワ ー ク シ ョ ッ プ 情 報 検 索 タ ス ク 報 告 は「 国 立 科 学 博 物 館 専 報 」に 掲 載 さ れ て い ま し て 、 の検索課題 一部パソコン上で無料で公開されているのでご覧にな Yahoo!知 恵 袋 デ ー タ ベ ー ス ってはいかがでしょう。 知 恵 袋 の 各 エ ン ト リ で ，回 答 欄 に NII 学 術 情 報 http://ci.nii.ac.jp/naid/110004313456 ナ ビ ゲ ー タ (CiNii) へ の リ ン ク が あ る も の は 論 http://ci.nii.ac.jp/naid/110004313489 文 調 査 目 的 の レ フ ァ レ ン ス 事 例 と 考 え て ，質 問 http://ci.nii.ac.jp/naid/110004313511 と回答の対を収集する． レファレ ンス協 同 事例デ ータベ ース (レフ ァ 協 )1 知 恵 袋 と 同 様 に ，回 答 欄 に NII 学 術 情 報 ナ ビ ゲ ー タ (CiNii) へ の リ ン ク が あ る も の は 論 文 調 査 目 的 の レ フ ァ レ ン ス 事 例 と 考 え て ，質 問 と 回 答 の対を収集する． 上記の 3 種類のデータベースから収集したレファレン ス事例数を表 1 に示す． 表1 1 収集した論文調査目的のレファレンス事例数 データベース 事例数 NTCIR-1 83 442 Yahoo!知 恵 袋 3032 レファ協 3557 計 http://crd.ndl.go.jp/reference/ カ テ ゴ リ ： 教 養 と 学 問 、 サ イ エ ン ス >生 物 、 動 物 、 植 物 >動 物 図2 Yahoo!知 恵 袋 の レ フ ァ レ ン ス 事 例 (http://detail.chiebukuro.yahoo.co.jp/qa/question_detail/q 12115380622) 質問：サフランの代わりにクチナシの乾燥果実を使っ てもち米を蒸してみたところ、緑がかった黄色に染ま ってしまった。黄色をきれいに出す方法はないか。 回 答：山 口 加 代 子 ,木 咲 弘「 ク チ ナ シ 果 実 で 黄 色 に 染 め た お こ わ の 緑 変 に つ い て 」（ 調 理 科 学 22-3）、 同「 ク チ ナシ果実で黄色に染めたおこわの緑変について―ゲニ ポ サ イ ド の 青 変 反 応 」（ 調 理 科 学 26-3） を ご 覧 い た だ いた。 回答プロセス：料理書コーナーや栄養学の書架を確認 したが、関連した記述のある図書を見つけられなかっ 表4 レファ協のカテゴリごとのレファレンス事例数 カテゴリ名 件数 136 日 本 史 (210 9 版 ) 56 日 本 文 学 (910 9 版 ) 45 中 国 (222 9 版 ) 44 詩 歌 (911 9 版 ) 41 個 人 伝 記 (289 9 版 ) 40 小 説 ． 物 語 (913 9 版 ) 39 経 営 管 理 (336 9 版 ) 26 社 会 福 祉 (369 9 版 ) 26 朝 鮮 (221 9 版 ) 26 詩 歌 ． 韻 文 ． 詩 文 (921 9 版 ) た 。 そ こ で CiNNi ( マ マ ) Artlicles 日 本 の 論 文 を さ が す （ http://ci.nii.ac.jp/）に て「 ク チ ナ シ 」を キ ー ワ ー ド に ま ず ，NTCIR-1 の 事 例 に つ い て 述 べ る ．表 2 に お い 検索した中から 2 論文を紹介した。 て ，今 回 は 科 学 技 術 系 の 分 野 を 想 定 し て い る た め ， 「 8. NDC： 食 品 ． 料 理 人文・社会」カテゴリの事例は分析対象から外した． 予防医学 図3 (498 (596 ９ 版 )， 衛 生 学 ． 公 衆 衛 生 ． な お ，NTCIR の 各 検 索 課 題 に は 2 つ 以 上 の カ テ ゴ リ が ９版) 付与されているものもある．表 2 に示す数字は， レファレンス協同事例のレファレンス事例 (http://crd.ndl.go.jp/reference/modules/d3ndlcrdentry/ind 次 に ，知 恵 袋 の 事 例 に つ い て 述 べ る ．表 3 に お い て ， 一 番 件 数 の 多 い 「 教 養 と 学 問 、 サ イ エ ン ス >言 葉 、 語 ex.php?page=ref_view&id=1000163931) 学 >英 語 」 カ テ ゴ リ は ， あ る 日 本 語 の 専 門 用 語 を 英 語 3.2 分 析 対 象 と す る レ フ ァ レ ン ス 事 例 の 選 定 3.1 節 の 表 1 で 示 し た 3 種 類 の レ フ ァ レ ン ス 事 例 に でどのように表現するのかについて質問したものであ ついて，カテゴリごとの分布を調査した． それぞれの る ． こ の カ テ ゴ リ の 事 例 は ， 回 答 中 で CiNii の 論 文 が 調 査 結 果 を 表 2～ 表 4 に 示 す ．い ず れ の 表 に お い て も ， 引用されているものの，必ずしも論文を引用する必要 レ フ ァ レ ン ス 事 例 の 件 数 が 多 い 順 に 上 位 最 大 10 カ テ 性はなく，今回の分析に馴染まないものが多いため， ゴリを示している． 分 析 対 象 か ら 外 し た ．ま た ， NTCIR-1 と 同 様 ， 社 会 科 表2 学系などの分野の事例も分析対象から外した． 1. 8. 7. 6. 4. 3. NTCIR-1 の カ テ ゴ リ ご と の レ フ ァ レ ン ス 事 例 数 カテゴリ名 件数 68 電子・情報・制御 21 人文・社会 10 医学・歯学 10 工学 7 生物学・農学 4 建築・土木・造園 表 3 Yahoo!知 恵 袋 の カ テ ゴ リ ご と の レ フ ァ レ ン ス 事 例数 カテゴリ名 教 養 と 学 問 、サ イ エ ン ス >言 葉 、語 学 >英 語 教 養 と 学 問 、 サ イ エ ン ス >宿 題 健 康 、 美 容 と フ ァ ッ シ ョ ン >健 康 、 病 気 、 病 院 >病 気 、 症 状 、 ヘ ル ス ケ ア 子 育 て と 学 校 >大 学 、 短 大 、 大 学 院 >大 学 教 養 と 学 問 、 サ イ エ ン ス >一 般 教 養 教 養 と 学 問 、 サ イ エ ン ス >生 物 、 動 物 、 植 物 >植 物 教 養 と 学 問 、 サ イ エ ン ス >歴 史 >日 本 史 教 養 と 学 問 、 サ イ エ ン ス >数 学 、 サ イ エ ン ス >化 学 教 養 と 学 問 、サ イ エ ン ス >言 葉 、語 学 >日 本 語 教 養 と 学 問 、 サ イ エ ン ス >数 学 、 サ イ エ ン ス >工 学 最後に，レファ協の事例の傾向について述べる．表 4 からわかるとおり，レファ協の事例は社会科学系の 事例が多い．上述のとおり，本研究では科学技術系の 分 野 を 想 定 し て い る た め ， 該 当 す る カ テ ゴ リ (4. 自 然 科 学 ， 5. 技 術 ， 6. 産 業 )の レ フ ァ レ ン ス 事 例 を 分 析 対 象とした． ただ，これらの事例の中には，以下の例の よ う に ，目 的 の 文 献 は す で に 書 誌 情 報 が 判 明 し て お り ， その入手方法について質問するという場合 が数多く存 在した． 件数 58 35 34 23 23 20 『京都大学人文科学研究所創立二十五周年記念論文 集 』の 倉 田 淳 之 助「「 説 郛 」版 本 諸 説 と 私 見 」を 探 し て いる。 このような質問はレファ協 事例にのみ現れ，その多く は「 [文 献 情 報 ]を 探 し て 」ま た は「 [文 献 情 報 ]を さ が し て 」と い う パ タ ー ン で 記 述 さ れ て い た ．そ こ で ， 「 を (探 20 19 |さ が )し て 」 と い う 表 現 を 質 問 文 中 に 含 む 事 例 は 分 析 18 ァ レ ン ス 事 例 を 対 象 に 分 析 を 行 う こ と に し た ．次 節 で ， 対 象 か ら 外 し た ．最 終 的 に ，表 5 に 示 す 全 ◯◯件 の レ フ 分析結果について 報告する． 17 表5 分析対象となるレファレンス事例数 データベース 事例数 NTCIR-1 62 268 Yahoo!知 恵 袋 466 レファ協 796 計 示す． 玄米 の吸 水 率が 載 って いる 本 はな いか 。(レフ ァ 協 ： 食 用 作 物 (616)) 材 料 力 学 に つ い て の 質 問 で す ．鋼 材 が 火 災 な ど に よ り 加 熱 さ れ た 時 鋼 材 の 強 度 は 低 下 し ま す が ，そ の後鋼材の加熱冷却後の強度はどのようになる の か 教 え て い た だ け ま せ ん か ．ま た 、参 考 文 献 な 3.3 レ フ ァ レ ン ス 事 例 の 分 析 レ フ ァ レ ン ス 事 例 の 分 析 は ， 2 種 類 の 分 析 ： (1)質 問 ど が あ れ ば 教 え て い た だ け ま せ ん か ．よ ろ し く お の 分 析 お よ び (2)回 答 プ ロ セ ス の 分 析 を 行 っ た ．以 下 に ， 願 い し ま す ． (知 恵 袋 ： 教 養 と 学 問 、 サ イ エ ン ス > 芸 術 、 文 学 、 哲 学 >建 築 ) その結果を 報告する． モバイル環境におけるグループウェアの問題点 と は な に か 。 (NTCIR-1： topic 0036) 質問の分析 NTCIR-1，2 の 検 索 課 題 ，Yahoo!知 恵 袋 お よ び レ フ ァ 協の質問文を対象にした． レファレンス事例を，その (4) そ の 他 の 質 問 内容に応じて以下の 4 種類に分類した． (1)か ら (3)の い ず れ に も 該 当 し な い 質 問 で ，以 下 は そ の例である． (1) コ ト (手 順 ， 手 法 ， 仕 組 み )に 関 す る 質 問 手順，手法，仕組みに関する質問で，以下はその例 こ と が 可 能 か ど う か 知 り た い 。 (レ フ ァ 協 ： 漁 撈 ． である． 衣 服 の 虫 喰 い に つ い て 、予 防 で き る 方 法 が 知 り た 漁業各論 (664)) FET 回 路 の 実 験 で 、 周 波 数 と 、 入 力 波 形 と 出 力 波 い 。（ 染 色 ・ 加 工 な ど ） ま た 、 虫 の 好 む 色 、 に お 形の位相のずれは何か関係があるのでしょう い 、布 の 種 類 な ど も 知 り た い 。(レ フ ァ 協：衣 服 ． か ？（ 比 例 関 係 と か 反 比 例 の 関 係 と か ）(知 恵 袋 ： 裁 縫 (593)) くらげの水分を利用して化粧品として開発する ピ ル ビ ン 酸 を 直 接 、呈 色 さ せ 検 出・定 量 す る 方 法 教 養 と 学 問 、 サ イ エ ン ス >サ イ エ ン ス >工 学 ) 設 計 ・製 造 ・保 全 な ど の 人 工 物 の ラ イ フ サ イ ク ル は あ り ま せ ん か ？ (知 恵 袋 ： 教 養 と 学 問 、 サ イ エ の異なる部門間での情報共有および知識共有に ン ス >サ イ エ ン ス >化 学 ) つ い て 報 告 し た 論 文 ・ 記 事 が 欲 し い 。 (NTCIR-1： TCP を 無 線 通 信 制 御 に 適 用 す る た め の 改 良 方 法 1. 電 子 ・ 情 報 ・ 制 御 ， 6. 工 学 ) に つ い て の 論 文 は な い か 。 (NTCIR-1： 1. 電 子 ・ 情報・制御) 回答プロセスの分析 質 問 の 分 析 に お け る (1)～ (4)を 考 慮 し ，レ フ ァ 協 の 回 (2) モ ノ に 関 す る 質 問 答プロセス を分析した． モノに関する質問で，そのモノが持つ意味，性質， 効果，あるいはそのモノに 関する具体的な事例 などが 回答として望まれる． 以下は，その例である． (a) よ り 適 切 な ク エ リ へ の 修 正 以 下 は「 (2)モ ノ に 関 す る 質 問 」の 例 で ，ク エ リ「 頭 頭蓋骨早期癒合症という病気や治療について知 蓋骨早期癒合症」を，より一般的な表現である「頭蓋 り た い 。 (レ フ ァ 協 ： 医 学 (490)) 骨縫合早期癒合症 」や「頭蓋縫合早期癒合症」に修正 ブリルアン散乱光について知りたいのですが？ し，検索している． ブ リ ル ア ン 散 乱 光 と は 何 な の か ？ ま た 、発 生 原 因 質問：頭蓋骨早期癒合症という病気や治療について知 を 教 え て い た だ き た い の で す が ？ (知 恵 袋：教 養 と りたい。 学 問 、 サ イ エ ン ス >天 気 、 天 文 、 宇 宙 ) 回 答 プ ロ セ ス：1.医 学 辞 典 で 病 名 を 確 認 す る 。 『南山堂 動画像圧縮を行なう知能化イメージセンサに関 医 学 大 辞 典 』p1318～ 1319 に「 頭 蓋 骨 縫 合 早 期 癒 合 症 (ず す る 研 究 が 知 り た い 。(NTCIR-1：1. 電 子・情 報 ・ が い こ つ ほ う ご う そ う き ゆ ご う し ょ う )」 の 記 述 あ り 。 制 御 ， 6. 工 学 ) 2.Google で 「 頭 蓋 骨 縫 合 早 期 癒 合 症 」 を キ ー ワ ー ド に 検 索 す る と 多 数 ヒ ッ ト 。(略 ) 4.GeNii で「 頭 蓋 縫 合 早 期 (3) モ ノ の 属 性 値 に 関 す る 質 問 モノに関する質問であるが，質問文中にモノとその 属性名が記載されており，属性値 が回答として望まれ る．以下の例において，下線がモノ，破線が属性名を 癒 合 症 」 で 検 索 す る と 、 論 文 ３ ３ 件 、 WebcatPlus で 資 料３件がヒット。 (b) 同 義 語 ， 上 位 語 拡 張 した．今後は，この分析で得られた知見，すなわち， 以 下 は ，「 (3) モ ノ の 属 性 値 に 関 す る 質 問 」 の 例 で ， 質問の種類に応じて検索方法やクエリ 拡張の方法が異 「玄米」を，その上位語である「 コメ」に拡張して検 なることを考慮した検索システムを実装し ，検索精度 索している．上位語を使う代わりに検索対象文書に付 が向上できることを実証する． 与されているカテゴリで結果を絞ったり，特定ドメイ ン の デ ー タ ベ ー ス で 検 索 で き な け れ ば ，Google で 検 索 謝辞 したりする，といった事例も見つかった． なお，属性 本 研 究 の 一 部 は 科 学 研 究 費 補 助 金 (基 盤 研 究 (A))( 研 語の「吸水率」は，ここでは「吸水」や「浸漬」に拡 究 課 題 番 号 :15H017214) お よ び 広 島 市 立 大 学 受 託 研 究 張 さ れ て い る が ， こ れ に つ い て は ， 後 の (d)で 述 べ る ． 費(科 学 技 術 振興 機 構 )の 支 援 を 受 け て行 わ れ た． 質問：玄米の吸水率が載っている本はないか。 Yahoo!知 恵 袋 デ ー タ は ， ヤ フ ー 株 式 会 社 か ら 提 供 い た 回 答 プ ロ セ ス：Webcatplus で「 玄 米 吸 だいた．論文データは，国立情報学研究所および科学 浸漬」をキーワードに検索 技術振興機構から提供いただいた．論文検索テストコ → ヒ ッ ト し な い 。２ ．自 館 OPAC で「 炊 飯 」 「米飯」 「コ レクションは，国立情報学研究所主催の第 1 回，第 2 メ 」を キ ー ワ ー ド に 検 索 し 、載 っ て い そ う な 本 を 見 る 。 回 NTCIR ワ ー ク シ ョ ッ プ の も の を 利 用 さ せ て い た だ 水 」「 玄 米 浸 漬 」「 コ メ 吸水」 「コメ い た ． ここに記して謹んで感 謝 の 意 を 表 す る ． (c) 書 籍 を 対 象 に し た 検 索 以 下 は ，「 (1) コ ト (手 順 ， 手 法 ， 仕 組 み )に 関 す る 質 問」の例であり，特に 一般性の高い手順について調べ る時には，書籍を対象にするケースがあった． 質 問 1： 家 庭 で 出 た 生 ご み を ダ ン ボ ー ル に 入 れ て 堆 肥 にする方法を知りたい 回答プロセス：当館蔵書検索 書名＝“生ごみ”で検 索 質 問 2： 外 来 昆 虫 の ア ル ゼ ン チ ン ア リ の 駆 除 方 法 に つ いてまとめられた文献はあるか。 回 答 プ ロ セ ス ： 自 館 OPAC を 使 っ て 、 Kw：“ 外 来 &事 典”で検索する。 (d) 属 性 語 の 拡 張 ・ 省 略 以下は， 「 (3) モ ノ の 属 性 値 に 関 す る 質 問 」の 例 で あ る．このケースでは，属性語である「 デメリット」を ク エ リ か ら 除 外 し て 検 索 し て い る ．上 述 の (b)の 例 で は ， 「吸水率」を「吸水」や「浸漬」などに言い換えて検 索 し て い る ．な お ，以 下 の 例 に お い て ， 「 肝 臓 移 植 」は 「 肝 移 植 」で 検 索 さ れ て い る が ，こ れ は 上 述 の (a)に 該 当する． 質問：肝臓移植のドナーのデメリットについて書かれ た本はあるか。 回 答 プ ロ セ ス ： 49（ 医 学 ） の 所 蔵 資 料 を 「 肝 移 植 」 で 検索し、取寄せて内容を確認。 4. お わ り に 本 研 究 で は ，NTCIR 情 報 検 索 タ ス ク ，Yahoo!知 恵 袋 ， レファレンス協同事例データベースから収集した論文 調 査 目 的 の レ フ ァ レ ン ス 事 例 を 3557 件 収 集 し ，こ の う ち の 796 件 を 用 い て ， 質 問 お よ び 回 答 プ ロ セ ス を 分 類 参 考 文 献 [1] M. Lupu, F. Piroi, J. Huang, J. Zhu, and J. Tait, “Overview of the TREC Chemical IR Track ”, Proceedings of the 18 th Text Retrieval Conference, 2009. [2] N. Kando, K. Kuriyama, T. Nozue, K. Eguchi, H. Kato, and S. Hidaka, “Overview of IR Tasks”, Proceedings of the 1 st NTCIR Workshop Meeting, 1999. [3] N. Kando, K. Kuriyama, and M. Yoshioka, “Overview of Japanese and English Information Retrieval Tasks”, Proceedings of the 2 n d NTCIR Workshop Meeting, 2001. [4] 渡 邊 直 人 , 島 田 諭 , 関 洋 平 , 神 門 典 子 , 佐 藤 哲 司 , “ QA コ ミ ュ ニ テ ィ に お け る 質 問 者 の 期 待 に 基 づ く 質 問 分 類 に 関 す る 一 検 討 ” , DEIM Forum 2011， 2011． [5] 林 秀 治 , 山 本 和 英 , “ 質 問 意 図 に よ る QA サ イ ト質問文の自動分類”, 電子情報通信学会技術研 究 報 告 ， 思 考 と 言 語 ， 113(82)， pp.51-56， 2013．