ミーティングと異種の会話場の関連付けによる

グループ内知識流通の促進

西田・角研究室勝木弘

2010/05/24

背景

• 会話の様子を記録，構造化することで行う知識活動支援– 組織において知識交流・創造を行うことは重要– 代表的な支援例：会議支援（ミーティングキャプチャ，議事録作成）

ミーティングを中心に，複数の会話場を対象に支援を行うことでグループ内の知識流通サイクルを実現し，　有益な会話の促進や知識の共有などを行う

個別の会話場にのみ着目する支援では関連する情報を取り逃したり，獲得した知識を利用する機会が限られてしまう

2

知識サイクル

実世界会話場

DB 支援システム

会話記録

知識コンテンツ化

・重要シーン獲得・関連付け

提示・支援

ミーティング立ち話 本棚周辺

3

IMADE

Smart Infill

多人数音声記録装置

視線計測装置

ネットワークカメラ

モーションキャプチャ

加速度センサ 全方位カメラ

電子メモ・写真共有システムPhotochat

インタラクション分析用ツール

4

Interaction Measurement, Analysis & Design Environment

5

ミーティングスペース

本棚スペース

常時稼働

顔認識視線認識音声検出ホワイトボード情報端末操作

立ち話スペース

顔認識・視線認識，うなずき，音声検出，スライド操作，本棚やホワイトボードの利用，写真やメモなどの意味的アノテーション

顔認識，視線認識音声検出本棚利用情報端末操作

会話記録

獲得するモダリティ

• 顔認識，視線検出– 全方位カメラ（ミーティング時） or カメラ（本棚

，立ち話）　＋顔認識ソフトウェア OKAO VISION

• 音声検出 －環境マイク

• うなずき検出 －加速度センサを利用

• 本棚，ホワイトボードの利用 • 意味的アノテーション

– Photochat ＋記録・閲覧用ビューアでのメモ6

顔認識・視線認識

• 全方位カメラ Ladybug2• OKAO Vision による顔認識・視線方向認識• 顔追跡とエラー訂正処理• リアルタイムでの訂正

顔範囲

顔方向

視線方向 空間表示

Ladybug2

A 君 似た研究をどこかで．．

C 君　 6 月の学会で似た研究がありましたね http://www.kuis.kyoto…..RT @A 君　似た研究を．．　B さん　 RW 　 @A 君　ID:0001#photo-20100113 　

A 君　 ID ： 0001 #photo-20100113 　

Real Line / Virtual Line

Capture!

Capture!

Live

つぶやき→

知識コンテンツ化：重要シーン獲得

• 再利用性の高い重要シーンの獲得– 再利用性の高いシーンを得るには参加者の意図に沿うことが重要– 非言語情報から会話の状況や参加者の意図を掴む– 意味情報までは踏み込まない（キーワード単語の利用程度）

・参加者の非言語情報と会話場の情報による状況インデキシング– 話題転換や盛り上がり，注目度，会話場面，…

・参加者のつける意味的アノテーション– メモ・写真情報＋それを書き込む（撮る）という行為

重要シーンの獲得9

知識コンテンツ化：シーンの関連付け

状況インデクス

　日々の活動情報　

会話・参加者情報　　

会話シーンの関連付け（リンク）によるメタ構造

会話シーンの持つ情報メールや Wiki などに

よってグループ内で日常的に行われている情報共有

10

意味的アノテーション

－どのミーティング，どのグループに属しているのか

－属性・キーワードによる類似シーンとの関連

⇒ 現在の状況とマッチングさせて適切な提示を行う

まとめ

• グループ内の知識流通サイクルを実現する– ミーティング，立ち話，本棚周辺における会話の獲得– 非言語情報を用いた重要シーン切り出し– 会話シーンの関連付けによるメタ構造の導入– 有益な会話の促進や知識共有のための提示システム

• 研究室内において日常的に運用することで，グループ内における知識流通が促進される　ことを確認する

11