西尾章治郎大阪大学大学院工学研究科情報システム工学専攻...

JSPS - RFTF AMCP Project

マルチメディア・コンテンツの配送および提示機構

西尾章治郎大阪大学大学院工学研究科

情報システム工学専攻[email protected]


マルチメディア・コンテンツの配送機構


マルチメディア・コンテンツ配送機構の要件

Web

game

movie

いつでもどこでもTPOに合ったコンテンツを届ける


マルチメディア・コンテンツ配送機構の要件

Web

game

movie

コンテンツを

デバイスネットワーク資源システム資源などに基づき

個人コミュニティにあわせて送る

マルチメディア・

コンテンツモデル

資源プロファイ

ル

個人プロファイ

ル


提案する配送アーキテクチャ

a-policyAdaptationMechanism

Resource Profile network resources system resources

MultimediaContents Model

data model time model quality model

request

reserve/ monitorserialization

choose/select

DeliveryMechanism

statusreport

deliveryrequest

アプリケーションレベルの配送ポリシー

Profile

user model community model


技術的課題1. マルチメディア・コンテンツのモデ

ル化

2. 動的な資源プロファイルの実現

3. コンテンツのプロファイルへの適合化

4. 配送システムアーキテクチャ

5. スケーラビリティの実現

Web Game

Movie Agent

適応型Web

個人化コンテンツ自動生成

インタラクティブコンテンツ

エージェントプラットフォーム

Web Movie

Agent

Game

Web

Web

Web

Game

Movie

Game


– ニュース番組ダイジェスト– 野球ダイジェスト

開発したシステム適応型 Web 配送システム

ダイジェスト映像生成システム

コンテンツコーディネーションシステム

インタラクティブコンテンツ

エージェントプラットフォーム


Webserver

Internet

Home users ・ ~56kbps modem

Corporate users ・ 10Mbps LAN

Mobile users ・ 9.6, 64kbps cellular

適応型 Web 配送システム多様な Web 環境に適応した配送方法

配送に 8 秒かかると 1/3 のユーザはコンテンツ参照を諦めてしまう

8 秒ルール


配送時間制御機構

コンテンツの品質の動的な変更による配送時間制御

low bandwidth

high bandwidth 有効帯域幅の監視

Web クライアントWeb サーバ

30 sec.

●

●

●

●

●

●

JSPS - RFTF AMCP Project配送順序制御機構の動作例

既存の配送機構( 配送順序の制御なし )

配送順序制御機構( リンクから配送している )


配送順序制御機構

ad1.gif (A1)

ad2.gif (A2)

ad3.gif (A3)

link1.gif (L1)

link3.gif (L3)

link5.gif (L5)

link7.gif (L7)

link2.gif (L2)

link4.gif (L4)

link6.gif (L6)

link8.gif (L8)

head.gif (H)

title.gif (T)

MGET <[L1,…,L8]5,H,A1,A2,A3,T> HTSP/0.9client

<html><head><dto> <seq> <par slice="5"> <xfer object="L1"/> … <xfer object="L8"/> </par> <xfer object="H"/> <xfer object="A1"/> <xfer object="A2"/> <xfer object="A3"/> <xfer object="T"/> </seq></dto></head><body>...

server

L1~L8(parallel)A1A2T HA3

コンテンツの配信順序の動的な変更による配送品質制御

配送順序の指定されたHTML ファイル

指定順序でコンテンツを配送

配送順序を指定したHTTP リクエスト


• 利用者のプロファイルを用いたコンテンツの個人適合化– ダイジェスト映像生成システム– 料理メニュー推薦システム

コンテンツコーディネーションシステム

個人化コンテンツの自動生成

検索

組織化個人化

提供


嗜好情報の入力コーディネートされた推薦情報レシピの紹介

個人化コンテンツの自動生成－料理のメニュー推薦システム－

スケジュール種類属性コンテンツ評価値シナリオシナリオコンテンツ編成制約出力シナリオ

フィルタリング

種類属性の適用制約を満たすまで繰り返す

コンテンツの適用シナリオ


コンテンツコーディネーションシステムの実証実験

•ダイジェスト映像作成システム–2000 年夏の高校野球（朝日放送ら）

•各試合について個人化したダイジェストを提供•103 ユーザが参加し， 96 名から回答

•料理メニュー推薦システム–ネットワークエンタテイメント流通プラットフォーム実証実験： NTT 西日本ら ,2001 年

•10 種類のジャンルの 116 品目の料理•約 100 ユーザが参加し， 32 名から回答

–次世代 TV に適応 (NTT らとの共同研究 )

JSPS - RFTF AMCP Project インタラクティブコンテンツの品

質制御多人数同時参加型ネットワークゲーム

– CittaTron• 負荷分散・軽減機能

– 管理データの動的変更

震災情報提供システム

– C3 (Communication, Coordination, Consistency)

• 動的な配送データの品質制御－配送するデータの自動選択　－差分情報の送信と LoD の実現


インタラクティブコンテンツ品質制御

システムの実証実験

C3 の実証実験 (2000 年 2 月 )– Japan Gigabit Network を利用した実証実験– Interactive-VRML 転送システムを用いた震災情報システムの有効性を検証

CittaTron の実証実験 (2000 年 10 月 )– 3 箇所にサーバを配置 ( 沖縄，倉敷，園部 )– 倉敷，園部の CATV インターネット ( 高速アクセス ) ユーザ，沖縄のダイアルアップインターネット (低速アクセス ) ユーザの異なる環境のユーザ約 50 名が参加– サーバの負荷分散機能，負荷軽減機能の有効性を検証


適応的マルチメディアコンテンツ配送機構

コンテンツ適応機構

ユーザプロファイ

ル

•端末プロファイル

•個人プロファイル

個人化，同期化　端末・個人への適応ネットワーク環境への適

応

コンテンツ

WWW サーバ

利用者

適応コンテンツの配送

コンテンツ要求

プロファイルの登録・更新

コンテンツ提供者

メタデータ

コンテンツの格納

コンテンツ配送機構


時空間を用いたマルチメディア・コンテンツの

提示機構


理解の深化• 記憶に残るような効果的なコンテンツの見せ方

記憶

記録

記録

記録記録

記録

単なる記録ではなく，記憶に残るような提示方法


包括的な目標• マルチメディアコンテンツの持つ連続性，半構造性

を生かして，ユーザにわかりやすく大量のマルチメディアコンテンツを提示するために，空間あるいは時間を利用した提示手法を確立する．

未来現在

過去

時間軸を用いたコンテンツ提示

空間のメタファを用いたコンテンツ提示


空間を用いたコンテンツ提示機構

• 技術的課題マルチメディア情報の多様さ

• 必要な空間情報を完備しないため，統一的な手法で情報を提示することが困難

貧弱な空間情報• 空間を直接表さないものや空間の断片しか表

さないマルチメディア情報


開発したシステム

– IBNR– STAMP

静止画から擬似空間を生成し，断片情報を連続的な空間として提示するシステム

– 拡張デスクトップ– ロボトップ– Name-at

映像から擬似空間を生成し，断片情報を連続的な空間として提示するシステム

– 芭蕉

テキストから空間情報を抽出し，断片情報を空間として提示するシステム


空間を用いたコンテンツ提示機構－ IBNR －

仮想空間上にさらにマルチメディア・コンテンツを配置

複数の静止画から仮想空間を構築


モバイル端末から得られるカメラ画像から仮想空間を構築

空間を用いたコンテンツ提示機構ー拡張デスクトップー

画像解析や各種センサ情報から空間情報を抽出してカメラ画像を空間として提示

カメラの動きにリアルタイムに追随することであたかも現実空間上にコンテンツが配置されているかのように提示する．

構築した仮想空間上に，さらにマルチメディア・コンテンツを配置


時間を用いたコンテンツ提示機構

受動的視聴Web の閲覧など

時間軸上にコンテンツをインライン化

• マルチメディア・コンテンツの連続性を生かした提示


時間を用いたコンテンツ提示機構• 技術的課題

– マルチメディア情報の半構造性• 複数のコンテンツをひとつの時間軸上に同期させることが困難

同期化可能？極小タグ領域

<Z> <X>

</X> <Y></Y></Z>

s1

s2画像 img

Webページ上のコンテンツを同期化する場合

構造化<Y>

s1 s2 img

<X>

<Z>


開発したシステム

– S-XML

テレビ型 Web 視聴システム

– 同期化可能領域の発見– Web3D コンテンツの自律的提示方式– Web サイトの自律的提示方式 (WebSkimming)

Web コンテンツの TV 的視聴のための自動変換

– WebCarousel– i-Shadow

携帯端末での TV 的視聴

演出記述などが可能な受動的視聴コンテンツ記述言語


時間を用いたコンテンツ提示機構ーテレビ型 Web 視聴システムー

同期化コンテンツ

生成

台本自動生成（提示パス生成）

意味構造解析（部分文書抽出，タグ解析による

同期化領域の発見）

S-XML通常の Web（ HTML文書）

台本記述(S-XML)

TVML（音声読み上げ，

CG アニメ）

SMIL（映像ストリーム）

WebSkimming


時間を用いたコンテンツ提示機構ーモバイル端末による視聴ー

○□☆ ◇

検索で得られた関連性のあるコンテンツ群

Web サイト

WebCarousel

アンカーの抽出

A

B C D

E F G H I J

モバイル端末でインライン化されたコンテンツを閲覧

A

B C D

E F G H I J

i-Shadow

カルーセルの形成

西尾 章治郎 大阪大学大学院工学研究科 情報システム工学専攻...

Documents

西尾章治郎大阪大学大学院工学研究科情報システム工学専攻...