Tsukada Lab. Computer Network Group

時空間メディアを管理するオントロジーとインタラクティブ視聴体験への応用 (An Ontology for Spatio-Temporal Media Management and Application to Interactive 3D Audio-Visual Viewer)

加藤慎 (Shin Kato)

修士論文, 東京大学大学院 情報理工学系研究科(江崎・落合研究室), 2021年3月31日

3行要約

  • SDM Ontologyを拡張し、時空間情報を持つメディアの収録に加えて編集・加工も記述できるようにした。
  • Web360²では、クラシック公演とジャズセッションのデータセットを使い、360度映像と立体音響を操作しながら視聴できる。
  • 対面とオンラインのアンケートにより、視聴環境の違いが体験に及ぼす影響を調べた。

論文の図

図 3.2: SDM Ontology Version 2 の構造概要
図 3.2. SDM Ontology Version 2 の構造概要出典: 修士論文、東京大学、2021(著者版) の図 3.2Context・Recorder・Processor・Player・Media の5つの基本クラスと、Geometry・CoordinateSystem・MediaEvent などがオブジェクトプロパティで結ばれる構造が分かる。
図 4.1: Web360² のシステム設計
図 4.1. Web360² のシステム設計出典: 修士論文、東京大学、2021(著者版) の図 4.1タブレットのブラウザがタッチ・ジャイロ入力に応じて立体音響と3D映像を生成し、SDM Ontology のRDFストアへSPARQLで問い合わせてメタデータを取得する構成が分かる。

アブストラクト(原文)

メディアコンテンツの制作は収録,編集・加工,配信,再生の四段階に分割して考えることが できる.著者が所属する SDM (Software Defined Media) コンソーシアムでは,三次元映像・ 音声メディアを管理するための構造フレームワークとして SDM Ontology の提案を進めてき た.SDM Ontology は制作フローの収録段階を対象として,様々かつ膨大なメタデータを階 層構造に整理し,RDF (Resource Description Framework) による記述,LOD (Linked Open Data) の作成によってオープンデータとしてアクセスを可能にした.本研究では,メディア 収録段階より先の制作フローに焦点を当て,特にメディア編集・加工段階を SDM Ontology の記述対象範囲に加えるとともに,従来の構造について考察し直し,音楽イベントに限らず 時空間情報をもつメディアを管理する,より汎用的なフレームワークとして SDM Ontology Version 2 を提案する.また,SDM Ontology Version 2 の活用例として,インタラクティブ に 360◦ 動画および立体音響を視聴体験できる Web アプリケーション「Web3602」を開発し た.Web3602 は SDM Ontology Version 2 に準拠するクラシックコンサートおよびジャズ セッションイベントのデータセットを問い合わせて動作する.このアプリケーションについ て,Interop Tokyo 2019 での対面アンケート,2020 年 12 月より開始した Web アンケートの 2 種類の主観評価を実施し,インタラクティブ視聴体験の有効性や異なる視聴環境が及ぼす影 響を検証・考察した.さらに,SDM Ontology Version 2 の普及活動の一環として,オントロ ジーの語彙体系を説明する Web ドキュメントを作成および公開し,LOD の普及促進を目的に 毎年開催される「LOD チャレンジ」のアプリケーション部門に Web3602,データセット部門 に SDM Ontology Version 2 準拠のデータセットを提出した.LOD チャレンジにおいては, データセット部門への応募作品で最優秀賞およびスポンサー賞を受賞した.

引用方法

加藤慎 (Shin Kato), “時空間メディアを管理するオントロジーとインタラクティブ視聴体験への応用 (An Ontology for Spatio-Temporal Media Management and Application to Interactive 3D Audio-Visual Viewer),” in 修士論文, 東京大学大学院 情報理工学系研究科(江崎・落合研究室), 2021.

BibTeX

@mastersthesis{Kato2021,
  title         = {時空間メディアを管理するオントロジーとインタラクティブ視聴体験への応用 (An Ontology for Spatio-Temporal Media Management and Application to Interactive 3D Audio-Visual Viewer)},
  author        = {加藤慎 (Shin Kato)},
  year          = {2021},
  date          = {2021-03-31},
  urldate       = {2021-03-31},
  school        = {修士論文, 東京大学大学院 情報理工学系研究科(江崎・落合研究室)},
  abstract      = {メディアコンテンツの制作は収録,編集・加工,配信,再生の四段階に分割して考えることが できる.著者が所属する SDM (Software Defined Media) コンソーシアムでは,三次元映像・ 音声メディアを管理するための構造フレームワークとして SDM Ontology の提案を進めてき た.SDM Ontology は制作フローの収録段階を対象として,様々かつ膨大なメタデータを階 層構造に整理し,RDF (Resource Description Framework) による記述,LOD (Linked Open Data) の作成によってオープンデータとしてアクセスを可能にした.本研究では,メディア 収録段階より先の制作フローに焦点を当て,特にメディア編集・加工段階を SDM Ontology の記述対象範囲に加えるとともに,従来の構造について考察し直し,音楽イベントに限らず 時空間情報をもつメディアを管理する,より汎用的なフレームワークとして SDM Ontology Version 2 を提案する.また,SDM Ontology Version 2 の活用例として,インタラクティブ に 360◦ 動画および立体音響を視聴体験できる Web アプリケーション「Web3602」を開発し た.Web3602 は SDM Ontology Version 2 に準拠するクラシックコンサートおよびジャズ セッションイベントのデータセットを問い合わせて動作する.このアプリケーションについ て,Interop Tokyo 2019 での対面アンケート,2020 年 12 月より開始した Web アンケートの 2 種類の主観評価を実施し,インタラクティブ視聴体験の有効性や異なる視聴環境が及ぼす影 響を検証・考察した.さらに,SDM Ontology Version 2 の普及活動の一環として,オントロ ジーの語彙体系を説明する Web ドキュメントを作成および公開し,LOD の普及促進を目的に 毎年開催される「LOD チャレンジ」のアプリケーション部門に Web3602,データセット部門 に SDM Ontology Version 2 準拠のデータセットを提出した.LOD チャレンジにおいては, データセット部門への応募作品で最優秀賞およびスポンサー賞を受賞した.},
  keywords      = {SDM, Thesis},
  pubstate      = {published},
  tppubtype     = {mastersthesis}
}