動画に対する音響的装飾の分析と視覚的装飾を可能とする手法の提案

動画に対する音響的装飾の分析と 視覚的装飾を可能とする手法の提案 松田滉平（明治大学B3/JST CREST） 中村聡史（明治大学/JST CREST） Entertainment Computing 2015 2015/09/26

紹介ビデオ

背景 • この動画は好きだけど物足りない… • 迫力を出したい • もっと怖くしたい • 賑やかな雰囲気を出したい ちょっとした演出を加えて 動画をより面白くしたい

背景 • 動画編集 • 編集ソフトを使いこなすスキル • エンコードに関する知識 • ビットレート • コーディック • 解像度 • アップロードの手間 手間と技術が必要になる ハードルの高い作業

先行研究 • ＤecoＭixer[中村 2013] • 投稿された動画に対してブラウザ上から音響 的装飾が可能なシステム 効果音や BGMの付与 音量調整 スキップ 機能

DecoMixer：音響的装飾のデータ ニコニコ動画 22件 YouTube 114件 合計 136件 装飾タイプ別の動画数 70 62 60 50 40 30 21 27 28 スキップタイプ BGM付与タイプ 20 10 0 音量調整タイプ 効果音演出タイプ 装飾によって動画の演出を したいというニーズが多い

目的 オリジナルの動画自体に手を加えず 視覚的装飾付与による演出を可能にする • 視覚的装飾でより幅広い演出を可能に • 装飾した動画を他者と共有可能に

プロトタイプシステム • ブラウザ(Chrome)拡張 • 動画の時間に合わせて付与した装飾を描画 • 使用言語（ライブラリを含む） • JavaScript/jQuery/P5.js/PHP

装飾例：８名の実験協力者から • 任意の動画に対して自由に装飾 • 動画22件に対して200件の装飾 • 最多頻度「集中線」30％ • 最少頻度「雨」「吹雪」3％ • 環境を変化させないエフェクトが高頻度 • エフェクトを種類で分けるが必要

考察 • 視覚的装飾の選択時間 • エフェクトが数が増えると時間がかかる • エフェクト付与する時間の調整 • 微調整が難しい • 動画とエフェクトの相性 • 黒背景に暗くするエフェクト

まとめ • ちょっとした動画の装飾を可能にする 手法をブラウザ拡張として実装 • 今後の課題 • 動画に合ったエフェクトを推薦 • ユーザ自身によるエフェクトの生成と共有 デモ：A-207 http://goo.gl/zEqj3t

• http://goo.gl/zEqj3t