WISS
>100 Views
November 12, 17
スライド概要
Wave Impression Search Systemの略で、手書き入力した波形と類似する、激しさ・明るさ・男女度の音楽動画を検索する、今までとは全く違った新時代の音楽動画検索システムです。
2017年11月10日/11日に行われた2日間のハッカソンで出たアイディアを Songle の技術を使用して実現しました！
明治大学 総合数理学部 先端メディアサイエンス学科 中村聡史研究室
関連スライド
各ページのテキスト
キーワードによる検索 - アーティスト名, 曲名など タグによる検索 - ユーザが付与する動画の情報
キーワードによる検索 - アーティスト名, 曲名など タグによる検索 - ユーザが付与する動画の情報 未知の動画と 出会うことが難しい
キーワードによる検索 - アーティスト名, 曲名など タグによる検索 未知の動画と 出会うことが難しい - ユーザが付与する動画の情報 主観的印象からの検索研究が盛ん
音楽動画に対するソーシャルコメントと音響・映像特徴量を用いた印象推定 手法の検討[阿部 2016] コメント 音楽の印象 主観特徴 映像の印象 音響特徴 物理特徴 映像特徴
音楽動画に対するソーシャルコメントと音響・映像特徴量を用いた印象推定 手法の検討[阿部 2016] コメント 音響特徴 音楽の印象 音楽動画の印象は シーンや小節ごとに変化するのでは？ 物理特徴 主観特徴 映像の印象 映像特徴
刻々と変わる印象の変化を 考慮した検索の実現
波形（特徴量変化のイメージ） による音楽動画検索
WISS2017
データベースで管理
波形の始点から終点までのx座標を等分 - 男女度: 10等分 V, A: 12等分 波形のy座標を-1〜1に正規化 波形とデータベースの情報のコサイン類似度を計算
波形の始点から終点までのx座標を等分 - 男女度: 10等分 V, A: 12等分 波形のy座標を-1〜1に正規化 波形とデータベースの情報のコサイン類似度を計算 類似度の高い動画5件を表示
検索種類を多様化 組み合わせ検索（重み付け）
WISS2017 ぜひお越しください！
チーム: PPC 〜Poor Physical Condition〜（又吉，福地，土屋，白鳥） - 土屋: リーダー&発案 - 福地:データベースの設計&作成 - 白鳥: 類似度計算&スライド - 又吉: 手書き入力&サイト