5.2K Views
February 05, 25
スライド概要
自動運転や先進運転支援システムの普及に伴い、地図情報を高頻度かつ正確に更新することへの要求が高まっています。GO が提供する次世代 AI ドラレコサービス『DRIVE CHART』は、契約台数が8万台を突破しており、本サービスを通じてタクシーやトラックから膨大なドライブレコーダー映像を収集することができます。GO では、収集したドライブレコーダー映像から AI を使って道路情報を認識し、その結果を地図と比較することで現実世界と地図との差分を自動的に抽出する「道路情報の自動差分抽出プロジェクト」を大手地図会社であるゼンリンと共に推進しています。抽出した差分情報は地図の迅速な更新に役立てられます。
本発表では、プロジェクトの全体像に加え、道路標識や走行車線を映像から認識するコンピュータビジョン技術を詳しく解説します。また、膨大なデータを活用したデータ中心の AI 開発(Data-Centric AI)や、道路標識などの認識対象のドメイン知識を重視したアプローチについても紹介します。
◆ チャンネル登録はこちら↓
https://www.youtube.com/c/denatech?sub_confirmation=1
◆ X(旧Twitter)
https://x.com/DeNAxAI_NEWS
◆ DeNA AI
https://dena.ai/
◆ DeNA Engineer Blog
https://engineering.dena.com/blog/
◆ DeNA × AI Day ‖ DeNA TechCon 2025 公式サイト
https://techcon2025.dena.dev/
DeNA が社会の技術向上に貢献するため、業務で得た知見を積極的に外部に発信する、DeNA 公式のアカウントです。DeNA エンジニアの登壇資料をお届けします。
ドライブレコーダー × AIで 地図を最新に保つGOの取り組み GO株式会社 鈴⽊達哉 1 © DeNA Co., Ltd.
⾃⼰紹介 鈴⽊達哉 / Tatsuya Suzuki GO株式会社AI技術開発部 ● 2020年DeNA⼊社後から出向中 ● コンピュータビジョンが専⾨ ● データ中⼼のAIに関する勉強会運営や執筆 https://dcai-jp.connpass.com/ 2 © DeNA Co., Ltd.
GOというとタクシーの話? 3 © DeNA Co., Ltd.
GO株式会社について GO Reserve / GO Crew タクシーアプリのキャッシュレス 決済機能 タクシー配⾞や経費精算などを 簡単効率化した法⼈向けサービス GO SHUTTLE GO PREMIUM 相乗りサービスの開発‧運営 ⾼級ワンボックス⾞による 上質な移動体験提供 乗務員App アプリ注⽂をメインに営業 GO ジョブ タクシー乗務員に加え 様々な運輸職種を紹介 TOKYO PRIME 2020年、DeNAのMOV/DRIVE CHART事業とJapanTaxiが統合し誕⽣ GO GX 充電インフラ提供、エネルギーマネジメ ントシステムの提供、EV⾞両リースなど 商⽤⾞の包括的脱炭素化サービス タクシーの運⾏特性に応じた EV運⾏マネジメントと エネルギーマネジメントによるCO2削減 AIドラレコによって 危険シーンを解析‧報告し 運⾏管理に活⽤ 本⽇は AIドラレコ の話 AIドラレコのデータを元に、 地図と実際の道路情報の差分を AI技術によりメンテナンス 市中の急速充電スポットの検索‧予約‧決済 がオンラインで完結するEV充電サービス 乗務員向けアプリの開発‧運営 4 ⽇本版ライドシェア‧ 公共ライドシェアへの対応 タクシーサイネージメディア (動画広告) ※記載されている会社名や商品名などは、 各社の商標または登録商標です。(出願中含む) © DeNA Co., Ltd.
アジェンダ 1. 2. 3. 4. 5. 5 次世代AIドラレコサービス『DRIVE CHART』 前半で課題と解決策を紹介 地図を最新に保つ課題と解決策 データ中⼼のAI開発 後半で解決のための⼯夫を紹介 ドメイン知識の活⽤ まとめ © DeNA Co., Ltd.
アジェンダ 1. 2. 3. 4. 5. 6 次世代AIドラレコサービス『DRIVE CHART』 地図を最新に保つ課題と解決策 データ中⼼のAI開発 ドメイン知識の活⽤ まとめ © DeNA Co., Ltd.
次世代AIドラレコサービス『DRIVE CHART』 ● BtoBの交通事故削減⽀援サービス ● 安全を脅かす様な運転の癖や⾏動をAIが検知 内向きカメラ + 画像解析(⾞内映像) ドライバーの状態に潜む危険 外向きカメラ + 画像解析(⾞外映像) リアルタイムの警報 +毎⽇のレポート 交通環境‧⾛⾏状況に潜む危険 7 © DeNA Co., Ltd.
全国で利⽤される『DRIVE CHART』 ● 契約⾞両数9万台(※1)以上 ● 全国の商⽤⾞(タクシー‧トラック‧営業⾞等)に導⼊ ※2 ※3 ※4 ※1 2024年12月時点 https://goinc.jp/news/pr/2024/12/09/s28aecw0svmhfbspniqqy ※2 https://goinc.jp/news/pr/2022/01/06/6cdiadawy64fwfrdfmtfvx ※3 https://goinc.jp/news/pr/2022/08/01/5vqg8vnq0eo01uwlzcc91y/ ※4 https://goinc.jp/news/pr/2022/08/01/2edtfbgwwievvvhsf0sdbr/ 8 © DeNA Co., Ltd.
⽇本中の⾛⾏映像が取得可能 ● 『DRIVE CHART』搭載⾞両が⽇本中の道路を⾛⾏ ● 指定道路‧⽇時の映像をサーバーに集約可能 他の社会課題の解決にも活⽤ 1ヶ⽉間に ⾼速道路の96% ⼀般国道の91% を⾛⾏(※) ※ 2023年1⽉時点のデータ https://drive-chart.com/news/pr_230216 9 © DeNA Co., Ltd.
アジェンダ 1. 2. 3. 4. 5. 10 次世代AIドラレコサービス『DRIVE CHART』 地図を最新に保つ課題と解決策 データ中⼼のAI開発 ドメイン知識の活⽤ まとめ © DeNA Co., Ltd.
カーナビがこう喋っているのはなぜ? 実際の交通規制に 従って⾛⾏してください 11 © DeNA Co., Ltd.
交通規制は⽇々変化 地図も更新されていくが実際の交通規制と差が⽣じる 12 © DeNA Co., Ltd.
現状の地図の課題 ⾃動運転や先進運転⽀援システムも利⽤するため⾼頻度な更新が必要 現状は⼿作業に頼る部分も多く 更新頻度を上げる為には、 作業の効率化が必要 13 © DeNA Co., Ltd.
ドライブレコーダー×AIで解決 ⽇本中のドライブレコーダー映像をAIで認識し地図との差を発⾒ コスト削減&更新期間の短縮を実現 14 © DeNA Co., Ltd.
地図会社⼤⼿のゼンリンと協業し 2022年より⾼速道路で試験運⽤中 今後⼀般道へも拡張 たとえば 標識が増えていたら AIが発⾒ 画像はプレスリリースより。 https://goinc.jp/news/pr/2022/05/10/5gbjx1pgcoftwipizhkvt8/ 15 © DeNA Co., Ltd.
16 © DeNA Co., Ltd.
ドライブレコーダー×AIで地図を更新 認識結果 映像を 収集 サーバーで AIが認識 認識ID 種類 座標 xxxx1 通⾏⽌め 35.65.. xxxx2 通⾏⽌め 35.65.. NEW! ⽐較 地図データベース 17 標識ID 種類 座標 A1 通⾏⽌め 35.65.. © DeNA Co., Ltd.
映像から認識している情報の例 ● 標識 ● 信号機 ● 路⾯標⽰ ● 横断歩道 ● ⾞線数 ● ⾞線幅員 など ⾞線1 18 ⾞線2 © DeNA Co., Ltd.
映像から認識している情報の例 ● 標識 ● 信号機 ● 路⾯標⽰ ● 横断歩道 ● ⾞線数 ● ⾞線幅員 など ⾞線1 19 ここを 深掘り ⾞線2 © DeNA Co., Ltd.
ドライブレコーダーの映像を⾒せます どんな標識か読めますか? 20 © DeNA Co., Ltd.
21 © DeNA Co., Ltd.
AIの認識結果で答え合わせ 22 © DeNA Co., Ltd.
23 © DeNA Co., Ltd.
AIが標識の細かい⽂字まで認識 【⾞両通⾏⽌め】 時間や曜⽇は 細かな変化も重要 【補助標識】 軽⾞両を除く / 7-8:30 / ⼟‧⽇曜‧休⽇を除く 【⼤型貨物‧⼤型乗⽤通⾏⽌め】 【補助標識】 マイクロを除く 24 © DeNA Co., Ltd.
こんな⼯夫で細かい⽂字までの認識を実現 ①データ中⼼のAI開発 ②ドメイン知識の活⽤ 25 © DeNA Co., Ltd.
アジェンダ 1. 2. 3. 4. 5. 26 次世代AIドラレコサービス『DRIVE CHART』 地図を最新に保つ課題と解決策 データ中⼼のAI開発 ドメイン知識の活⽤ まとめ © DeNA Co., Ltd.
データ中⼼のAI開発とは モデル中⼼のAI開発 (Model-centric AI) ● データを固定 ● 機械学習モデルを改善 データ中⼼のAI開発 (Data-centric AI) ● 機械学習モデルを固定 ● データを改善 旧来から体系化されてきた領域 近年体系化が⽬指されている領域 GOでは⼤量のデータが利⽤可能 データの改善を実施しやすい環境 27 © DeNA Co., Ltd.
標識認識AIの学習のためのデータ作成⼿順 アノテーション 映像を収集 1. 四⾓形で囲む 2. 内容を⼊⼒ ⾞両通⾏⽌め 『DRIVE CHART』の 指定道路‧⽇時の映像 28 補助標識 ⽇曜‧休⽇を除く 7.30-8.30 © DeNA Co., Ltd.
データを改善する上での⼀般的な観点 データの 量 データの 質 29 ● 性能限界まで量を増やせているか ● 効率的なデータ収集が⾏えているか ● 効率的なアノテーションが⾏えているか ● アノテーションの⼀貫性があるか ● 多様性を確保できているか ● 不適切なバイアスがないか © DeNA Co., Ltd.
GOではどうやって量と質を改善? ● ● ● ● ● 30 社内アノテーションチームと密な連携 必要な映像を指定して収集‧アノテーション 間違っている可能性が⾼いものはチェック 量が⾜りない場合は⼈⼯データも活⽤ ドメイン知識を活かす(次の章で紹介) © DeNA Co., Ltd.
社内アノテーションチームと密な連携 GO社内のアノテーションチームと連携し作業効率や質を向上 ● エンジニアと議論しながらアノテーションマニュアルを作成 ● ルールが曖昧な事例は随時フィードバックし改善 アノテーション ツールも内製し 使いやすく改善 DeNAのマシンラーニングをささえるアノテーションシステム | BLOG - DeNA Engineeringより 31 © DeNA Co., Ltd.
必要な映像を指定して収集‧アノテーション ドライブレコーダー映像をランダムに収集しアノテーションした場合 課題: ①珍しい標識が映っているのは稀 ②標識が映っていない時間も多い 時間をかけても珍しい標識の量は僅かしか増えない たくさんある 32 あまり⾒かけない © DeNA Co., Ltd.
①地図データを使い珍しい標識の映像を取得 本プロジェクトでは標識の内容‧座標を含む地図データを持っている +『DRIVE CHART』には指定した道路の映像を取得する機能がある 必要な標識の存在する道路付近の映像を収集する仕組みを作成 ● 多様な標識に対して種類ごとに⼗分なデータ量を確保できる ● アノテーション⼯数が予測しやすくなる 33 © DeNA Co., Ltd.
②GPS情報を使い標識付近のフレームを取得 本プロジェクトでは標識の内容‧座標を含む地図データを持っている +映像のフレーム単位でGPS情報を持っている 標識付近の映像のみをアノテーターに渡す仕組みを作成 GPS軌跡 アノテーターへ 映像 34 時刻 © DeNA Co., Ltd.
間違えやすいデータはチェック 1⽂字違いが存在するなど間違えやすい⽂字列をリスト化 ダブルチェックし質を向上 (例) ⼤型‧⼤特‧特定中型 7-20 35 ⼤型‧⼤特‧特定中貨 (マイクロを除く) © DeNA Co., Ltd.
珍しい⽂字列もチェック データセット中で珍しい⽂字列もダブルチェックし質を向上 (例) 7.30-8.30は既存データで頻出だが 7.40-8.40が初めて記録された →誤⼊⼒ではないか画像確認 36 © DeNA Co., Ltd.
⼈⼯データの活⽤ 全ての⽂字列の実画像を⼗分なデータ量集めるのは困難 しかし、地図データを元に存在し得る⽂字列が予想可能 多様性‧量の確保のために⼈⼯データも学習に利⽤ 37 © DeNA Co., Ltd.
アジェンダ 1. 2. 3. 4. 5. 38 次世代AIドラレコサービス『DRIVE CHART』 地図を最新に保つ重要性と解決策 データ中⼼のAI開発 ドメイン知識の活⽤ まとめ © DeNA Co., Ltd.
ドメイン知識の重要性 データ作成‧モデル開発にはAIの専⾨知識に加えてドメイン知識が重要 (ここでは道路や地図に関する知識) ドメイン知識がデータの品質向上や、アルゴリズム改善に活⽤できる ドメイン知識獲得のために ● 交通ルール等の資料理解 ● データを⾒る‧触る ● ⽇頃から道路を観察 39 © DeNA Co., Ltd.
警察庁が作る「交通規制基準」 ● 標識の設置⽅法などのルールが記載されている ● 読み込んだ上でアノテーションルール作成‧モデル開発に活かす ただしある地域では基準から ズレているといったことも... 実際のデータを⾒ながら活⽤ 警察庁Webサイトより https://www.npa.go.jp/bureau/traffic/seibi2/kisei/mokuteki/mokuteki.html 40 © DeNA Co., Ltd.
ドメイン知識が役⽴つ場⾯ 何て書いてありますか? 41 © DeNA Co., Ltd.
ドメイン知識を活⽤したアノテーション 道路の出⼝にある⼀⽅通⾏標識の下の⽂字→「ここまで」 ⼀時停⽌ ⼀⽅通⾏ 補助標識 ここまで 「交通規制基準」より 42 © DeNA Co., Ltd.
ドメイン知識を活⽤したアノテーション 住宅街で通⾏⽌め標識の下にある頻出の⻑めの⽂字列 →「居住者⽤⾞両を除く」 ⾃動⾞‧⼆輪 通⾏⽌め 補助標識 居住者⽤⾞両 を除く ⾃動⾞‧⼆輪 通⾏⽌め 左の解像度⾼めの画像を⾒た 後だと読めてくる...? 補助標識 居住者⽤⾞両 を除く 標識を⼤量に⾒てきた社内アノテーターだからこそ可能 43 © DeNA Co., Ltd.
ドメイン知識によりデータの量‧質を確保 粗い画像でも正しくアノテーションし質が⾼いデータを⼤量に⽤意 (例) ⼆輪‧軽⾞両 ⾃転⾞を除く を除く 15-19 7-9 15-19 マイクロを ⼟‧⽇曜‧ 除く 休⽇を除く 7.00-8.30 44 © DeNA Co., Ltd.
開発の中でも「交通規制基準」を参照 補助標識の設置⽅法が記載されている ルールを元に補助標識がどの標識に紐づくかの判定処理を開発 何となくではなく、 根拠からしっかりと理解 「交通規制基準」より 45 © DeNA Co., Ltd.
アジェンダ 1. 2. 3. 4. 5. 46 次世代AIドラレコサービス『DRIVE CHART』 地図を最新に保つ課題と解決策 データ中⼼のAI開発 ドメイン知識の活⽤ まとめ © DeNA Co., Ltd.
まとめ ● ● ● ● ● 47 GOはAIドラレコサービスを開発‧提供し⽇本中の映像を活⽤可能 地図は交通規制の変化に合わせた更新が必要 ドライブレコーダー映像をAIで解析し地図との差を発⾒ ⼤量のデータを活かしたデータ中⼼のAI開発 ドメイン知識の活⽤ © DeNA Co., Ltd.