NTTコミュニケーションズ株式会社（本社：東京都千代田区、代表取締役社長：庄司 哲也、以下NTT Com）と日本カーソリューションズ株式会社（本社：東京都千代田区、代表取締役社長：野上 誠、以下 NCS）は、ドライブレコーダーの映像、センサーデータ（速度、加速度）に音声データを加え、NTT Comが開発したAI（マルチモーダル深層学習^※1）が解析することで、交通事故における自動検知の精度向上に成功しました。

今後両社は、ドライブレコーダーから交通事故やそれにつながる危険運転を自動検知し、運転手の意識向上や事故軽減への対策など安全運転の実現に向けた取り組みを行っていきます。

なお、本AIはNTTグループのAI関連技術「corevo®(コレボ)」^※2を活用しています。

1. 背景

NCSは、カーリースを契約している企業のお客さまに、安全運転促進のための自動車IoTツールとして「NCSドライブドクター®」 ^※3を提供しています。このサービスのオプションである「NCS交通安全プログラム」の映像解析サービスでは、専任スタッフがドライブレコーダーに記録された映像ビッグデータの中からさまざまな危険運転シーンを抽出し分類を行っていますが、この業務には多くの時間を要するという課題があり、より手早く正確に行うことが求められていました。

NTT Com は、2016年より車両向けマルチモーダル深層学習の開発に取り組み、ドライブレコーダーデータの解析による危険運転(以下 ヒヤリハット)の検知に成功しました。従来は映像やセンサーデータのみを解析対象にしていましたが、今回、新たに交通事故発生時の接触音や人の声などの音声データを加えた車両向けマルチモーダル深層学習を開発し、これまで検知が困難であった交通事故についてもAIで自動検知することを実現するために、両社でこれらのデータ解析に関する実験(以下 本実験)を開始しました。

2. 本実験の概要

本実験では、車両や歩行者などと接触しそうになるシーンをヒヤリハット、接触したシーンを交通事故とする設定にもとづき、NCSがお客さまに提供しているドライブレコーダーデータから、音声や映像、センサーデータである「時系列マルチモーダルデータ」を約850件^※4抽出しました。そして、その7割(約600件)をAIに学習させた後、残り3割(約250件)のデータをAIに判定させて解析を実施しました。

ドライブレコーダーは、車両の前方映像を記録するため、特に後方や横方向の状況において、ヒヤリハットか交通事故かを判別するのは困難でした。今回新たに交通事故発生時の音声データを追加したことで、映像には映らない場所の状況についても、接触音などを含めて解析することが可能となり、その結果車両の全方位においてAIでの自動検知精度が大幅に向上しました。

音声、映像、センサーデータを対象にした解析では、映像、センサーデータのみを対象にした解析と比べて、交通事故と判定した精度が約1.75倍の89%(正解率^※5)に、通常運転、ヒヤリハット、交通事故の全体においても、約1.2倍の85%と高精度を記録^※6しました。

＜本実験の流れ＞

＜本実験の判定イメージ＞　

3. 今後の展開

今後も両社はAIを活用し、さまざまな危険運転、交通事故の検知・解析の精度をあげ、実用化していくことで、安全運転を推進していきます。

NTT Comは、本実験で確立した本事象を検知するアルゴリズムを、車両向けAI/IoTソリューションとして、お客さまへ提供していきます。

NCSは、すでにコンサルティング業務のためのヒヤリハット検知に、これまで開発したAIを実利用しています。本実験の成果により新たに事故映像の分類やヒヤリハット検知の精度向上が見込めることから、今後「NCS交通安全プログラム」をご利用のお客さまにAIによる解析データを提供することで、コンサルティングサービスのレベル向上を目指していきます。

4.出展情報

2018年10月4日、5日に開催する「NTT Communications Forum 2018」にて、本実験内容を出展します。AIがドライブレコーダーの音声、映像、センサーデータを解析する様子を映像でご紹介します。ぜひご覧ください。

会期：2018年10月4日(木)　9:30〜18:00(9:00受付開始)

2018年10月5日(金)　9:30〜18:00(9:00受付開始)

(3日(水)　17:00よりメディアプレビューを行います)

会場：ザ・プリンス パークタワー東京

URL：https://www.ntt.com/business/go-event.html

関連リンク

• AIを活用し、運転の安全性を自動検知することに成功