ルネサスエレクトロニクスは、次世代先進運転支援システムアプリケーションで使用されるスマートカメラとADASレベル2以上のカメラ向けの深層学習ベースの物体認識ソリューションの共同開発を発表しました。この新しいスマートカメラソリューションは、高精度で低消費電力のオブジェクト認識にディープラーニングを採用しています。また、ADASの広範な適応を加速します。
ルネサスとStradVisionのコラボレーションにより、この新しいテクノロジーは、歩行者や自転車などの脆弱な道路利用者（VRU）や、その他の車両や車線のマーキングを認識できるようになりました。StradVisionはルネサスRカー車載システムオンチップ（SoC）製品のためのそれらのソフトウェアに最適化している R-車V3H及びRカーV3M量産車としての実績を有しています。これらのR-Carデバイスには、CNN-IP（畳み込みニューラルネットワーク知的財産）と呼ばれる深層学習処理専用のエンジンが搭載されており、StradVisionのSVNet自動車用深層学習ネットワークを高速で実行できます。
主な機能
1）このソリューションは、大量生産の早期評価をサポートします
StradVisionのSVNet深層学習ソフトウェアは、暗い場所で正確に認識し、オブジェクトが他のオブジェクトによって部分的に隠されている場合のオクルージョンに対処できるため、ADASシステムの大量生産向けの強力なAI認識ソリューションです。R-Car V3Hの基本ソフトウェアは、毎秒25フレームの速度で画像を処理することにより、車両、人、車線を同時に認識できるため、迅速な評価とPOC開発が可能です。これらの基本機能の助けを借りて、開発者は、認識ターゲットとして標識、マーキング、およびその他のオブジェクトを追加してソフトウェアをカスタマイズできます。
2）R-CarV3HおよびR-CarV3M SoCは、コストを削減しながらスマートカメラシステムの信頼性を向上させます
ルネサスR-CarV3HおよびR-CarV3Mは、IMP-X5画像認識エンジンを搭載しています。ディープラーニングベースの複雑なオブジェクト認識と高度に検証可能な画像認識処理を人為的なルールと組み合わせることで、設計者は堅牢なシステムを構築できます。オンチップの画像信号プロセッサ（ISP）は、画像のレンダリングと認識処理のためにセンサー信号を変換できます。そのため、ISPを内蔵せずに安価なカメラを使用してシステムを構成することが可能です。これにより、安価なカメラを使用してシステムを構成できるようになり、全体的な部品表（BOM）コストが削減されました。
StradVisionのソフトウェアと開発サポートを含む、新しい共同ディープラーニングソリューションは、2020年初頭までに開発者が利用できるようになります。