自動運転への取り組みを核に画像認識技術のさらなる向上を目指す
当社は、画像認識用プロセッサ「 Visconti 」を活用した画像認識システムの多様なソリューションを提供しています。中でも、IoT 社会で実用化が待たれる自動運転技術に力を注いでおり、引き続き技術の向上を図りながら、他の領域でも当社の知見やノウハウを活かした商品化や機能強化に取り組んでいきます。

さらなる進化が求められる自動運転技術

上の車両を認識する交通流分析などの実績があります。このほ

当社は、組込み機器向けに画像認識、画像処理に関する製品ム、指定された棚にある商品を画像認識によって取得するピッキやソリューションを提供しています。その中心となるのが、東芝

ングロボットといったお客様の倉庫の自動化にも取り組み、商品デバイス＆ストレージ社製の画像認識プロセッサ「 Visconti」化されたものもあります。

か、物流の分野においては、積まれたダンボール箱から画像認識により１つずつダンボール箱を取得するデパレタイザーのシステを活用した技術で、評価ボードやソフトウェア開発環境、画像認識ミドルウェアの提供からアプリケーション開発サービスまでを行っています。

物体認識や移動体検知技術を商品へとりわけ、注力しているのが、ADAS ( 先進運転支援システム)

Viscontiをベースにした画像認識への取り組みで得た知見、です。1つの小さなチップで複数台のカメラ入力画像をリアルタ技術やノウハウをベースに商品の開発も進めてきました。その中イムに処理できるViscontiの性能的特長を活かし、歩行者検知核となる技術として物体認識を据え、その機能を強化・サポートによる事故回避、車両検知による衝突回避、交通標識認識によるするために移動体検知を加えました。また、距離計測に対する速度超過警報、車線境界線認識による車線逸脱警報、対向車のお客様のニーズもあったため、この3つの技術を組み合わせる形

ライト検知によるハイビーム制御、後方死角警戒による衝突回避で研究開発を進め、ソフトウェア商品として「 CVNucleusシリーなどの実現に取り組んでいます。

ズ 」を、ハードウェア商品として「 CVNucleus VisCAM」を、自動運転技術を実現するためには、さまざまな機器と繋がり、多くのデータを共有する必要があります。多くのデータをサーバ側で処理した場合、通信データは膨大となり、リアルタイムで処理を行うことは困難です。そのため、エッジ側で処理を行うこ

画像認識ミドルウェア「CVNucleus シリーズ」
物体認識

移動体検知

ステレオ距離計測

人や車、バイクなど
辞書登録された物体を検出

移動物を検出し速度や方向を算出

ステレオカメラによる距離計測とが 求められます。Viscontiは、MPE(Media ProcessingEngine)を複数搭載し、複数のアプリケーションを同時に実行することが可能です。また、低消費電力で動作する専用の画像処
理アクセラレータを搭載しており、エッジで処理を行うための最適な画像認識プロセッサです。
このほかのViscontiを活用した取り組みとしては、MFP(デジタル複合機)で、近づいてくる人のつま先の向きを検出して利用システム図
お客様対応部分者を識別する技術や、顔の部位を検出し顔の特徴量を抽出して顔を認識する技術などがあります。
当社では、こうしたVisconti活用の経験をベースに、他社製の画像認識 LSIでも車線境界線検知や歩行者検知、車両検知などに対応しています。また、ビルの屋上にあるカメラにより道路当社製品

アプリケーション
前方監視

周辺監視

後方監視

移動体検知

ステレオ距離計測CVNucleus
物体認識

ソフトウェア開発キット

Visconti2 SDK

ハードウェアVisconti2

別途購入が必要

図-1 CVNucleus シリーズの概要

HC自律型インフラレス監視システム
注1

特徴

注2

●カメラ自体で特定エリアの画像 ( 人 ) を認識し異常の時のみ無線で通知⇒常時監視が不要！

●バッテリー駆動が可能なため電気工事が不要⇒どこでも設置可能／撤去が容易！

図-3 CoHOG（ Visconti2 ）とEnhanced CoHOG（ Visconti4 ）の構成

⇒どこでも設置可能／撤去が容易！

Visconti2の昼間歩行者認識と同等レベルに向上させたこと●無線通信のため通信工事が不要が最大の特長となっています。対象領域中の輝度勾配強度の「CVNucleus VisCAM」利用シーン
資材置場

分布に従い適応的に投票操作のしきい値を決めるCoHOG 特

イベント会場徴 量 で あ るAT- CoHOG(Adaptive Threshold CoHOG)
ネットワーク工事が不要の無線ネットワーク
監視カメラ本体で人物を認識

神社仏閣

電気工事が不要のバッテリー駆動や、モノクロ処理ではなくカラー情報をそのまま使って判断するHCF(Heterogeneous Color Feature)を新たに搭載し、夜介護現場

間シーンや背景と対象物の輝度差が少ないシーンでの歩行者識特定のエリアのみの監視が可能

1

形状認識と検知2

異常の時だけお使いの端末へ通知

3

警戒エリアの設定

別性能の大幅な向上を実現しています(図 -3 )。
また、新機能 SfM（ Structure from Motion ）アクセラレー発報（静止画映像の送信）タを搭載、落下物・落石・土砂崩れなどの予期しない不特定障害物検知を可能にしています。このほか、カメラモジュールの小型３秒経過化などさまざまな進化を遂げています。
Visconti4 の適用により、当社の「 CVNucleus VisCAM」

図-2 CVNucleus VisCAMの概要を使った物体認識も、移動体検知や顔認識などの技術と組み合それぞれ販売しています。

わせて同時並行処理が実現でき、画像認識精度が向上します。

「 CVNucleusシリーズ 」は、Visconti2に最適化した画像認

例えば、店舗やイベント会場などで、男女や年齢層別の巡回経路識ミドルウェアで、物体認識 (カメラから取得した画像から任意のや任意の地点での滞留状況などを商品マーケティングや消費者物体を認識)、移動体検知 (カメラから取得した連続画像により移の購買行動の情報として活用できるようになります。Visconti

動体の位置と移動方向を検知)、距離計測 (ステレオカメラからの進化に伴い、当社が提供する商品の機能拡充・強化を進めて、取得した2枚の画像で指定領域までの距離を計測)の機能を搭載

お客様のニーズにより適したソリューションやサービスでお客様したものです(図 -1)。本商品は、お客様からも高い評価を得ておのビジネスをサポートしていきたいと考えています。

り、これを搭載した製品の開発などに採用いただいています。

さ ら に、2019 年 秋 か ら サ ン プ ル 出 荷 さ れ る 予 定 の一方、「 CVNucleus VisCAM」は、カメラ本体に画像認識機「 Visconti5」では、ディープラーニングを用いた結果を活用す能を搭載した監視システムで、立ち入り禁止エリアへの人物の立ちることで、多様な交通標識、道路状況の把握を高精度に実行で入りの監視などを実現します(図 -2 )。無線通信やバッテリー駆動きるようになります。自動運転に向けては、これまでできていにより、ネットワークや電源の設備がない場所への設置が可能で、なかった自車位置の正確な把握、リアルタイムでの道路情報、他用途に応じたカスタマイズやハードウェアとソフトウェアの個別提車と自車との位置による走行経路の自動修正などを組み合わせ供にも対応しています。資材置場での監視や介護現場での見守りながら、IoTインフラの進展と一体化して進んでいくものと考えなど、IoT 社会でのさらなる飛躍を期待しているところです。ています。当社では自動運転の早期確立に向けた取り組みをさらに強化し、技術の精度を上げていくとともに、今後、この技術

Viscontiの性能向上でIoT分野での一層の活用を
Visconti2を 活 用した 技 術 開 発 や商 品 化を 進 めてきた 当社ですが、2018 年からは 後 継 製 品となる「 Visconti4」の 量産 が 開 始されました。Visconti4で は、夜 間 歩 行 者 認 識 をH

Cに磨きをかけ、当社のAIやディープラーニングなどとの融合により、他の領域においても、より高いレベルでお客様のニーズを満たせるよう取り組んでいきます。
(エンベデッドシステム事業部高野 吉輝)

注１ ）IHOG（ HOG feature with Intensity ）：強度付き輝度勾配方向ヒストグラム
注２ ）CoHOG（ Co-occurrence Histograms of Oriented Gradients ）：輝度勾配方向共起ヒストグラム