マルチスペクトルイメージセンサー

モノクロカメラやカラーカメラと比べて、マルチスペクトルカメラの歴史は浅く、カメラの開発や導入に必要な環境が十分整備されていません。そのため、IMX454は開発や導入に必要とされる機能をあらかじめ用意し、それらを含むソフトウェアを提供しています。

・マルチスペクトル向けに最適化したカメラ標準機能

モノクロやカラーのイメージセンサーにおいて一般的にサポートされている欠陥補正機能やノイズ低減機能、AE（自動露光制御）機能といったカメラに不可欠な標準的な機能をマルチスペクトルイメージセンサー向けに最適化しました。これらの機能を活用し、効率的にマルチスペクトルカメラを開発することができます。

・セマンティックセグメンテーション機能

セマンティックセグメンテーションとは、画像データ内のすべての画素にラベルをつけ、より詳細な領域分割を行う機械学習を用いた画像認識方法です。画素ごとに波長情報を活用したセグメンテーションを行うことで、被写体の形状に依存せず、目視では同じような色であっても高速かつ安定して素材を識別することができ、素材ごとに色分けしたり、素材ごとの面積や体積を推定することが可能です。

・カラー画像生成機能

マルチスペクトル画像をもとにした識別結果をカラー画像に合成したり、カラー画像向けの既存のソフトウェアと組み合わせるためにカラー画像が必要となるケースがあります。そのため、波長の異なる複数の画像データをもとに視覚的にわかりやすいカラー画像を生成する機能を用意しました。この機能を活用することで、別途カメラを設けることなく、自然な色味の画像を取得することができます。