すべての新機能が一目瞭然

IDS NXT 製品リリースのハイライト

IDS NXT malibu - オンカメラ AI + 圧縮 + ストリーミング

カラー背景のIDS NXTカメラ

新製品:完璧な画質の 4K ストリーミングをカメラから直接提供

IDS は onsemi AR0521 センサー搭載の IDS NXT malibu シリーズを発売し、製品範囲を拡張しました。Sony Starvis 2 センサー IMX678 で 4K でのストリーミングも可能になりました。細部に至るまで画質が改善され、用途範囲が拡張され、特に低照度用途に対応できるようになりました。

消費者向けテクノロジーに産業向け知識が組み合わされました。まだあります。

インテリジェントな産業用カメラの新しいクラスが、IDS と Ambarella のコラボレーションから誕生しました。IDS NXT malibu は完璧な画質、オンカメラ AI、ビデオ圧縮、ストリーミングを組み合わせています。このすべてがカメラから直接実行され、出力されます。

IDS は、以前はアクションカメラとして知られていたこの特殊なチップを産業向けに提供する初のメーカーです。明るさ、ノイズ、色補正など、便利なオート機能が搭載された統合 ISP により、で最適な画質が得られます。印象的な画像とビデオ、その他の可能性にご期待ください。IDS NXT malibu に関する新しいソフトウェアのハイライトの詳細については、リリース 4.1 のタブを参照してください。

AIとRTSPストリーミングアイコンを搭載したIDS NXT malibuカメラ - 状況を分析・可視化

「エッジ上」の AI と ISP:

カメラは「エッジデバイス」として動作し、圧縮ビデオストリーム (H264)、高速 (> 25 fps) でフルセンサー解像度を実現し、RTSP プロトコル経由でエンドデバイスに出力します。

さらに、カメラのライブ画像を MJPEG ストリームの可視化により、任意の Web ブラウザーで直接表示できます。AI オーバーレイを使用せず、HTTP を経由するので、追加のソフトウェアは不要です。

IDS NXT malibu では、リアルタイムで画像を分析し、結果を直接統合できるカメラを開発しました。例えば、これは AI オーバーレイ付きのライブ画像が必要な用途に最適な選択肢です」と、IDS のプロダクトイノベーションマネージャー Kai Hartmann は言います。

インテリジェントな産業用カメラが導くアプリケーションの可能性: IDS NXT システムの可能性を見つける

IDS NXT 4.1:IDS NXT malibu 向けの包括的サポート

RTSP を介したストリーミングの代替手段の MJPEG

新しい MJPEG ストリームは、フル HD の両方の malibu モデル (センサー: onsemi AR0521 および Sony IMX678) 向けの使いやすい視覚化オプションとなります。ストリームは HTTP を使用し、プラグインを追加せずに、任意のブラウザーでライブで表示できます。AI オーバーレイもライブ画像で視覚化するには、RTSP 経由のストリーミングを選択してください。これはセンサー解像度全体を活用し、IMX678 にとって30 fps で 4K をストリーミングすることになります。

ユーザーがトレーニングした CNN で、物体を分類、検出、異常を特定

IDS NXT 4.1 ソフトウェアリリースと組み合わせることで、ニューラルネットワークを IDS lighthouse AI Vision Studio で IDS NXT malibu カメラファミリーの Ambarella SoC 向けにトレーニングできるようになりました。また、ユーザーの仕様に従って、カメラプラットフォーム向けに分類、物体認識、異常検出のビジョンアプリを作成して実行することもできるようになりました。

IDS NXT 3.2 - 新しいプロジェクトビューでユーザーガイダンスを最適化

無料アップデートにより、IDS lighthouse の新しいプロジェクトガイダンス、再設計されたメニュー、ブロックベースエディターの結果への容易なアクセスが提供され、操作性が改善されました。

すべてのフェーズをアイコンで表示するワークフロー・ビュー

プロジェクトビュー

新しいユーザーインターフェースでは、関連するニューラルネットワーク、画像データセット、ビジョンアプリを 1 つのプロジェクトで管理できます。ワークフロービューにより、アプリケーション開発のすべてのフェーズをユーザーは順次確認できます。

状態依存のアイコンとヒントで、すべてのプロセスタイプの透過性が向上しています。ユーザーの操作がまだ必要な場合や、すでに正常に設定されているコンポーネントを、常に即座に把握できます。

IDS lighthouse は、ユーザー固有の AI ベースアプリケーションを作成するためのサポートがさらに改善されています。

リリースノートは、IDS lighthouse から直接確認できます。

IDS NXT 3.1 - ブロックベースエディターによる OCR および物体検出

アップデートにより、OCR やトレーニング済み CNN なしの物体検出など、ルールベースの画像処理が追加され、システム機能が拡張されました。さらに、ワークフローが向上し、OPC UA による統合が容易になりました。

テキスト認識

アップデートにより、画像処理機能 OCR (「光学的文字認識」を略したもの) が、ブロックベースエディターで利用できるようになりました。この新機能では、ドイツ語と英語で書かれたラベルや名刺などの文書上の文字、行全体を画像から探し出し、認識することができます。その後、特定の値またはプロパティを取得できます。

AI なしで物体を検出

AI 機能「物体検出」は IDS NXT で以前から提供されていました。では、ニューラルネットワークをあらかじめトレーニングしなくても物体を検出する必要がある場合は、どうでしょうか。この機能がブロックベースエディターで可能になりました。物体は輝度の値によって特定されます。その後、フィルタリングや仕分けができます。

アテンションマップによる視覚化の改善

AI Vision Studio IDS lighthouse のアテンションマップに基づいて、各テストデータセットに視覚化を作成できるようになりました。ユーザー自身の画像で推論をチェックして、AI の判定を視覚的に再構成し、トレーニングしたニューラルネットワークの品質を評価できます。

OPC-UA へのアクセスをシンプル化

標準化されたマシンビジョン向けコンパニオン仕様の他に、IDS NXT に OPC-UA 経由でアクセスするための、弊社独自の理解しやすい情報モデルも提供しています。これを IDS NXT 3.1 で拡張し、OPC-UA を介してファクトリーオートメーションなどのアプリケーションの統合をさらに容易にしています。

IDS NXT 3.0 - 異常に対する新たな AI 手法

ソフトウェアリリース IDS NXT 3.0 により、オールインワンAIシステムのアプリケーションの可能性を広げ、ディープラーニングの手法を追加するとともに、ニューラルネットワークのトレーニングにおけるトレーサビリティをより確実なものとしています。

異常検知

物体検出と分類に加えて、IDS NXT カメラを異常検出に使用できるようになりました。わずかな量のトレーニングデータで、既知と未知の偏差を確実に判定します。これにより、学習データの作成とアノテーションに要する時間と労力を削減することができます。

コードリーダー

ブロックベースエディターの新しいコードリーダー機能により、IDS NXTカメラでさまざまな種類のコードと必要なパラメータをすばやく簡単に特定、識別、読み取りができるようになります。

トレーニングプロセスの透明性

IDS lighthouse でのトレーニングおよびテストプロセス中に、どの画像領域が分析結果に影響を与えるかがアテンションマップで示されます。これによって、AI をカメラで動作させる前の早期段階でトレーニングエラーやバイアスを検出し、排除できます。開発プロセスでのレビューおよびメンテナンスのループが削減され、迅速にコミッショニングを始動できます。

IDS NXT 2.6 - App your camera!

本ソフトウェアリリースは、アプリ作成の簡略化を重視しています。開発プロジェクトの開始は、プロジェクトの実現にあたって最も大きな難題となりがちです。IDS lighthouse の新しい「ユースケースアシスタント」により、ユーザーはわずか数ステップのガイダンスを受けながらビジョンアプリ全体を構成して、IDS NXT カメラ上で直接実行できます。これもまた新機能であるブロックベースエディターで、ユーザーはプログラミング知識がなくても、独自に物体認識や分類など、AI 画像処理機能のプログラムシーケンスを開発できます。

ユースケースアシスタント

ユースケースアシスタントで、プロジェクトに適したユースケースを選択します。インタビュー形式のように、質問とヒントにより、ビジョンアプリプロジェクトの作成プロセスがウィザードでガイドされ、プログラムコードが作成されます。プロセスの中で、アシスタントは既存のトレーニングプロジェクトとビジョンアプリプロジェクトをリンクするか、必要に応じて新しいトレーニングプロジェクトとデータセットを IDS lighthouse に作成します。

ブロックベースエディター

モジュール形式のブロックとわかりやすいユーザーインターフェースで、特定のプログラミング言語の構文を知らなくても、AI ベースの画像処理 (物体検出や分類など) を使用して、独自のプロジェクトを個々のビジョンアプリとして実現できます。この場合、ビジョンアプリプロジェクトをユーザー自身で作成し、ループや条件文などのプロセスを含む、コードエディターの定義済みブロックを使用して独自のビジョンアプリをグラフィカルに構築します。

混同行列

IDS NXT lighthouse の [トレーニング] タブの [トレーニングセッション] 領域で、バージョン 2.6 でトレーニングした分類ネットワークの混同行列を表示できます。混同行列は分類ネットワークのパフォーマンス評価に適しており、テストまたは検証データが割り当てられたラベルに対してどのように分類されるかを示します。

IDS NXT cockpit でのマルチカメラサポート

複数のカメラについて、カメラのステータス、画像、結果を 1 つの画面で確認し、アプリケーションについて最新の状態を維持できるようになりました。さらに、ログインなどの設定情報を保存してすぐにアクセスできます。

IDS NXT 2.0 - ファクトリーオートメーション向けの AI

今回のアップデートでは、IDS NXTのAI機能を物体認識で拡張し、OPC UAインターフェースを導入、そして新しい開発環境により、カスタム画像処理タスクをビジョンアプリとしてプログラムし、カメラで実行できるようになります。

プロフェッショナルのための新しい開発環境

開発者やAIの専門家は、「IDS NXT Vision App Creator」を使用して、システムをさらに深く理解し、個々のビジョンアプリを作成することで、IDS NXTカメラを独自のニーズに合わせてより良く適応させることができます。また、分類または物体認識を、測定タスクなどの従来の画像処理と組み合わせて、1 台のデバイスに実装することもできます。

OPC UA を介したオートメーション

IDS NXT rio および rome カメラでマシンおよびコントローラーと同じ言語で通信して、タスクや結果を直接交換できるようになりました。OPC UA を使用することで、追加のハードウェアやプログラミングを行うことなく、インテリジェントなカメラをファクトリーオートメーションに統合できます。さらに、標準化された通信により、新しいデバイスの「プラグアンドプロデュース」の基盤が整います。これにより、マシンビジョンシステムのコミッショニング始動までの時間を最短にできます。