実績紹介へ戻る
Agent · Real-time Video Intelligence

リアルタイム視覚オペレーション Agent

倉庫、工場、店舗のライブ映像を継続的に理解し、人、設備、貨物の変化を検索・実行可能な運用イベントへ変換します。

Vision LLMObject TrackingVideo RAGBLE / IoTMCP Tools
インタラクティブデモを試す
Solution Case
リアルタイム視覚オペレーション Agent
ソリューション概要

受動的な監視から能動的なオペレーション知能へ

ライブ映像と録画映像を取り込み、エッジ側で物体検出、フレーム間追跡、プライバシー処理を行った後、視覚言語モデルで作業員、フォークリフト、パレット、作業区域の時空間関係を理解します。映像イベントをBLE、RFID、IoTセンサー、受注、倉庫データと関連付け、Agentが自然言語で重要場面を検索し、イベント時系列を生成し、アラートを検証します。さらにMCPツールで作業依頼、担当者通知、確認フローを実行し、高リスクイベントには時刻、軌跡、業務証跡を残して権限者の承認へ接続します。

常時モニター監視を減らし、異常発見、証跡検索、対応連携を一つのワークフローに統合しながら、リアルタイム性、追跡性、人による統制を維持します。

VLM + Trackingリアルタイム場面理解
Video RAG自然言語イベント検索
MCP Actions通知・作業依頼の実行
実装フロー

映像認識からオペレーション実行までの閉ループ

01

リアルタイム認識

カメラと録画映像を取り込み、エッジ側で復号、匿名化、物体検出、継続追跡を行います。

02

場面理解

VLMで物体、行動、区域、時間関係を認識し、検索可能な意味イベントへ変換します。

03

複数データ連携

BLE、RFID、IoT、受注、倉庫データを融合して映像イベントを検証し、誤検知を抑えます。

04

Agentによる対応

要約と証跡を生成し、MCPで作業依頼と通知を実行し、高リスク操作は承認を求めます。

Production Architecture

常時稼働の軽量認識とオンデマンドのマルチモーダル推論

ハードウェア復号、小型検出モデル、物体追跡を常時稼働させ、ルールと業務データで選別された異常映像だけを VLM に渡すことで、GPU コスト、応答遅延、誤検知をアーキテクチャで制御します。

Edge Ingest

カメラ映像

既存の RTSP / ONVIF カメラを活用し、エッジノードでライブ映像を取り込み、権限ポリシーに従って録画とイベント映像を保持します。

Decode & Sample

ハードウェア復号とフレーム抽出

NVDEC などで複数映像を一括処理し、物体速度やリスクに応じて抽出頻度を変え、全フレームをモデルへ渡す処理を避けます。

Always-on CV

小型検出モデル + Tracking

軽量モデルで人、フォークリフト、パレット、車両を継続検出し、Tracker が ID、軌跡、速度、滞在時間をフレーム間で維持します。

Event Gate

ルールと業務データによるフィルタリング

区域侵入、滞在、混雑ルールを BLE、RFID、WMS、受注、シフト情報と関連付け、詳細確認が必要な候補イベントだけを残します。

異常映像のみ高コスト推論へ送信
On-demand VLM

VLM による検証と場面説明

イベント前後のキーフレームや短い映像だけを解析し、時空間関係と異常理由を判断して、時刻と証跡付きの意味イベントを生成します。

Agent Action

Agent による作業依頼・通知・報告

証跡を検索し、MCP から WMS、チケット、通知システムを実行します。高リスク操作には人の承認と完全な監査記録を残します。

インタラクティブ体験

リアルタイム視覚オペレーション指令センター

パレット誤配置、立入禁止区域への侵入、搬入口混雑を切り替え、追跡、VLM理解、イベント検索、MCP実行を確認できます。

LiveOps Visionリアルタイム運用指令センター
システム正常12 / 12 台のカメラ
CAM 12 · 通路7ライブ
10:24:18
FORKLIFT 02 · 98%
WORKER 03 · 96%
WORKER 07 · 94%
PALLET P-2048
DOCK 04
プライバシー保護合成映像実在顧客の監視映像ではありません
パレット P-2048 の誤配置を検出10:24:21
4 件の対象38 msRTSP · 30 FPS
00:00
00:12
リアルタイム視覚オペレーション Agent | Wenku Tech