這是一款基于研華高性能邊緣計算平臺MIC-733，深度集成創(chuàng )新奇智視覺(jué)小模型與多模態(tài)大模型的邊緣智能終端，通過(guò)創(chuàng )新的“視覺(jué)識別 + 深度語(yǔ)義理解”融合分析路徑，具備強大的本地視頻智能分析及大模型深度研判能力。
該一體機廣泛適用于EHS（環(huán)境、健康與安全）管理、智慧廠(chǎng)務(wù)、園區安防等多元場(chǎng)景，支持靈活部署、遠程運維與多種協(xié)議接入。我們致力于為客戶(hù)構建一套智能化、閉環(huán)式管理且可持續演進(jìn)的AI視頻分析與風(fēng)險主動(dòng)防控體系。
這是整個(gè)系統的“大腦”，即 “多模態(tài)大模型AI一體機”。該一體機內部署了基于創(chuàng )新奇智研發(fā)的AInnoGC工業(yè)大模型的“MatrixVision邊緣運行套件”，其核心處理流程如下：
a. 初步分析與識別 (視覺(jué)小模型)：實(shí)時(shí)視頻流首先送入高效的視覺(jué)小模型進(jìn)行處理。針對特定目標和事件進(jìn)行快速的初步檢測和結構化信息提取。
b. 二次研判與誤報過(guò)濾 (多模態(tài)大模型)：視覺(jué)小模型輸出的初步識別結果，將無(wú)縫提交給一體機內集成部署的多模態(tài)大模型進(jìn)行二次深度研判。核心目的是有效過(guò)濾小模型可能產(chǎn)生的誤報，顯著(zhù)提升整體預警的準確性和可靠性。
感知采集層 (Perception & Acquisition Layer)
部署于監測現場(chǎng)前端的多個(gè)高清網(wǎng)絡(luò )攝像機或RTSP視頻源作為原始視頻數據的來(lái)源，實(shí)時(shí)捕捉監控區域的動(dòng)態(tài)影像。
網(wǎng)絡(luò )傳輸層 (Network Transmission Layer) 前端攝像機通過(guò)有線(xiàn)或無(wú)線(xiàn)方式接入本地局域網(wǎng)絡(luò )，視頻流通過(guò)網(wǎng)絡(luò )交換機進(jìn)行匯聚和傳輸，穩定地將數據導向邊緣處理核心。 數據與管理平臺層 (Data & Management Platform Layer) 經(jīng)過(guò)邊緣一體機分析處理后的結構化數據、報警信息、事件記錄以及系統運行狀態(tài)等，可以實(shí)現本地存儲與展示、上傳至中心管理平臺/云平臺（如圖中邊緣設備指向上方兩個(gè)不同的Web管理界面所示）、 閉環(huán)學(xué)習與模型進(jìn)化 (基于過(guò)濾結果訓練小模型)。 智能應用與聯(lián)動(dòng)輸出 (Intelligent Application & Linkage Output) 最終，經(jīng)過(guò)精準分析并確認的預警信息，可用于觸發(fā)實(shí)時(shí)的告警通知（如聲光報警、App推送、短信等），或與安防系統、生產(chǎn)管理系統（MES）、應急指揮系統等其他業(yè)務(wù)系統進(jìn)行聯(lián)動(dòng)，實(shí)現快速響應、智能決策和閉環(huán)管理。
多模態(tài)大模型AI一體機不僅創(chuàng )新性地集成了多模態(tài)大模型進(jìn)行二次智能研判，以精準過(guò)濾前端小模型可能產(chǎn)生的誤報；更具革命性的是，我們構建了一套基于大模型驗證結果的小模型持續優(yōu)化機制。
多模態(tài)大模型在完成二次檢驗后，其高置信度的判斷結果（無(wú)論是對真實(shí)警報的確認，還是對誤報的有效排除與修正）都將轉化為寶貴的、高質(zhì)量的已標記訓練數據。這些經(jīng)過(guò)“智能審查員”嚴格把關(guān)的數據，會(huì )被系統性地、自動(dòng)或半自動(dòng)地導入創(chuàng )新奇智AML-Vision自動(dòng)化訓練平臺，用于反哺并迭代訓練我們部署在邊緣端的小型視覺(jué)模型。
方案特性 ?算力強大，數據處理、AI分析邊緣一體 ?大小模型協(xié)同，雙重校驗更精準 ?誤報智能過(guò)濾，告警真實(shí)可靠 ?閉環(huán)反饋學(xué)習，模型持續進(jìn)化 ?本地實(shí)時(shí)分析，賦能快速決策 ?靈活按需部署，加速應用落地