在剛剛結(jié)束的第22屆工博會上，仙工智能（SEER）攜 全感知物流系統(tǒng)解決方案，以“讓智造更簡單”為主題華麗亮相，重磅新品發(fā)布接連不斷，燃爆全場。

而今天要和各位介紹的就是仙工智能（SEER）全感知物流系統(tǒng)解決方案中的重量級產(chǎn)品，也是在工博會現(xiàn)場引得專業(yè)觀眾和媒體朋友們特別關(guān)注的新品之—，全感知 AI 物流系統(tǒng) RoboView。

RoboView 到底是一個怎么樣的 AI 智能系統(tǒng)？

它解決了工廠智慧物流的哪些課題？

能給智慧物流帶來哪些價值？

具體又有哪些實際應(yīng)用場景？

......

關(guān)于以上這些備受關(guān)注的問題，我們今天就請來了這款產(chǎn)品 研發(fā)者 Dr.X為大家細(xì)細(xì)解讀。

課題  

隨著智能制造的不斷升級和落地，工廠內(nèi)的智能搬運和智慧物流也越來越被關(guān)注，用自動叉車和 AMR 來解決搬運問題也逐步成為趨勢，機器人在和操作人員協(xié)同工作的環(huán)境下如何防范各種風(fēng)險成為勢必要解決的課題。

在一些密集倉儲的區(qū)域，即使在自動叉車上安裝再多的傳感器也無法避免一些危險情形，比如下圖的情形：

在人員和自動叉車，AMR 混用的場景中，存在現(xiàn)場的設(shè)備、人員、貨物統(tǒng)一管理的難題。

解決方案       

為此，仙工智能（SEER）推出了全感知 AI 物流系統(tǒng) RoboView，為客戶解決這些難題。

RoboView 架構(gòu)

RoboView 由感知平臺和感知節(jié)點共同構(gòu)成。其中全感知平臺作為系統(tǒng)的核心，提供所有的視覺服務(wù)，必要信息（包括庫位管理信息，車隊跟蹤信息、設(shè)備運行狀態(tài)等）、小車作業(yè)視覺服務(wù)請求響應(yīng)，系統(tǒng)安全監(jiān)控信息等四大部分。感知節(jié)點包括固定或移動式的圖像 (2D) /點云 (3D) 采集設(shè)備及編組。

感知平臺為獨立運行的視覺服務(wù)器，其主要提供視覺 AI 感知能力。通過 2D / 3D 視覺的技術(shù)實現(xiàn)對感知區(qū)域內(nèi)的目標(biāo)進(jìn)行識別，定位和檢測能力。全感知平臺只需要一份輸入，以及一個輸出定義 (DOO, Definition of Output)，即可完成一次感知服務(wù)，因此它是多任務(wù)的，相互獨立的信息感知平臺。

感知節(jié)點是分布式部署的，分為固定節(jié)點和移動節(jié)點。固定節(jié)點是指固定安裝的圖像 (2D) /點云 (3D) 采集設(shè)備，如普通的監(jiān)控攝像頭、ToF相機、3D激光雷達(dá)等都可以作為感知節(jié)點接入；移動節(jié)點指這些安裝在移動機器人上的各類視覺圖像/點云采集設(shè)備，通過仙工智能（SEER）的 SRC 核心控制器可以實現(xiàn)與 RoboView 的無縫對接；感知節(jié)點可以通過 Roboshop 一站式布署軟件加入 SLAM 地圖中，并配置相應(yīng)的工作流，從而實現(xiàn)節(jié)點的快速設(shè)置布署。同時，感知平臺 RoboView 與仙工智能企業(yè)數(shù)字化中臺 SEED 配合，可以實現(xiàn)對場所內(nèi)的各個系統(tǒng)的部署，規(guī)劃和監(jiān)控的能力，并實現(xiàn)對 AMR 及無人叉車的安全監(jiān)控及作業(yè)規(guī)劃。

AI 感知技術(shù)

AI 全感知平臺融合了多項關(guān)鍵技術(shù)，為物流管理系統(tǒng)提供了豐富的信息。

【增強顯示】通過數(shù)個固定感知節(jié)點全方位“觀察”，結(jié)合多點視覺的配準(zhǔn)、拼接、融合技術(shù)，將整個倉庫的實時狀態(tài)盡收眼底，在原有監(jiān)控視頻的基礎(chǔ)上加入了 AR 增強信息，讓現(xiàn)場人員對設(shè)備狀態(tài)更加直觀清晰。

【車輛監(jiān)控】結(jié)合車輛自身信息，對場景內(nèi)的每一輛 AMR 及自動叉車進(jìn)行實時定位和追蹤，捕獲并預(yù)測車輛的運行軌跡，結(jié)合 SEED 中臺，對偏離作業(yè)任務(wù)的車輛及時發(fā)出調(diào)整指令并向平臺發(fā)出告警。

【目標(biāo)識別定位】RoboView 不僅僅包含常規(guī)的視覺感知算法，還包含了先進(jìn)的深度學(xué)習(xí)算法，大大的提高了系統(tǒng)的抗干擾性。目標(biāo)檢測技術(shù)，能夠?qū)崟r從視頻流中檢測出目標(biāo)物體，如小車或獲??；3D 點云的分割技術(shù)，能夠直接從點云中提取目標(biāo)物體，并給出尺寸，位置等重要信息，使算法更加穩(wěn)定、可靠。另外，通過圖像語義分割技術(shù)，還可以為倉庫的管制標(biāo)記、道路標(biāo)識和作業(yè)車等進(jìn)行一次性分割、提取，為控制平臺提供了另一項重要信息。

【庫位管理】通過部署在場景中的多臺固定感知節(jié)點，感知平臺能夠?qū)崟r獲取場景里的所有庫位信息，并通過 2D 識別技術(shù)，識別&定位出庫位的有效信息，包括但不限于有無貨物，有無小車，有無異物侵入等信息，并將這些信息發(fā)布出去（根據(jù)物流系統(tǒng)的配置，可能發(fā)送給物流系統(tǒng)和小車），物流系統(tǒng)或小車能夠根據(jù)這些信息做有效的決策，大大提升了倉庫管理效率。

【安全監(jiān)控】主要涉及場景內(nèi)的所有狀態(tài)實時監(jiān)控，其內(nèi)容包括：外來異物（非作業(yè)人員，作業(yè)人員進(jìn)入非安全區(qū)域，小車脫離預(yù)設(shè)任務(wù)軌跡，非作業(yè)小車等）侵入監(jiān)控，貨物狀態(tài)監(jiān)控，小車路線障礙物檢測，其他聯(lián)動設(shè)備的監(jiān)控（如大型貨架，升降電梯等）。