為貫徹落實省委省政府打造VR產(chǎn)業(yè)集群、技術(shù)創(chuàng)新、應(yīng)用示范、人才集聚、政策環(huán)境五大高地要求，根據(jù)《關(guān)于印發(fā)進一步加快虛擬現(xiàn)實產(chǎn)業(yè)發(fā)展若干政策措施的通知》（贛府廳字〔2019〕82號）、《江西省虛擬現(xiàn)實應(yīng)用推廣工作方案》（贛VR組辦字〔2019〕2號）、《2020年虛擬現(xiàn)實產(chǎn)業(yè)發(fā)展工作要點》（贛VR組字〔2019〕3號），江西省工業(yè)和信息化廳開展了全省首批VR應(yīng)用示范項目評選工作。

經(jīng)嚴格的專家評審、實地考察、廳長辦公會審定，6月18日南昌青橙視界科技有限公司成功入選江西省首批VR應(yīng)用示范項目。

（排名不分前后）

項目介紹

2015年3月5日，李克強在全國兩會上作《政府工作報告》時首次提出“中國制造2025”的宏大計劃，以創(chuàng)新驅(qū)動、質(zhì)量為先為指導思想，加快從制造大國轉(zhuǎn)向制造強國。

為響應(yīng)國家“中國制造2025”和南昌市工業(yè)強基戰(zhàn)略要求，江鈴汽車集團一直致力于提升基于多品種混線生產(chǎn)環(huán)境下的智能制造水平。過去幾年，通過不斷的對生產(chǎn)線的升級改造（如以機器換人、導入MES信息系統(tǒng)等），工廠智能化水平已得到大幅提升。在一些難以實現(xiàn)自動化的工位仍采用傳統(tǒng)的人工作業(yè)方式，江鈴汽車集團與深圳增強現(xiàn)實技術(shù)有限公司（0glasses）經(jīng)過研究，認為應(yīng)用AR技術(shù)可以進一步提高這些智能制造場合的質(zhì)量控制、生產(chǎn)效率、安全水平，對降低工人的勞動強度也有幫助。

發(fā)動機裝配AR工作輔助系統(tǒng)

在不增加自動化設(shè)備和不改變工藝流程的前提下，0glasses將AR工業(yè)解決方案應(yīng)用于江西五十鈴發(fā)動機有限公司的發(fā)動機裝配過程，為發(fā)動機裝配過程開發(fā)一套發(fā)動機裝配AR工作輔助系統(tǒng)（EA-PSS，EngineAssembly PSS），通過圖像識別、人工智能算法等技術(shù)實現(xiàn)發(fā)動機裝配過程中的零件投料、下線核驗，實現(xiàn)投料的智能防錯、下線的自動核驗，實現(xiàn)發(fā)動機裝配零件投料、下線核驗的實時、可視化管理，對裝配工作實時糾錯，提高裝配效率，降低出錯率，降低生產(chǎn)成本。

整個系統(tǒng)包含四個功能模塊：零件投料防錯模塊（PPM）、裝配下線核檢模塊（FCM）、裝配操作監(jiān)督模塊（AMM）、裝配操作指導模塊（AGM）。

在發(fā)動機裝配車間的物理信息系統(tǒng)中，發(fā)動機裝配AR工作輔助系統(tǒng)處在發(fā)動機裝配車間的MES系統(tǒng)和發(fā)動機裝配物理場景之間，是MES系統(tǒng)的智能觸角。

EA-PSS與發(fā)動機裝配車間MES系統(tǒng)進行數(shù)據(jù)對接：

（1）數(shù)據(jù)加載：EA-PSS系統(tǒng)從MES系統(tǒng)加載發(fā)動機裝配過程中涉及到當前工作步驟、零部件型號、規(guī)格、庫存位置等信息；

（2）數(shù)據(jù)存儲：EA-PSS系統(tǒng)將識別的發(fā)動機裝配場景的狀態(tài)、結(jié)果、操作過程等數(shù)據(jù)存儲到MES系統(tǒng)。

（3）MES系統(tǒng)通過EA-PSS系統(tǒng)實現(xiàn)對發(fā)動機裝配的過程監(jiān)督和質(zhì)量控制。

EA-PSS系統(tǒng)對發(fā)動機裝配物理場景的感知和控制：

（1）智能感知：EA-PSS系統(tǒng)通過高清攝像頭采集發(fā)動機裝配場景中的裝配零部件、投料零部件、以及工人操作過程的姿態(tài)、手勢等圖像，發(fā)給后臺服務(wù)端進行圖像識別，實現(xiàn)當前工作場景語義的自動感知；

（2）聯(lián)動控制：基于當前工作場景語義的自動感知，EA-PSS系統(tǒng)自動記錄車間生產(chǎn)情況，生成車間生產(chǎn)報表，并發(fā)送相應(yīng)的刺激信號給發(fā)動機裝配車間的生產(chǎn)控制系統(tǒng)，實現(xiàn)生產(chǎn)設(shè)備的預警、聯(lián)動。

EA-PSS系統(tǒng)分為兩部分：智能終端和后臺服務(wù)器端。

智能終端所要完成的功能有：

?（1）人機交互：觸控、語音等手段實現(xiàn)人機的信息交互。

（2）圖像采集：通過攝像頭采集發(fā)動機裝配場景的圖片和視頻。

（3）信息顯示：實現(xiàn)發(fā)動機裝配場景生產(chǎn)數(shù)據(jù)的可視化，必要時以增強現(xiàn)實（文本、圖片、三維動畫等）方式實現(xiàn)數(shù)據(jù)的可視化。

根據(jù)發(fā)動機裝配場景生產(chǎn)的具體步驟，信息顯示可以是當前設(shè)備的運行狀態(tài)或相應(yīng)的預警信息，也可以是工人的工作結(jié)果或指導信息。

后臺服務(wù)器端所要完成的功能有：

（1）用戶管理：分配用戶不同的權(quán)限，管理用戶登陸的身份驗證。

（2）任務(wù)管理：實現(xiàn)任務(wù)的工作分解，按照發(fā)動機裝配實際流水線將工作及其標準推送相應(yīng)的工人。

（3）算法管理：基于圖像識別發(fā)動機設(shè)備及其零部件的狀態(tài)、裝配工人的操作結(jié)果，管理圖像識別的算法庫。

（4）數(shù)據(jù)管理：控制系統(tǒng)數(shù)據(jù)的流向，處理數(shù)據(jù)。

當智能終端采集到圖像時，后臺服務(wù)器調(diào)用相應(yīng)算法對圖像進行識別，將識別結(jié)果交給MES實現(xiàn)生產(chǎn)聯(lián)動。

智能終端和后臺服務(wù)器端的交互示例：

典型案例

江鈴汽車集團與日本五十鈴株式會社合資建立的江西五十鈴發(fā)動機公司是一家面向社會客戶的柴油機開發(fā)制造企業(yè)，目前的生產(chǎn)產(chǎn)品包含4大系列300多個品種，產(chǎn)品技術(shù)在國內(nèi)輕型車用柴油機行業(yè)具備領(lǐng)先地位。

江西五十鈴發(fā)動機有限公司的RZ4E發(fā)動機裝配線是一條完全按照ISUZU公司IM理念設(shè)計的生產(chǎn)線，物料全部KIT化投放，運用光電感應(yīng)、照相、仿形、計數(shù)等各類防錯技術(shù)70多項，具備行業(yè)領(lǐng)先的過程質(zhì)量控制能力。但要實現(xiàn)產(chǎn)品零缺陷目標，生產(chǎn)線在投料準確性、作業(yè)過程指導與監(jiān)督、下線核驗等環(huán)節(jié)進一步提高技術(shù)管控能力。

但在一些難以實現(xiàn)自動化的工位（如發(fā)動機裝配線），仍需要采用傳統(tǒng)的人工作業(yè)方式去實現(xiàn)，應(yīng)用0glasses的發(fā)動機裝配AR工作輔助系統(tǒng)（EA-PSS），很好地彌補效率、安全等方面的不足。

以RZ4E發(fā)動機裝配線的后處理總成裝配（OP270）和線束總成裝配（OP300）兩工序為例。OP270工序裝配后處理總成時需按規(guī)定的順序擰緊28個螺栓，OP300工序需按類分序裝配線束總成的28個插頭和27個卡扣，且不得漏插。以前螺栓擰緊與線束插接順序的保證完全依賴員工的熟練度和自覺性。本項目在不增加自動化設(shè)備和不改變工藝流程的前提下，通過對RZ4E發(fā)動機精確的三維模型進行AR注冊跟蹤和場景虛實融合顯示，實現(xiàn)了裝配前對零件正確性的核驗、裝配過程中對員工每一個作業(yè)動作進行提示和檢查、裝配完成后對裝配正確性進行核驗，實現(xiàn)了該兩道裝配工序的零缺陷目標。

OP270的預裝催化器總成裝配指導

OP300裝線束總成裝配指導

通過將0glasses AR工業(yè)解決方案應(yīng)用于江西五十鈴發(fā)動機有限公司的發(fā)動機裝配過程，為發(fā)動機裝配過程開發(fā)一套發(fā)動機裝配AR工作輔助系統(tǒng)（EA-PSS，Engine Assembly PSS），通過圖像識別、人工智能算法等技術(shù)實現(xiàn)發(fā)動機裝配過程中的零件投料、裝配操作、下線核驗，實現(xiàn)投料的智能防錯、裝配操作監(jiān)督和指導、下線的自動核驗，實現(xiàn)發(fā)動機裝配防錯防誤的實時、可視化管理，對裝配工作實時糾錯，提高裝配效率，降低出錯率，降低生產(chǎn)成本。

作為本次成功入選的企業(yè)，0glasses自2015年正式成立以來，一直努力專研技術(shù)，提高產(chǎn)品質(zhì)量，為達到行業(yè)的先進水平而努力，同時培養(yǎng)了大批技術(shù)人才。0glasses在科學技術(shù)創(chuàng)新的道路上從不停歇，不斷提升技術(shù)水平，且取得驕人的成績，助力國家打造XR產(chǎn)業(yè)高地。

成立6年來，不僅與國家電網(wǎng)、南方電網(wǎng)、華為、西門子、富士康、戴爾、中國航天、寶馬、江鈴汽車等在B端工業(yè)XR領(lǐng)域達成了深度合作，目前還已經(jīng)與中國聯(lián)通、中國電信、中國移動三大通信運營商集團公司達成戰(zhàn)略合作，預計在后續(xù)的時間將進入各家運營商的營業(yè)廳，切入千億級體量C端市場。