無(wú)人機(jī)主動(dòng)發(fā)現(xiàn)并靠近目標(biāo)。 (受訪(fǎng)單位供圖)

　　語(yǔ)言是人類(lèi)交流和思維呈現(xiàn)最為重要的符號(hào)系統(tǒng)，是推動(dòng)人類(lèi)文明的重要力量，那么機(jī)器能否用語(yǔ)言進(jìn)行交互，表達(dá)自己的所見(jiàn)、所聽(tīng)、所想，成為真正的智能機(jī)器人?

　　在線(xiàn)群聊，極大地方便了人們的溝通方式。能否把機(jī)器也拉進(jìn)群，讓它們組團(tuán)“商量”著干活，并和人類(lèi)無(wú)障礙地溝通和交流，更好地服務(wù)于生產(chǎn)生活?這極具科幻風(fēng)格的一幕已成為現(xiàn)實(shí)。

　　“群聊式”控制框架給無(wú)人機(jī)裝上“大腦”

　　記者獲悉，西北工業(yè)大學(xué)光電與智能研究院李學(xué)龍教授和同事們?cè)跈C(jī)器交互方面取得了創(chuàng)新進(jìn)展：基于國(guó)產(chǎn)大模型，研發(fā)了“群聊式”無(wú)人機(jī)控制框架，給每架無(wú)人機(jī)裝上了“大腦”，讓無(wú)人機(jī)集群在語(yǔ)言溝通中動(dòng)態(tài)協(xié)同，實(shí)現(xiàn)了開(kāi)放環(huán)境下“人機(jī)”和“多機(jī)”的對(duì)話(huà)交互，打破人類(lèi)和機(jī)器的交互壁壘，進(jìn)一步拓展了臨地安防的應(yīng)用場(chǎng)景。

　　超強(qiáng)的泛化能力，讓大模型成為“通用人工智能”的一縷曙光。然而，讀萬(wàn)卷書(shū)，不如行萬(wàn)里路。在開(kāi)放環(huán)境中，大模型需要真正地“走”進(jìn)物理世界，才能切實(shí)地理解復(fù)雜任務(wù)、解決實(shí)際問(wèn)題。近日，李學(xué)龍教授團(tuán)隊(duì)在開(kāi)放環(huán)境中的自主無(wú)人機(jī)集群方面開(kāi)展了創(chuàng)新研究，讓大模型插上“翅膀”，飛入我們的現(xiàn)實(shí)生活中。

　　受人類(lèi)的認(rèn)知模式啟發(fā)，團(tuán)隊(duì)將認(rèn)知形成的高度自主性凝練為“思維計(jì)算-實(shí)體控制-環(huán)境感知”的三元交互，建立了“書(shū)生·浦語(yǔ)”開(kāi)源大模型驅(qū)動(dòng)的自主無(wú)人機(jī)“群聊式”控制框架，實(shí)現(xiàn)了開(kāi)放環(huán)境和復(fù)雜任務(wù)中的智能交互、主動(dòng)感知和自主控制，提高了無(wú)人機(jī)任務(wù)執(zhí)行的自主性。

　　總之，類(lèi)人對(duì)話(huà)交互、主動(dòng)環(huán)境感知、自主實(shí)體控制是自主無(wú)人機(jī)集群的主要能力。類(lèi)人對(duì)話(huà)交互，探索人類(lèi)用戶(hù)與無(wú)人機(jī)的交互方式，讓無(wú)人機(jī)理解復(fù)雜任務(wù)中的用戶(hù)需求，是實(shí)現(xiàn)自主無(wú)人機(jī)的前提條件。

　　針對(duì)此，團(tuán)隊(duì)提出“群聊式”對(duì)話(huà)交互方法，將聲音、圖像和無(wú)人機(jī)自身狀態(tài)等多種信息，通過(guò)大模型轉(zhuǎn)換為自然語(yǔ)言的對(duì)話(huà)形式，實(shí)現(xiàn)了用戶(hù)與無(wú)人機(jī)以及無(wú)人機(jī)與無(wú)人機(jī)之間自主和直觀(guān)的交互方式。同時(shí)，團(tuán)隊(duì)設(shè)計(jì)了一套高效的實(shí)時(shí)反饋機(jī)制，使得無(wú)人機(jī)能夠在任務(wù)執(zhí)行的關(guān)鍵節(jié)點(diǎn)通過(guò)對(duì)話(huà)報(bào)告自身狀態(tài)、尋求用戶(hù)確認(rèn)，大大提高了復(fù)雜任務(wù)執(zhí)行的穩(wěn)定性和安全性。

　　對(duì)災(zāi)害救援等場(chǎng)景下的應(yīng)用具有重要意義

　　在飛行過(guò)程中，無(wú)人機(jī)主動(dòng)感知外部環(huán)境，實(shí)時(shí)調(diào)整任務(wù)規(guī)劃，是完成復(fù)雜任務(wù)的關(guān)鍵環(huán)節(jié)。針對(duì)此，團(tuán)隊(duì)設(shè)計(jì)了任務(wù)引導(dǎo)的主動(dòng)感知機(jī)制，提出了多傳感器融合的低空搜索、動(dòng)態(tài)避障和視覺(jué)定位算法。在實(shí)際任務(wù)執(zhí)行中，根據(jù)感知信息和任務(wù)目標(biāo)，動(dòng)態(tài)調(diào)整無(wú)人機(jī)飛行路徑和觀(guān)測(cè)位姿，嘗試從不同角度和位置感知周?chē)澜?，逐漸降低環(huán)境中的不確定性，實(shí)現(xiàn)高效的信息采集和任務(wù)執(zhí)行。

　　探索復(fù)合智能體形態(tài)，增強(qiáng)復(fù)雜任務(wù)處理能力，是大模型時(shí)代新型智能體的研究重點(diǎn)。針對(duì)此，團(tuán)隊(duì)依托無(wú)人機(jī)平臺(tái)設(shè)計(jì)了夾爪等末端執(zhí)行器，將傳統(tǒng)無(wú)人機(jī)拓展為“飛行機(jī)器人”，長(zhǎng)出“手”來(lái)，具備抓取能力。同時(shí)，構(gòu)建了異構(gòu)無(wú)人機(jī)集群協(xié)同控制機(jī)制，結(jié)合環(huán)境感知反饋，實(shí)時(shí)調(diào)整無(wú)人機(jī)編隊(duì)的飛行狀態(tài)，使集群分工執(zhí)行區(qū)域搜索、目標(biāo)定位和抓取等任務(wù)。

　　記者獲悉，大模型自主無(wú)人機(jī)集群是該團(tuán)隊(duì)將生物智能 “思維計(jì)算-實(shí)體控制-環(huán)境感知”的三元交互模式應(yīng)用于自主智能體的一次成功嘗試，依托大語(yǔ)言模型、無(wú)人機(jī)平臺(tái)和多種傳感器，實(shí)現(xiàn)對(duì)話(huà)交互、主動(dòng)感知和自主控制，對(duì)安防巡檢、災(zāi)害救援、空中物流等臨地安防場(chǎng)景下的應(yīng)用具有重要意義。 (記者 任娜)