當越疆機器人+ ChatGPT，會碰撞出什么火花？

由越疆科技完成的“高性能智能協(xié)作機器人”項目順利通過中國機械工業(yè)聯(lián)合會組織的鑒定，鑒定專家組認為，項目整體技術達到國際先進水平，其中基于電子皮膚自主導納控制的人機交互技術達到國際領先水平。

ChatGPT無疑是今年最出圈的科技熱點，和之前我們認知中的AI不太一樣，它擁有更為強大的語言理解和文本生成能力，更能“聽懂”人話，做到與真正人類幾乎無異的交流，甚至可以寫論文、腳本、代碼。如此強大的人工智能，只讓它活在屏幕里未免有點大材小用，所以越疆工程師們在一番研究后，將ChatGPT與越疆協(xié)作機器人結合，在物理世界做出了應用實踐。

機器人調(diào)酒師

一名優(yōu)秀的調(diào)酒師應該具備什么樣的特質(zhì)？出色的調(diào)酒技能只是基礎，他還應該善于溝通，在適當?shù)臅r候給予客人一定的心靈慰藉。在越疆機器人調(diào)酒項目中，工程師們將ChatGPT巧妙融入其中，一下讓冷冰冰的機器人，成為了一名懂酒懂心的優(yōu)秀調(diào)酒師。

我們前期對ChatGPT進行了訓練，詳細告知它應該扮演的角色（調(diào)酒師），各式雞尾酒的配方、口感等內(nèi)容。

經(jīng)過訓練后，機器人調(diào)酒師變得可靠又貼心，擁有更多自主判斷能力。比如顧客提出不合理要求，故意要求在長島冰茶雞尾酒中放茶時，ChatGPT會反饋長島冰茶里并沒有茶，其實是各種烈酒和可口可樂混合而成。

當顧客沒有明確的酒類需求，只提出推薦一杯能讓心情好起來的雞尾酒時，ChatGPT則會根據(jù)對話者的當下情緒狀況自行分析判斷，推薦【藍色夏威夷】雞尾酒，理由是酸酸甜甜的口感，有助于恢復心情。

當顧客表示口味比較酸，卻沒有提任何要求時，ChatGPT會根據(jù)語境推測對話者需求是進行口味調(diào)節(jié)，并且知道用現(xiàn)有材料椰奶來中和酸味，而普通AI大概率會因為這種模糊需求不知所措，發(fā)出”我不明白您在說什么“的感嘆。

更重要的是，在被授予越疆協(xié)作機器人控制接口信息后，ChatGPT會根據(jù)不同雞尾酒的特點，為機器人生成搖酒軌跡和代碼。然后機器人調(diào)酒師就能帥氣地制作各式各樣的雞尾酒。

智能物品分揀

調(diào)試機器人需要不低的技術門檻，以往工程師需要輸入大量代碼來引導機器人運作，操控不同的機器人可能還會涉及不同的編程語言。而在ChatGPT的幫助下，工程師可以直接用口語描述想做什么，由ChatGPT自動編譯成機器語言，充分調(diào)動機器人的手、眼、腦指揮機器人行動。

簡單的抓取和任務步驟描述自然難不倒機器人和ChatGPT，為了提升難度，我們要求它在各式物品中抓取一斤橘子，這時ChatGPT會多線并行，自動完成水果識別、水果抓取、重量計算等一系列工作并完成任務。

當要求它對桌面物品進行分類時，無需告知細節(jié)和步驟，ChatGPT會自行借助相機識別桌面物品，并自動做出類別判斷，完成分類任務，相比以往依靠人工標注分類的機器人而言，運作更為聰明。

從兩個方案實踐的情況來看，ChatGPT確實能通過理解和學習人類的語言，結合實際來進行互動，還能快速生成符合不同場景的機器人代碼，匹配用戶需求，大大減少了開發(fā)時間和成本。

從技術層面分析，ChatGPT大模型學習人類先驗知識，融入各類物理感知，以協(xié)作機器人為載體，增強了人機交互、人機協(xié)作的體驗感，讓機器人更加智能化、人性化。在此基礎上，越疆形成了自己的機器人大規(guī)模模型技術框架。

總體技術框架：人類通過自然語言交互下達任務指令，通過語音識別技術轉換為文本輸入給ChatGPT，ChatGPT大規(guī)模語言模型根據(jù)從海量數(shù)據(jù)中學習的大量人類先驗知識（包括語言類知識和世界知識等），以及前期prompt指令的微調(diào)訓練后（使得ChatGPT更有效適應下游任務），理解人類任務指示，可融合視覺、力覺等物理感知信息，做出最終任務決策，并控制機器人執(zhí)行完成指定任務。

未來，越疆將在“AI+機器人”領域不斷創(chuàng)新突破，與更多前沿技術融合碰撞，讓協(xié)作機器人真正具有自主感知、智能決策、精細操作等特性，并推動大規(guī)模模型在機器人先進制造和商業(yè)服務業(yè)的落地應用。