李飛飛團(tuán)隊(duì)提出ReKep,讓機(jī)器人具備空間智能,還能整合GPT-4o
2024-09-04 16:28 李飛飛

近日,李飛飛團(tuán)隊(duì)在這一研究方向取得了一個(gè)突破,提出了關(guān)系關(guān)鍵點(diǎn)約束(ReKep/Relational Keypoint Constraints)。簡(jiǎn)單來(lái)說(shuō),該方法就是將任務(wù)表示成一個(gè)關(guān)系關(guān)鍵點(diǎn)序列。并且,這套框架還能很好地與 GPT-4o 等多模態(tài)大模型很好地整合。該團(tuán)隊(duì)也已發(fā)布相關(guān)代碼。本文一作為 Wenlong Huang。

李飛飛表示,該工作展示了視覺(jué)與機(jī)器人學(xué)習(xí)的更深層次融合!雖然論文中沒(méi)有提及李飛飛在今年 5 年初創(chuàng)立的專注空間智能的 AI 公司 World Labs,但 ReKep 顯然在空間智能方面大有潛力。