IT之家10月23日消息，英偉達日前公布了一個名為Eureka的AI系統，該系統以OpenAI的GPT-4為基礎，能夠讓機器人執行例如“轉筆”、“開抽屜”、“拿剪刀”、“雙手互傳球”等30多種復雜動作。
IT之家經過查詢得知，英偉達研究院主導開發了Eureka，該AI系統可令開發者配合英偉達自家物理模擬軟件Isaac Gym進行強化學習（reference learning）。
英偉達AI研究部門資深總監Anima Anandkumar認為，過去10年以來“強化式學習”雖然有所進展，但仍存在不少挑戰，例如“獎賞設計”等環節，現在還停留在“試錯”階段。而目前英偉達公布的Eureka，則是為執行困難的任務而設計，結合生成式AI與強化式學習算法，進行首次嘗試。
Eureka利用GPT-4生成出的“獎賞設計”方案可助力機器人的“試錯（trial-and-error）”學習，并能夠起到接替80%人類專家的任務，從而使機器人平均訓練效率提升超過50%。
據悉，在Eureka生成“獎賞設計”方案時，開發者不需要額外輸入任務提示或撰寫預定義的獎賞范本，再結合人工修正獎賞，最終使機器人動作更符合開發人員的意圖。
該AI系統配合Issac Gym時，可利用GPU加速進行模擬，并針對大量批次的候選回饋快速評估品質，從而提升訓練效率，并根據訓練結果的作出統計摘要，從而改良“獎賞方案”，在提升機器人反應水平的同時，令AI系統適用的機器人類型更為廣泛，例如“走獸型”（四足）、“人型（兩足）”、“四軸飛行器”、手臂型等機器人都可以搭載Eureka系統。
英偉達將Eureka進行了“開源靈敏性標竿測試”，在評估20種任務訓練結果后，得出了令人滿意的結果。
據此，英偉達認為Eureka可實現靈巧的機器人控制，并為動畫作者提供“生成逼真實體動作”的新方法。
