Figure“人形GPT”首发:OpenAI大模型加持 已进厂测试

更新於 2024/03/15閱讀時間約 4 分鐘

当地时间3月14日,明星初创公司Figure发布了首个接入了OpenAI大模型的机器人demo——Figure 01,这也是该公司与OpenAI合作增强人形机器人能力的首批成果。

虽只用到了一个神经网络,但官方发布的一系列视频显示,Figure 01能够与人类进行对话交互,理解并执行人类指令,整套操作动作十分流畅。

raw-image

上个月,Figure刚刚获得了来自OpenAI、微软、英伟达等约6.75亿美元的投资,用于开发为重复且危险的仓库及零售等工作提供劳动力补充的人形机器人,公司估值飙升至26亿美元。

同时,该公司还与OpenAI签订了合作协议——将多模态大模型(VLM)的能力扩展到机器人的感知、推理和交互上,即“具身智能”

如今Figure 01的正式发布,距其刚刚完成的B轮融资仅仅过去了13天

Figure 01视频演示

根据Figure发布的视频,Figure 01可以流畅地执行递苹果、将垃圾收拾进筐里、将杯盘归置在沥水架上等操作。

raw-image

重要的是,Figure 01的大部分举动和回答都基于提问者的一些开放性问题和要求,透过自己的逻辑思考得出了解决方案,这意味着它能对话、能思考、能学习,比一般的机器人更像“人”。

raw-image

在视频的开头,Figure声明该机器人的行为均基于语音的逻辑推理,并使用端到端神经网络,且全程一镜到底拍摄,并无任何加速或剪辑。

raw-image

Figure创始人Brett Adcock也在推文中强调,Figure 01的所有行为都是通过学习获得的,并无任何远程操作,且机器人的速度较之前有显著提升,正逐步贴近人类的速度。

Figure 01”最强大脑“

官方表示,Fugure 01是世界上首个在商业上可行的通用人形机器人。机器人身高5英尺6英寸(约1.68米),体重60千克,可实现20千克的有效载重,续航5小时,每秒可移动1.2米。

raw-image

在Figure 01中,OpenAI大模型提供了高级视觉和语言智能功能,Figure的神经网络则支持快速、低级且灵巧的机器人动作。

本月初,Figure宣布将基于OpenAI最新的GPT模型开发下一代人形机器人的AI模型,并专门训练Figure收集的机器人动作数据,以便其人形机器人可以与人交谈,看到东西并执行复杂任务。

成品视频发布后,Figure 01高级AI工程师Corey Lynch在X上细述了其运行的技术原理:Figure 01可以描述其视觉体验、规划未来行动、反思自己的记忆并口头陈述推理过程。

raw-image

具体来说,该机器人的语音能力基于“文本——语音”的大模型。Figure AI将机器人摄像头拍摄的图像和麦克风捕获的语音转录为文本,一并输入OpenAI训练的多模态模型中,实现对图像与文本的同时理解。之后,该模型将对所有信息打包处理,从文本生成语言响应。

执行环节,同一个模型负责决定以哪种内化的闭环行为对给定指令作出响应,将特定的神经网络权重加载到GPU(图形处理器)来执行相应的策略。

raw-image

Brett Adcock也在X中提到,Figure整合了Figure 01的所有关键组成部分,如电机、中间件操作系统、传感器、机械结构等,均由Figure工程师设计。

未来已来:具身智能落地

英伟达创始人兼CEO黄仁勋曾表示:”具身智能将引领下一波AI浪潮。“

Figure成立于2022年,在与OpenAI合作之前,该公司就已在AI方面收获颇丰。当时Brett Adcock就已透露,Figure将在未来的1-2年内专注于开发涵盖AI系统、低级控制等功能的人形机器人。

2024年1月,Figure 01通过引入端到端神经网络,实现自行纠错,在10个小时的训练后学会了做咖啡;2月,Figure 01就已在仓库中执行搬运任务,拥有自主导航、识别物体和为任务优先级排序的能力,但速度只有人类的16.7%。

raw-image

除此之外,Figure也积极尝试向场景落地的转化。近期,Figure与宝马公司签署了意向商业协议,欲将通用机器人部署至汽车制造环节,Figure 01也已开始在美国南卡罗来纳州的一家工厂中接受测试。

尽管许多AI研究者认为通用机器人的普及还需数十年,但机器人专家Eric Jang提醒道:“别忘了,ChatGPT的诞生仿几乎就在一夜之间。”

OpenAI大模型加持下的Figure 01可能会有更高的价格,但Figure方面尚未透露任何相关信息,但Brett Adcock曾对Figure 01的适当降价表明了乐观态度。

#OpenAI##人工智能##ChatGPT#

    avatar-img
    0會員
    152內容數
    留言0
    查看全部
    avatar-img
    發表第一個留言支持創作者!
    Stefan Lee的沙龍 的其他內容
    距离iPhone 16发布还有半年时间,新消息的流出也越来越多。
    据媒体报道,由于中国市场的电动汽车制造商的竞争加剧,日本汽车巨头日产汽车(Nissan)和本田(Honda)正考虑削减在中国的产量。
    微软(股票代码:MSFT)公司近日面临一项内部爆料,一名人工智能工程师声称公司的人工智能图像工具可能会生成具有暴力和色情性质的图像,或对社会造成潜在危险。 据资深软体工程经理Shane Jones透露,他在致联邦贸易委员会(FTC)和微软董事会的信函中表达了对微软“负责任人工智能”策略的质疑。
    3月7日,哔哩哔哩(以下简称“B站”)公布了截至2023年12月31日止第四季度及财年业绩报告。 亏损大幅收窄 业绩数据显示,2023年第四季度净营业额总额为63亿元,同比增加3%。毛利润为17亿元,同比增加33%,毛利率为26.1%,已经连续6个季度出现提升。 盈亏方面,B站称,第四季度公司
    3月5日,电动汽车品牌蔚来公布了2023年第四季度及全年业绩。
    預計2024年,越南銀行業將呈現增長趨勢,越來越多的銀行計劃向外國投資者發行股票。其中包括越南商業銀行(Vietcombank)、越南國際發展銀行(BIDV)和越南人民銀行(LPBank)。這些銀行計劃通過私募或公開發行的方式增加註冊資本,以滿足發展需求和央行規定的資本充足率和流動性的要求。
    距离iPhone 16发布还有半年时间,新消息的流出也越来越多。
    据媒体报道,由于中国市场的电动汽车制造商的竞争加剧,日本汽车巨头日产汽车(Nissan)和本田(Honda)正考虑削减在中国的产量。
    微软(股票代码:MSFT)公司近日面临一项内部爆料,一名人工智能工程师声称公司的人工智能图像工具可能会生成具有暴力和色情性质的图像,或对社会造成潜在危险。 据资深软体工程经理Shane Jones透露,他在致联邦贸易委员会(FTC)和微软董事会的信函中表达了对微软“负责任人工智能”策略的质疑。
    3月7日,哔哩哔哩(以下简称“B站”)公布了截至2023年12月31日止第四季度及财年业绩报告。 亏损大幅收窄 业绩数据显示,2023年第四季度净营业额总额为63亿元,同比增加3%。毛利润为17亿元,同比增加33%,毛利率为26.1%,已经连续6个季度出现提升。 盈亏方面,B站称,第四季度公司
    3月5日,电动汽车品牌蔚来公布了2023年第四季度及全年业绩。
    預計2024年,越南銀行業將呈現增長趨勢,越來越多的銀行計劃向外國投資者發行股票。其中包括越南商業銀行(Vietcombank)、越南國際發展銀行(BIDV)和越南人民銀行(LPBank)。這些銀行計劃通過私募或公開發行的方式增加註冊資本,以滿足發展需求和央行規定的資本充足率和流動性的要求。
    你可能也想看
    Google News 追蹤
    Thumbnail
    *合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
    Thumbnail
    徵的就是你 🫵 超ㄅㄧㄤˋ 獎品搭配超瞎趴的四大主題,等你踹共啦!還有機會獲得經典的「偉士牌樂高」喔!馬上來參加本次的活動吧!
    Thumbnail
    在柳溪這個宜人的小村莊裡,一個名叫珍的神秘人物激起了每個居民的好奇心。沒有人知道她的完整故事,但在霧氣瀰漫的早晨,總能在邊緣柳樹的小溪旁,看見一個身影在那兒徘徊,她的動作就像潺潺的溪水一樣流暢。 珍是一個謎,一首沒有結尾的詩,一曲還未寫出旋律的歌。
    Thumbnail
    從前,在被遺忘森林的迷霧所籠罩的小村莊裡,有一個神秘的身影,人們只知道她叫做珍。她是一個謎一般的存在,她的出現像是在樹間起舞的霧一樣短暫。沒有人知道她來自哪裡,或者她的眼睛為何深邃,反映出一個見證了世紀更迭的靈魂。
    Thumbnail
    這篇文章的內容跟學校一堂叫做「工商心理學」的課程簡報相關,所以會參雜學校相關作業的引用,不過撇除這點,這篇文章能算是不錯的電影分析。
    Thumbnail
    在2020年,全球疫情重創各級產業,而奢侈品市場也不例外,尤其因觀光旅遊大減,許多原因大量遊客收益良多的奢侈品展示店,紛紛關閉。面臨如此困境,奢侈品牌們(尤其是法國品牌)做出了什麼策略,試圖解決收益數字、經濟衰退的窘境呢?
    Thumbnail
    餐廳一進門的門口,掛了很多好評的證書們,最吸引我的,就是這個中國義大利商會的Quality Approved. 吃完之後,覺得果然是道地。 開胃菜點了一道蟹肉番茄麵包,烤過的麵包上,鋪了滿滿的蟹肉與小蕃茄,吃起來很清爽,很適合在這種炎熱的夏天點上一盤。
    Thumbnail
    會選這片來看只是因為電影名反覆出現在某些我讀過就忘的文章裡,我其實沒有預期這部電影會這麼好看,我立刻打電話跟媽媽說:「媽,我剛才用券看了《關鍵少數》,48小時內都可以重看,妳快點在時間內看完!我推薦的片子一定是好看的啦!」
    Thumbnail
    Shape, of body, basically. Pose, during speaking, naturally. Figure, of a person, generally.   Great demonstrating, the spike of rice. Upright, she
    Thumbnail
    Anaconda Windows Individual Edition contains conda and Anaconda Navigator, as well as Python and hundreds of scientific packages.
    Thumbnail
    故事講述的是非裔女性在NASA,因性別及膚色遭受歧視,但仍堅持實現夢想。
    Thumbnail
    <p>《關鍵少數》具體的描繪了美蘇冷戰時期中期,包含了美蘇的太空競賽、美國的史普尼克危機(Sputnik crisis)、積極的科學教育、以及電腦的問世,還有種族隔離政策、金恩博士的黑人人權運動。這部電影不只講述了美國種族隔離時期的三位傑出黑人女性的故事,更重要的是,還讓我們更全面且立體的認識五、六零年代的美國歷史。</p>
    Thumbnail
    *合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
    Thumbnail
    徵的就是你 🫵 超ㄅㄧㄤˋ 獎品搭配超瞎趴的四大主題,等你踹共啦!還有機會獲得經典的「偉士牌樂高」喔!馬上來參加本次的活動吧!
    Thumbnail
    在柳溪這個宜人的小村莊裡,一個名叫珍的神秘人物激起了每個居民的好奇心。沒有人知道她的完整故事,但在霧氣瀰漫的早晨,總能在邊緣柳樹的小溪旁,看見一個身影在那兒徘徊,她的動作就像潺潺的溪水一樣流暢。 珍是一個謎,一首沒有結尾的詩,一曲還未寫出旋律的歌。
    Thumbnail
    從前,在被遺忘森林的迷霧所籠罩的小村莊裡,有一個神秘的身影,人們只知道她叫做珍。她是一個謎一般的存在,她的出現像是在樹間起舞的霧一樣短暫。沒有人知道她來自哪裡,或者她的眼睛為何深邃,反映出一個見證了世紀更迭的靈魂。
    Thumbnail
    這篇文章的內容跟學校一堂叫做「工商心理學」的課程簡報相關,所以會參雜學校相關作業的引用,不過撇除這點,這篇文章能算是不錯的電影分析。
    Thumbnail
    在2020年,全球疫情重創各級產業,而奢侈品市場也不例外,尤其因觀光旅遊大減,許多原因大量遊客收益良多的奢侈品展示店,紛紛關閉。面臨如此困境,奢侈品牌們(尤其是法國品牌)做出了什麼策略,試圖解決收益數字、經濟衰退的窘境呢?
    Thumbnail
    餐廳一進門的門口,掛了很多好評的證書們,最吸引我的,就是這個中國義大利商會的Quality Approved. 吃完之後,覺得果然是道地。 開胃菜點了一道蟹肉番茄麵包,烤過的麵包上,鋪了滿滿的蟹肉與小蕃茄,吃起來很清爽,很適合在這種炎熱的夏天點上一盤。
    Thumbnail
    會選這片來看只是因為電影名反覆出現在某些我讀過就忘的文章裡,我其實沒有預期這部電影會這麼好看,我立刻打電話跟媽媽說:「媽,我剛才用券看了《關鍵少數》,48小時內都可以重看,妳快點在時間內看完!我推薦的片子一定是好看的啦!」
    Thumbnail
    Shape, of body, basically. Pose, during speaking, naturally. Figure, of a person, generally.   Great demonstrating, the spike of rice. Upright, she
    Thumbnail
    Anaconda Windows Individual Edition contains conda and Anaconda Navigator, as well as Python and hundreds of scientific packages.
    Thumbnail
    故事講述的是非裔女性在NASA,因性別及膚色遭受歧視,但仍堅持實現夢想。
    Thumbnail
    <p>《關鍵少數》具體的描繪了美蘇冷戰時期中期,包含了美蘇的太空競賽、美國的史普尼克危機(Sputnik crisis)、積極的科學教育、以及電腦的問世,還有種族隔離政策、金恩博士的黑人人權運動。這部電影不只講述了美國種族隔離時期的三位傑出黑人女性的故事,更重要的是,還讓我們更全面且立體的認識五、六零年代的美國歷史。</p>