玉林实硕医疗科技有限公司

AI見聞日報:機器人看YouTube學會做家務,大規模視頻訓練機器人要火了!| 見智研究

今日要點

1、機器人看YouTube學會做家務,大規模視頻訓練機器人成為重要路徑;

2、AI果不其然對視頻下手了,十秒剪視頻,Whisper模型讓每個人都能成為“剪輯師”;


(資料圖片)

3、開源大模型明星更新第二版:ChatGLM2-6B推理更快文字更長,允許商用授權;

4、PrivateGPT 開源模型可實現不連網提問;本地部署未來空間大;

5、李彥宏表示:百度文心大模型推理速度提升17倍;

每日見智AI

1、機器人看YouTube學會做家務,大規模視頻訓練機器人成為重要路徑

CMU機器人研究所助理教授Deepak Pathak展示了一種視覺機器人橋方法(VRB);通過讓機器觀看人類行為方式的視頻完成行為模擬,并驗證了該方法的有效性。

視頻中機器人下觀看了幾個人類開抽屜的視頻后,”CMU指出,“機器人可以確定如何打開任何抽屜。

CMU依賴于來自Epic Kitchens和Ego4D等數據庫的視頻,后者擁有“來自世界各地的近4小時的以自我為中心的日?;顒右曨l”。

見智點評:

這種方法的關鍵在于利用大規模的視頻數據來訓練機器人,并從中學習人類行為和操作。這為機器人的應用提供了更廣泛的可能性,可以通過觀察互聯網和YouTube等視頻來獲取更多的訓練數據。這種方法可以改進機器人的操作能力,并為機器人在日常生活中的應用提供更多的機會

2、AI果不其然對視頻下手了,十秒剪視頻,Whisper模型讓每個人都能成為“剪輯師”

荷蘭開發者Matthijs Hollemans在HuggingFace上基于Whisper開發了視頻剪輯新功能,現在剪視頻能夠精準到每個字。

在平臺上可以對上傳的視頻內容進行同步文字轉化,只需要選擇留下的文字,然后就可以直接生成所需的片段。使用過程非常簡單,可累比相機界的“傻瓜相機”。

見智點評:

AI應用層出不窮,此前主要是AI生成圖片內卷非常嚴重,幾乎是每周都有重要更新,現在這個迭代速度已經開始向視頻領域蔓延,這個小白剪視頻的功能讓剪視頻門檻大大降低,同時節省了很多制作時間,效率優化超過90%,對于視頻創作行業來說具有重大影響。

3、開源大模型明星更新第二版:推理更快文字更長,允許商用授權

清華大學KEG和數據挖掘小組(THUDM)發布了第二代ChatGLM2-6B;

相比第一代ChatGLM2-6B來看,二代在幾項測評中都有了不同程度的提高:

a、特別是數學推理能力提升幅度571%;

b、支持更多輪次的對話,并且文字長度限制也從2K提升至8K;

c、更快的推理能力,相比第一代速度提高42%;

d、向學術研究全面開放,并且允許申請商用授權;

見智點評:

ChatGLM2-6B是國內最強的開源大模型,本次更新具有重大意義,特別是在數學推理能力、對話長度和輪次、推理速度等方面的優化,將對數學教育、學術研究、商業應用等領域產生積極影響。

4、PrivateGPT 開源模型可實現不連網提問;本地部署未來空間大

開發者Iván Martínez Toro發布了PrivateGPT開源模型,該模型允許用戶在無需互聯網連接的情況下,通過提供自己的文檔來向模型提問。

PrivateGPT可以在家用設備上進行本地運行,使用前需要下載名為"gpt4all"的開源大語言模型(LLM)。用戶需要將所有相關文件放入一個目錄中,以供模型引入所有數據。完成LLM的訓練后,用戶可以向模型提出任何問題,它將使用提供的文檔作為上下文來回答。PrivateGPT能夠處理超過58000個單詞,目前需要大量本地計算資源(推薦使用高端CPU)進行設置。

Toro表示,當前PrivateGPT處于概念驗證(PoC)階段,它至少證明了可以在本地創建類似于ChatGPT的大模型。可以預見,一旦這種PoC轉變為實際產品,PrivateGPT將具備讓公司獲得個性化、安全和私密的ChatGPT來提高生產力的潛力。

見智點評:

PrivateGPT開啟行業對本地化部署的重視程度,這對于那些關注數據隱私和安全的行業和個人非常重要。通過本地化部署,用戶可以更好地控制和保護他們的數據,減少了數據泄露和侵犯隱私的風險;開源模型和本地化部署將在未來產生積極的影響。

5、李彥宏:百度文心大模型推理速度提升17倍

在世界互聯網大會數字文明尼山對話上表示:新的國際競爭戰略的關鍵不在于一個國家擁有多少個大模型,而是看這些大模型能夠應用于多少原生AI應用,并在多大程度上提升了生產效率。

他還透露,百度文心大模型已經更新到3.5版本。相比于3.0版本,新版本的訓練速度提升了2倍,推理速度提升了17倍,并且模型的效果總體上提升了超過50%。在數據質量、生成效果和內容安全性方面都有明顯的提升。

風險提示及免責條款 市場有風險,投資需謹慎。本文不構成個人投資建議,也未考慮到個別用戶特殊的投資目標、財務狀況或需要。用戶應考慮本文中的任何意見、觀點或結論是否符合其特定狀況。據此投資,責任自負。

關鍵詞: