(圖片來(lái)源:Microsoft)
通用人工智能(AGI)領(lǐng)域又公布了一系列重磅消息。
鈦媒體App獲悉,4月19日,Meta公布期待已久的多模態(tài)開(kāi)源大模型Llama 3系列。同時(shí),Meta還推出了其首款基于Llama 3開(kāi)源模型的AI聊天機(jī)器人產(chǎn)品——AI助手,直接對(duì)標(biāo)ChatGPT-4。
與此同時(shí),科技行業(yè)裁員消息頻出。谷歌宣布從3月10日開(kāi)始的新一輪裁員,預(yù)計(jì)持續(xù)到8月,包括商業(yè)服務(wù)等職能部門(mén);英國(guó)AI初創(chuàng)公司Stability AI也于近日宣布裁員10%。
另外,有消息指,微軟公司計(jì)劃到2024年底儲(chǔ)備180萬(wàn)塊AI芯片,這意味著微軟今年計(jì)劃儲(chǔ)備的圖形處理單元(GPU)的數(shù)量增加了兩倍。到2027財(cái)年,微軟預(yù)計(jì)將在GPU和數(shù)據(jù)中心上投資約1000億美元。
4月18日,聯(lián)想集團(tuán)董事長(zhǎng)兼CEO楊元慶在第十屆聯(lián)想創(chuàng)新科技大會(huì)(2024 Lenovo Tech World)上表示,人工智能(AI)的下半場(chǎng),一定是從技術(shù)突破進(jìn)入到落地應(yīng)用的階段。而落地的途徑,就是涵蓋智能設(shè)備、智能基礎(chǔ)設(shè)施、智能解決方案和服務(wù)的三大支柱。
北京時(shí)間4月19日凌晨,Meta公布期待已久的多模態(tài)開(kāi)源大模型Llama 3系列,目前包括80億和700億兩個(gè)參數(shù)的調(diào)優(yōu)版本。與此同時(shí),Meta還推出了其首款基于Llama 3開(kāi)源模型的 AI 聊天機(jī)器人產(chǎn)品——AI助手,直接對(duì)標(biāo)ChatGPT-4。
Llama 3具體的技術(shù)細(xì)節(jié)包括:選用了相對(duì)標(biāo)準(zhǔn)的僅解碼器Transformer架構(gòu),并在兩個(gè)定制的24K GPU集群上基于超過(guò)15T的詞庫(kù)上進(jìn)行了預(yù)訓(xùn)練——訓(xùn)練數(shù)據(jù)集是 Llama 2 的七倍,包含的代碼數(shù)量也是 Llama 2 的四倍。與此同時(shí),Llama 3支持8K上下文長(zhǎng)度,是Llama 2的兩倍。
在處理多種類(lèi)型的復(fù)雜任務(wù)方面,Llama 3 70B相比8B版本有顯著的提高,同時(shí)多個(gè)基準(zhǔn)得分也超過(guò)了Google Gemini Pro 1.5以及Claude 3 Sonnet。
![]()
Meta表示,預(yù)訓(xùn)練和指導(dǎo)微調(diào)模型是目前 8B 和 70B 參數(shù)尺度上最好的模型。
Llama 3 很快將在所有主要平臺(tái)上提供,包括 AWS、Databricks、Google Cloud、Hugging Face、Kaggle、IBM WatsonX、Microsoft Azure、NVIDIA NIM 和 Snowflake 上提供,并得到 AMD、AWS、戴爾、英特爾、NVIDIA 和高通提供的硬件平臺(tái)的支持。另外,你也可以在Meta官方助手Meta AI上體驗(yàn)。
Meta還表示,Llama 3 8B 和 70B 型號(hào)標(biāo)志著其Llama 3發(fā)布產(chǎn)品的開(kāi)始。接下來(lái),Llama 最大模型有超過(guò)400B(4000億)參數(shù),雖然這些模型仍在訓(xùn)練中。
值得注意的是,4月19日中午,繼18日Llama3的8B、70B大模型發(fā)布后,百度智能云千帆大模型平臺(tái)19日宣布在國(guó)內(nèi)首家推出針對(duì)Llama3全系列版本的訓(xùn)練推理方案,便于開(kāi)發(fā)者進(jìn)行再訓(xùn)練,搭建專(zhuān)屬大模型,現(xiàn)已開(kāi)放邀約測(cè)試。
目前,百度智能云千帆大模型平臺(tái)中各種尺寸模型定制工具M(jìn)odelBuilder已預(yù)置了最全面最豐富的大模型,支持國(guó)內(nèi)外第三方主流模型,總數(shù)量達(dá)到79個(gè),是國(guó)內(nèi)擁有大模型數(shù)量最多的開(kāi)發(fā)平臺(tái)。
早前百度創(chuàng)始人、董事長(zhǎng)、CEO李彥宏則表示,因?yàn)榛A(chǔ)模型文心 4.0 可以根據(jù)需要,兼顧效果、響應(yīng)速度、推理成本等各種考慮,剪裁出適合各種場(chǎng)景的更小尺寸模型,并且支持精調(diào)和 post pretrain。這樣通過(guò)降維剪裁出來(lái)的模型,比直接用開(kāi)源模型調(diào)出來(lái)的模型,同等尺寸下,效果明顯更好;同等效果下,成本明顯更低,“所以開(kāi)源模型會(huì)越來(lái)越落后”。
據(jù)Business Insider獲得的一份文件,微軟公司內(nèi)部計(jì)劃到2024年底儲(chǔ)備180萬(wàn)塊AI芯片,這意味著微軟今年計(jì)劃儲(chǔ)備的圖形處理單元(GPU)的數(shù)量增加了兩倍。
另?yè)?jù)兩位知情人士透露,從當(dāng)前財(cái)年到2027財(cái)年,微軟預(yù)計(jì)將在GPU和數(shù)據(jù)中心上投資約1000億美元。
![]()
1000億美元投資額讓人聯(lián)想到早些時(shí)候的一則報(bào)道。今年3月30日,微軟和OpenAI宣布計(jì)劃投資1000億美元建造“星際之門(mén)”(Stargate)AI超級(jí)計(jì)算機(jī)。OpenAI的下一版重大AI升級(jí)預(yù)計(jì)將在明年初落地。微軟高管希望最早在2028年發(fā)布“星際之門(mén)”(Stargate)AI超級(jí)計(jì)算機(jī)。此外,微軟和OpenAI計(jì)劃為AI開(kāi)發(fā)數(shù)據(jù)中心項(xiàng)目。
對(duì)于以上消息,微軟發(fā)言人弗蘭克·肖(Frank Shaw)拒絕發(fā)表評(píng)論,稱(chēng)上市公司在報(bào)告收益之前必須遵守規(guī)定的靜默期。該公司計(jì)劃在未來(lái)幾天發(fā)布業(yè)績(jī)。
DA Davidson分析師預(yù)估,微軟2023年在采購(gòu)英偉達(dá)芯片上花費(fèi)了45億美元,一位微軟高管對(duì)外透露,這一數(shù)字與實(shí)際支出大致相符。
其他科技巨頭也正在建設(shè)龐大的GPU儲(chǔ)備庫(kù)。Meta首席執(zhí)行官馬克·扎克伯格今年早些時(shí)候表示,Meta將在2024年購(gòu)買(mǎi)約35萬(wàn)個(gè)英偉達(dá)H100 GPU,到年底將擁有約60萬(wàn)個(gè)GPU。
4月18日消息,在第十屆聯(lián)想創(chuàng)新科技大會(huì)(2024 Lenovo Tech World)上,聯(lián)想集團(tuán)董事長(zhǎng)兼CEO楊元慶發(fā)表《AI for all,讓世界充滿(mǎn)AI》主題演講。
![]()
首先,楊元慶指出,AI是增強(qiáng)智能而不是取代人類(lèi)的智能,而混合式AI將是連接增強(qiáng)智能與千家萬(wàn)戶(hù)、千行百業(yè)的橋梁,是AI普惠的必由之路。
何謂混合式AI?在楊元慶看來(lái),它是公共大模型、個(gè)人大模型和企業(yè)大模型的混合并用。
“我們今天耳熟能詳?shù)拇笳Z(yǔ)言模型,其實(shí)主要是運(yùn)行在公有云上的公共大模型。毋庸置疑,它是AI底層核心技術(shù)飛躍發(fā)展的成果,是AI普及的催化劑和加速器。但在實(shí)際使用中,它進(jìn)一步的普及和應(yīng)用受到了網(wǎng)絡(luò)速度,云端效率以及成本考量的限制。有研究表明,公共大模型每一次的查詢(xún)成本達(dá)到了傳統(tǒng)搜索的十倍之高。這背后的高耗能更是為環(huán)保精神所不容。”楊元慶說(shuō)。
“另一個(gè)阻礙公共大語(yǔ)言模型普及的致命原因,那就是數(shù)據(jù)安全和隱私方面的先天不足。”在楊元慶看來(lái),如果要得到一個(gè)從云端返回的精準(zhǔn)答案,你將不得不透露真實(shí)的個(gè)人數(shù)據(jù)和意圖,并且允許這些數(shù)據(jù)成為公共信息的一部分,這無(wú)疑會(huì)觸發(fā)個(gè)人隱私和企業(yè)信息安全方面的考慮,從而使得大多數(shù)人在將它變?yōu)槿粘J褂霉ぞ叩臅r(shí)候望而卻步。因此,公共大模型雖好,但本質(zhì)上是一種公共的智能。要得到更廣泛的使用,還需要其他的AI技術(shù)的必要補(bǔ)充。
楊元慶稱(chēng),未來(lái)AI是基于個(gè)人大模型、企業(yè)大模型以及在其基礎(chǔ)上開(kāi)發(fā)出來(lái)的個(gè)人智能體和企業(yè)智能體。
談及個(gè)人智能體和企業(yè)智能體,楊元慶詳細(xì)介紹了二者的運(yùn)行方式。
其中,個(gè)人智能體通過(guò)大模型壓縮技術(shù),在個(gè)人智能終端或邊緣設(shè)備上運(yùn)行,以自然交互的方式接收指令,通過(guò)個(gè)人的旅行紀(jì)錄、購(gòu)物偏好這些存儲(chǔ)于設(shè)備上的信息,更好地進(jìn)行推理,做出行動(dòng)。它甚至可以根據(jù)你的思維模式和行為頻率去預(yù)測(cè)下一個(gè)任務(wù),并主動(dòng)提出建議,自主尋找解決方案,最重要的是,除非用戶(hù)授權(quán),否則用戶(hù)的個(gè)人數(shù)據(jù)永遠(yuǎn)不會(huì)被共享或發(fā)送至公有云上去。
“當(dāng)這樣的個(gè)人智能體置身于各種各樣的智能設(shè)備,未來(lái)的智能設(shè)備就會(huì)成為我們每一個(gè)人的數(shù)字化延伸。”楊元慶稱(chēng),智能設(shè)備中包含智能體,而智能體中包含大模型。我們的“內(nèi)存”將實(shí)現(xiàn)極大的擴(kuò)展。我們的“算力”,也就是進(jìn)行推理,并形成答案或意見(jiàn)、結(jié)論的速度,將會(huì)大大加快。推理能力和決策質(zhì)量也將顯著提升。
在楊元慶看來(lái),企業(yè)也將受益于類(lèi)似的企業(yè)智能體。它分散在企業(yè)的多個(gè)終端設(shè)備和基礎(chǔ)設(shè)施中,將能夠?qū)Υ罅康谋酒髽I(yè)數(shù)據(jù)進(jìn)行學(xué)習(xí)推理,在保障信息安全的同時(shí),支持企業(yè)運(yùn)營(yíng)決策,提升管理效率,提高生產(chǎn)力。
“未來(lái),個(gè)人大模型和企業(yè)大模型將分別通過(guò)內(nèi)置個(gè)人和企業(yè)智能體的形式與公共大模型共存互補(bǔ),從而構(gòu)成混合式AI。所以我們相信這就是AI能夠普及應(yīng)用的一個(gè)大方向。”楊元慶稱(chēng)。
此外,楊元慶還解答了如何實(shí)現(xiàn)混合式AI落地應(yīng)用這一問(wèn)題。
他指出,落地離不開(kāi)涵蓋智能設(shè)備、智能基礎(chǔ)設(shè)施、智能解決方案和服務(wù),這也是聯(lián)想集團(tuán)推動(dòng)AI普惠的三大支柱。楊元慶認(rèn)為,對(duì)于個(gè)人用戶(hù)而言,要獲得個(gè)人智能體的體驗(yàn),最便捷的路徑,就是自己擁有的電腦、手機(jī)等個(gè)人計(jì)算設(shè)備中內(nèi)置了個(gè)人智能體。
“對(duì)于企業(yè)客戶(hù)來(lái)說(shuō),AI的落地必須依賴(lài)于智能基礎(chǔ)設(shè)施。每一家企業(yè),每一天都有大量數(shù)據(jù)產(chǎn)生,不管是來(lái)自終端傳感器或設(shè)備,還是來(lái)自邊緣和云端。這些數(shù)據(jù)就像石油,是企業(yè)重要的戰(zhàn)略資源,需要被開(kāi)采、輸送、提煉。因此,企業(yè)需要服務(wù)器、網(wǎng)絡(luò)和存儲(chǔ)設(shè)備,才能讓海量數(shù)據(jù)各就其位,物盡其用,再通過(guò)AI模型和算法來(lái)實(shí)現(xiàn)企業(yè)的數(shù)據(jù)智能。未來(lái),我們會(huì)看到AI將不僅在公有云上運(yùn)行,還將在本地?cái)?shù)據(jù)中心、私有云、混合云,甚至在邊緣側(cè)運(yùn)行,算力將會(huì)在云、邊、端之間更為均衡地分布。這就意味著,企業(yè)智能體的落地,需要的是混合式的基礎(chǔ)設(shè)施,‘端-邊-云-網(wǎng)-智’缺一不可,而這樣的技術(shù)架構(gòu),正是聯(lián)想傾力打造的新IT技術(shù)架構(gòu)。”楊元慶稱(chēng)。
楊元慶強(qiáng)調(diào),混合式AI正是“新質(zhì)生產(chǎn)力”的代表,它將大大加速各行各業(yè)的智能化轉(zhuǎn)型。從設(shè)備到基礎(chǔ)設(shè)施,再到解決方案與服務(wù),是聯(lián)想讓混合式AI真正落地的三大支柱。
鈦媒體App 4月19日消息,繼備受爭(zhēng)議的前CEO 埃馬德·莫斯塔克(Emad Mostaque)離職后,英國(guó)AI初創(chuàng)公司Stability AI近日宣布裁員10%。
![]()
Stability AI前CEO 埃馬德·莫斯塔克
一份內(nèi)部備忘錄顯示,在經(jīng)歷了一段不可持續(xù)的增長(zhǎng)后,Stability AI裁減了20多名員工,以適當(dāng)調(diào)整業(yè)務(wù)規(guī)模。
據(jù)悉,Stability AI擁有約200名員工,這意味著此次裁員的比例約為10%。
據(jù)一位知情人士透露,受影響的員工大多在業(yè)務(wù)運(yùn)營(yíng)領(lǐng)域,他們已被告知裁員一事。
Stability AI新任命的聯(lián)席CEO Shan Shan Wong和Christian Laforte在一封電子郵件中表示,公司需要重組部分業(yè)務(wù),這意味著將不得不與一些同事告別。“我們已經(jīng)通知了受此影響的員工,我們將在裁員期間為他們提供支持。”
當(dāng)?shù)貢r(shí)間3月23日,Stability AI宣布CEO埃馬德·莫斯塔克將離開(kāi)公司,以追求去中心化的AI,其職位空缺將由Wong和Laforte接替。
目前,Stability AI仍在尋找一位合適的CEO來(lái)填補(bǔ)最高領(lǐng)導(dǎo)層的職位。該公司表示,將繼續(xù)像往常一樣運(yùn)營(yíng),并仍在發(fā)布新產(chǎn)品。
鈦媒體App 4月18日消息,Alphabet旗下公司谷歌周三表示,正在進(jìn)行新一輪裁員和部分團(tuán)隊(duì)重組,并將部分職位轉(zhuǎn)移到海外。而本輪裁員從3月10日開(kāi)始,預(yù)計(jì)持續(xù)到8月。
據(jù)兩名在職員工透露,他們本周已經(jīng)收到裁員通知,受影響的團(tuán)隊(duì)包括谷歌的商業(yè)服務(wù)等團(tuán)隊(duì),“這次重組的規(guī)模相當(dāng)大”。
谷歌CFO露絲·波拉特 (Ruth Porat) 也在周三的一份備忘錄中表示,公司此舉是為了將更多資源用于支持AI投資。而重組將影響谷歌在美國(guó)以及其他國(guó)家的財(cái)務(wù)團(tuán)隊(duì),包括亞太地區(qū)以及歐洲、中東和非洲地區(qū)。
谷歌發(fā)言人稱(chēng),此次重組是正常業(yè)務(wù)流程的一部分,受影響的員工可以重新申請(qǐng)谷歌內(nèi)部的其他工作,一小部分職位將會(huì)轉(zhuǎn)移到谷歌正在投資的海外中心,公司還將提供離職補(bǔ)償和再就業(yè)服務(wù)。
“我們正以負(fù)責(zé)任的態(tài)度投資于公司最優(yōu)先的業(yè)務(wù)以及未來(lái)的重大機(jī)遇。為了以最佳狀態(tài)迎接這些機(jī)遇,在2023年下半年到2024年期間,我們的一些團(tuán)隊(duì)進(jìn)行了調(diào)整,以提高效率,更好地工作,消減層級(jí),并將資源調(diào)整到最優(yōu)先的產(chǎn)品事項(xiàng)上。”谷歌發(fā)言人稱(chēng)。
(本文首發(fā)鈦媒體App,作者|任穎文、林志佳,編輯|林志佳)
![]()
快報(bào)
根據(jù)《網(wǎng)絡(luò)安全法》實(shí)名制要求,請(qǐng)綁定手機(jī)號(hào)后發(fā)表評(píng)論