IT之家 2 月 10 日消息,據(jù)科創(chuàng)板日報報道,,華為計(jì)算產(chǎn)品線相關(guān)負(fù)責(zé)人就“華為在大模型的布局”回應(yīng)稱,,公司 2020 年在大模型開始有布局,,2021 年基于昇騰 AI 與鵬城實(shí)驗(yàn)室聯(lián)合發(fā)布了鵬程盤古大模型,,是業(yè)界首個千億級生成和理解中文 NLP 大模型。
在 2021 年 4 月的華為開發(fā)者大會 2021(Cloud)上,,華為云便發(fā)布了盤古系列超大規(guī)模預(yù)訓(xùn)練模型,,包括 30 億參數(shù)的視覺(CV)預(yù)訓(xùn)練模型,以及與循環(huán)智能,、鵬城實(shí)驗(yàn)室聯(lián)合開發(fā)的千億參數(shù),、40TB 訓(xùn)練數(shù)據(jù)的中文語言(NLP)預(yù)訓(xùn)練模型。
華為云人工智能領(lǐng)域首席科學(xué)家,、IEEE Fellow 田奇彼時表示:“預(yù)訓(xùn)練大模型是解決 AI 應(yīng)用開發(fā)定制化和碎片化的重要方法,。華為云盤古大模型可以實(shí)現(xiàn)一個 AI 大模型在眾多場景通用、泛化和規(guī)?;瘡?fù)制,,減少對數(shù)據(jù)標(biāo)注的依賴,并使用 ModelArts 平臺,,讓 AI 開發(fā)由作坊式轉(zhuǎn)變?yōu)楣I(yè)化開發(fā)的新模式,。”
根據(jù)此前信息,,盤古 NLP 大模型是當(dāng)時全球最大的千億參數(shù)中文語言預(yù)訓(xùn)練模型,,由華為云、循環(huán)智能和鵬城實(shí)驗(yàn)室聯(lián)合開發(fā),,預(yù)訓(xùn)練階段學(xué)習(xí)了 40TB 中文文本數(shù)據(jù),并通過行業(yè)數(shù)據(jù)的樣本調(diào)優(yōu)提升模型在場景中的應(yīng)用性能,。
▲ 華為開發(fā)者大會 2021(Cloud)發(fā)布的盤古大模型
報道稱,,華為表示,在大模型產(chǎn)業(yè)化方面已發(fā)起了智能遙感開源生態(tài)聯(lián)合體、多模態(tài)人工智能產(chǎn)業(yè)聯(lián)合體,,智能流體力學(xué)產(chǎn)業(yè)聯(lián)合體等,,將以聯(lián)合體的模式把科研院所、產(chǎn)業(yè)廠商等結(jié)合起來,,更好地讓大模型產(chǎn)業(yè)形成正向的閉環(huán)回路,。
IT之家了解到,人工智能研究實(shí)驗(yàn)室 OpenAI 于 2022 年 11 月 30 日發(fā)布了全新聊天機(jī)器人模型 ChatGPT,。這是一款人工智能技術(shù)驅(qū)動的自然語言處理工具,,旨在根據(jù)用戶的提示模仿類似人類的對話。
2 月 7 日,,百度官方還確認(rèn),,其類似 ChatGPT 的項(xiàng)目名字確定為文心一言,英文名 ERNIE Bot,,三月份完成內(nèi)測,,面向公眾開放。目前該產(chǎn)品在做上線前的沖刺準(zhǔn)備工作,。百度方面表示,,ChatGPT 相關(guān)技術(shù),百度都有,。百度在人工智能四層架構(gòu)中,,有全棧布局。包括底層的芯片,、深度學(xué)習(xí)框架,、大模型以及最上層的搜索等應(yīng)用。文心一言,,位于模型層,。
更多信息可以來這里獲取==>>電子技術(shù)應(yīng)用-AET<<