您現(xiàn)在的位置是:下愚不移網(wǎng) > 探索
RockAI國內(nèi)首個「非Transformer架構大模型」Yan通過網(wǎng)信辦備案
下愚不移網(wǎng)2024-12-23 08:57:38【探索】4人已圍觀
簡介近日,上海巖芯數(shù)智人工智能科技有限公司(以下簡稱RockAI)的Yan架構大模型成功通過《生成式人工智能服務管理暫行辦法》備案,這是國內(nèi)首個非Transformer架構大模型通過備案。Yan模型簡介Y
近日,國內(nèi)上海巖芯數(shù)智人工智能科技有限公司(以下簡稱RockAI)的Yan架構大模型成功通過《生成式人工智能服務管理暫行辦法》備案,這是國內(nèi)首個非Transformer架構大模型通過備案。
Yan模型簡介
Yan架構大模型是架構國內(nèi)首個非Transformer架構、非Attention機制的大模大模型。傳統(tǒng)的通過Transformer架構和Attention機制對算力要求較高,而Yan架構大模型以MCSD、類腦激活機制為基礎原理,網(wǎng)信大幅提升模型性能與效率,以3B參數(shù)量可達到Llama3 8B的水平,還可在CPU上運行部署。MCSD架構具有快速訓練、辦備推理能力,國內(nèi)實現(xiàn)更高效的特征提取,類腦激活機制則模擬大腦中的神經(jīng)元激活模式,在計算時選擇性激活部分參數(shù),減少算力冗余,更高效地解決問題。Yan架構大模型在保證性能的架構同時,有效降低了對算力的依賴。這不僅有助于提高模型的大模運行效率,還能降低成本,為更多企業(yè)和開發(fā)者提供了觸手可及的AI解決方案。
備案通過的通過價值
因此,Yan架構大模型通過備案對于RockAI以及行業(yè)發(fā)展均具有重要價值。
· 為行業(yè)發(fā)展開辟新的網(wǎng)信技術路徑
作為國內(nèi)首個非Transformer架構、非Attention機制大模型完成網(wǎng)信辦備案,辦備為行業(yè)發(fā)展開辟了新的技術路徑。
· 證明非Transformer技術路線的國內(nèi)潛力
證明在算力受限的情況下,非Transformer架構技術路線的可行性和潛力,從而能夠鼓勵更多企業(yè)探索多元化的技術發(fā)展方向。
· 業(yè)內(nèi)唯一一家同時擁有雙機制模型
RockAI成為唯一一家非Attention機制大模型和Attention機制大模型均備案通過的架構廠商,彰顯了其在AI技術研發(fā)方面的創(chuàng)新能力。
Yan落地情況
技術突破之外,大模商業(yè)落地層面Yan架構大模型也取得了顯著成果。依托低算力要求、本地部署、無損運行等優(yōu)勢,RockAI已與機器人、無人機、手機、電腦等領域的設備廠商建立深度合作,并在上述領域落地多個項目。
RockAI在大模型領域以“群體智能”的理念構建通用人工智能技術,以“讓世界上每一臺設備擁有自己的智能”為使命,致力于打造群體智能單元大模型,實現(xiàn)AI普惠。Yan架構大模型的備案通過是RockAI踐行使命的重要里程碑,未來,我們期待Yan架構大模型在更多設備單元部署應用,讓群體智能引領走向通用人工智能,與合作伙伴一起,領先一步開拓更加廣闊的市場空間。
很贊哦!(28951)
相關文章
- 《心跳文學部》系列游戲玩家數(shù)量已超3000萬 官方發(fā)文感謝玩家
- 《戰(zhàn)錘40K:星際戰(zhàn)士2》5.0更新上線 增加DLSS3、FSR3
- [流言板]尼克斯記:蘭德爾直接回到更衣室,沒和任何老隊員交流
- 弗里克:萊萬上場時間很多需要休息 奧爾莫知道在有球時該怎么做
- TE 不想奪冠是吧 敢打17
- 郵報:有球迷認為,恩佐的慶祝動作可能和新女友有關
- 光榮特庫摩決定參展“2025臺北國際電玩展” ~首次公開主要參展作品~
- 失良機!拉菲尼亞單刀被馬洛卡門將羅曼撲出
- 諾伊爾17分鐘染紅,納格爾斯曼:事后人們總是會變得更聰明
- [流言板]只進三分!拉文半場10中3,三分3中3,得到11分2籃板2助攻