首頁 > 新聞 > 智能 > 正文

Meta 發(fā)布全新 Megabyte 模型,解決算力損耗硬傷

2023-05-30 16:19:33來源:ZAKER科技  


(資料圖片僅供參考)

品玩 5 月 30 日訊,據(jù)新智元報(bào)道, Meta 近日發(fā)布了一種全新的模型架構(gòu),可以有效減少算力損耗。

據(jù)報(bào)道,Meta 的這個(gè)模型架構(gòu)被稱為 Megabyte,是一種多尺度解碼器架構(gòu),可以對(duì)超過一百萬字節(jié)的序列進(jìn)行端到端可微分建模。Megabyte 能跨多種格式生成超過 100 萬個(gè) token,并超越 GPT-4 等模型背后的現(xiàn)有 Transformer 架構(gòu)的功能。

關(guān)鍵詞:

責(zé)任編輯:hnmd003

相關(guān)閱讀

相關(guān)閱讀

精彩推送

推薦閱讀