“紫東太初”全模態大模型持續探索通用人工智能新路徑 速看料
5月6日,在華為昇騰AI開發者峰會上,中國科學院自動化研究所“紫東太初”大模型研究中心常務副主任、武漢人工智能研究院院長王金橋研究員介紹,基于華為全棧國產化軟硬件平臺昇騰AI與開源AI框架昇思MindSpore,中國科學院自動化研究所和武漢人工智能研究院正在聯合打造“紫東太初”2.0全模態大模型,可實現文本、圖片、語音、視頻、3D點云、傳感信號等不同模態的統一表征和學習,助推通用人工智能時代加速到來。
(資料圖)
自動化所供圖
超前布局,堅持以多模態技術探索通用人工智能
從嬰幼兒開始,人類的認知學習就是建立在對現實世界圖像、聲音和文字等多種模態信息基礎之上。突破模態限制,實現圖、文、音等更多模態的通用大模型是人工智能融入現實世界的必然。
2019年開始,自動化所在語音、文本、圖像等單模態大模型研究和應用基礎上,瞄準多模態大模型領域開始聯合攻關,并于2021年7月正式發布了全球首個千億參數多模態大模型“紫東太初”,以多模態技術探索通用人工智能發展道路。
區別于當前以文本為主的大部分語言大模型,“紫東太初”大模型在研發之初即堅持以多模態技術為核心,利用圖-音-文等更多類型數據進行跨模態的統一表征和學習,實現了圖像、文本、語音三模態數據間的“統一表示”與“相互生成”,使人工智能大模型的理解和生成能力更加接近人類,為貫通多模態人工智能行業應用提供了創新基礎,向通用人工智能邁出關鍵一步。
從感知到認知,面向數字物聯世界再上新臺階
世界已經進入了數字物聯時代。在“紫東太初”1.0應用推廣過程中,除了需要處理海量語音、圖像和文本等互聯網信息外,更需要處理多種傳感器、3D點云及視頻等物聯網海量數據,才能滿足現實生產力的提高。針對數字物聯時代的新需求與新趨勢,中科院自動化研究所研究探索全模態大模型體系架構和基礎算法,持續推動“紫東太初”技術和應用發展。
在文本、圖片、音頻、視頻的基礎上,“紫東太初”2.0可融入3D、視頻、傳感信號等更多模態數據,并優化語音、視頻和文本的融合認知以及常識計算等功能,進一步突破感知、認知和決策的交互屏障,讓人工智能從感知世界進化為認知世界,延伸出更加強大的通用能力。
打造全棧國產化通用人工智能底座
全棧國產化通用人工智能平臺的實踐對我國實現AI領域科技自立自強、占領科技創新高地具有重要的戰略意義。“紫東太初”大模型從立項開始,就以中科院自動化所自研算法為核心,以全棧國產化基礎軟硬件昇騰AI平臺為基礎,依托武漢人工智能計算中心算力支持,真正意義上實現了國產人工智能大模型的可控、可信、可用,有力地促進了國產全棧式基礎軟硬件的發展。
目前,由自動化牽頭打造的多模態人工智能產業聯合體已陸續吸納產學研各界近70家成員單位。圍繞多模態大模型技術及應用,“紫東太初”大模型已在手語教學、法律咨詢、交通出行、廣電、醫療機器人、醫學影像判讀等數十個行業場景領域展現出廣闊的落地潛力。在華為昇騰AI開發者峰會上,“紫東太初”大模型開源了基于昇騰與昇思的3.8B圖像-文本-語音多模態模型并開放紫東太初大模型服務平臺。
從互聯網的圖音文多模態走向物聯網的全模態,以打造國產化通用人工智能底座為目標,自動化所將持續推進“紫東太初”大模型基礎理論、關鍵技術和應用生態的全鏈條自主創新,著力以自主可控基礎軟硬件建立開源開放的多模態產業生態,不懈探索通用人工智能創新路徑。
關鍵詞:
您可能也感興趣:
為您推薦
機票里面包含保險嗎?飛機保險有必要買嗎?
遼寧擴大緩繳社保費政策實施范圍 補繳期間免收滯納金
近十年財險業務快速發展 財產保險業風險保障水平不提升
排行
最近更新
- “紫東太初”全模態大模型持續探索通用人工智能新路徑 速看料
- 日照茶謀求升級,科創園呼之欲出 熱消息
- 創新分離技術?助力傳統煉化行業轉型升級
- 守護群眾錢袋子——婁底開展《反電信網絡詐騙法》集中宣傳活動
- 聶小雨上海國際車展看新車,電混雙擎車你愛了嗎? 每日看點
- 廢氣處理設備節能新技術 村田電子實踐“雙碳”發展理念
- 勤哲Excel服務器無代碼實現智慧食堂管理系統
- 奇人李義文:研制“植物疫苗”能把“死樹”救活
- 蕨菜可以吃嗎?
- 債掌柜-債權信息發布法律平臺
- 女人喝白酒對身體好嗎
- 蕨菜怎么做才好吃,熱水焯蕨菜才可以?_天天報道
- 蕨菜可以生吃嗎?
- 蕨菜可以吃嗎?-全球今頭條
- 臘肉怎么炒才好吃,你喜歡和什么炒著吃?
- 全球微頭條丨食品添加劑都是“洪水猛獸”?小麥粉添加劑你知...
- 本周兩市有10只新股IPO
- 百融云創攜手7000余家銀行譜寫金融數智化轉型新篇章
- 直擊消費“痛點”,天貓車后服務體驗全面升級引領線上養車蝶變
- 廣州東華職業學院 | 廣州市人力資源市場服務中心蒞臨我校指導交流
- 最資訊丨國旅聯合:公司投資的貴溪旅游項目白鶴湖嘻嘻哩景區...
- 第二屆中國人力資源服務外包國際論壇獎項評選活動正式啟動
- 建行邯鄲光華支行優質服務暖心客戶-世界快播報
- 農行河北省分行首屆“興農節”惠三夏新河站開幕 環球熱議
- 廣平聯社:提升服務助力支農支小
- 天天觀天下!中國電信粵港澳大灣區一體化數據中心(一期)開工
- 天舟六號計劃近日擇機發射?船箭組合體轉運至發射區
- 保護人民健康?國家中醫藥管理局規范中醫養生保健服務
- 唐山農商銀行豐南支行把金融服務送到家門口_環球關注
- 舒蘭農商銀行:推動整村授信“貸”動鄉村振興_環球精選