1. <tbody id="fytxk"><noscript id="fytxk"></noscript></tbody>

      <tbody id="fytxk"><noscript id="fytxk"></noscript></tbody>

      可理解三維場景 處理多模態關聯應用需求……“紫東太初”全模態大模型發布

      時間:2023-06-16 22:09來源:大西北網 作者:新華社 點擊: 載入中...
        新華社北京6月16日電(記者宋晨、張泉)在三維場景里實現精準定位,通過圖像與聲音的結合完成場景分析……中科院自動化研究所發布“紫東太初”全模態大模型,并首次對外實時展示了該模型在音樂理解與生成、三維場景導航、信號理解、多模態對話等方面的全新功能。
       
        這是記者6月16日在“人工智能框架生態峰會2023”上了解到的信息。
       
       
        “紫東太初”全模態大模型發布現場。(中科院自動化所供圖)
       
        中科院自動化研究所所長徐波介紹,“紫東太初”全模態大模型是在多模態大模型“紫東太初”1.0基礎上升級打造的2.0版本,在語音、圖像和文本三模態的基礎上,加入視頻、信號、3D點云等模態數據,研究突破了認知增強的多模態關聯等關鍵技術,具備全模態理解能力、生成能力和關聯能力。
       
        “紫東太初”2.0可以理解三維場景、信號等數字物聯時代的重要信息,完成了音樂、圖片和視頻等數據之間的跨模態對齊,能夠處理音樂視頻分析、三維導航等多模態關聯應用需求,并可實現音樂、視頻等多模態內容理解和生成。
       
        “從1.0到2.0,‘紫東太初’大模型打通了感知、認知乃至決策的交互屏障,使人工智能進一步感知世界、認知世界,從而延伸出更加強大的通用能力。”徐波說。
       
        目前,“紫東太初”大模型在神經外科手術導航、短視頻內容審核、法律咨詢、醫療多模態鑒別診斷、交通違規圖像研讀等領域展現出一定的產業應用前景。
       
        比如,在醫療場景,“紫東太初”大模型部署于神經外科機器人MicroNeuro,可實現在術中實時融合視覺、觸覺等多模態信息,協助醫生對手術場景進行實時推理判斷。





       
      (責任編輯:陳冬梅)
      >相關新聞
    2. 國家計算機病毒應急處理中心監測發現15款違法移動應用
    3. 戴口罩也能識別用量子計算處理人像獲指數級加速
    4. 我國明確對非居民廚余垃圾處理按“產生者付費”原則計量收費
    5. 舊手機如何處理方能避免信息泄露?
    6. 市場監管總局督促指導地方依法處理特斯拉車主維權事件
    7. 5月起試點可跨省異地處理非現場交通違法行為
    8. 頂一下
      (0)
      0%
      踩一下
      (0)
      0%
      ------分隔線----------------------------
      推薦內容
      ?
      網站簡介??|? 保護隱私權??|? 免責條款??|? 廣告服務??|? About Big northwest network??|? 聯系我們??|? 版權聲明
      隴ICP備13000024號-1??Powered by 大西北網絡 版權所有??建議使用IE8.0以上版本瀏覽器瀏覽
      Copyright???2010-2014?Dxbei Corporation. All Rights Reserved
      偷拍与自偷拍亚洲精品_340p欧美日本超大胆艺术_囯产目拍亚洲精品_日韩一区二区在线

      1. <tbody id="fytxk"><noscript id="fytxk"></noscript></tbody>

        <tbody id="fytxk"><noscript id="fytxk"></noscript></tbody>