設計、網站、推廣
始于2004年
當前位置:首頁 > 行業動態

微軟推出大型語言模型分割推理助手LISA

發表日期:2023-8-10 作者來源:派谷網絡 瀏覽次數:

    想象一下你想喝咖啡,然后你命令機器人去泡咖啡。您的指令涉及“煮一杯咖啡”,但不包括“去廚房,找到咖啡機,然后打開它”等分步指令。目前的現有系統包含依賴人類指令來識別任何目標對象的模型。他們缺乏推理能力和主動理解用戶意圖的能力。

    為了解決這個問題,微軟研究院、香港大學和 SmartMore 的研究人員提出了大型語言模型驅動的分割推理助手——LISA(Large Language Instructed Segmentation Assistant)。

    項目地址:https://github.com/dvlab-research/lisa

    LISA是一種新穎的分割任務,旨在通過復雜而隱含的查詢文本生成分割掩碼。LISA 繼承了多模態大型語言模型(LLM)的語言生成能力,同時具備生成分割掩碼的能力。研究人員發現,LISA 在處理復雜推理、世界知識、解釋性回答和多對話方面表現出色。

    通過對模型進行微調,僅使用239個推理分割圖像指令對,性能得到了提升。研究人員還發現,LISA 在復雜推理任務上的性能優于傳統的推理分割方法。他們的未來工作將側重于推理能力的重要性,以建立一個評估基準并促進社區開發新技術。

    核心功能:

    - 根據復雜查詢文本生成分割掩碼

    - 進行復雜推理和世界知識的分割

    - 提供解釋性回答

    - 支持多輪對話交互
本文章系本站編輯轉載,轉載目的在于傳遞更多信息,并不代表本網贊同其觀點和對其真實性負責。如涉及作品內容、版權和其它問題,請在30日內與本站聯系,我們將在第一時間刪除內容!

相關網站設計案例

相關推薦新聞
網站建設解決方案
出租屋嫖妓大龄熟妇露脸在线播放_日本强伦姧人妻完视频正版_国产福利免费视频_最近最新高清中文字幕