• <li id="00i08"><input id="00i08"></input></li>
  • <sup id="00i08"><tbody id="00i08"></tbody></sup>
    <abbr id="00i08"></abbr>
  • 新聞中心

    EEPW首頁 > 智能計算 > 設計應用 > 英特爾Gaudi 2D AI加速器為DeepSeek Janus Pro模型提供加速

    英特爾Gaudi 2D AI加速器為DeepSeek Janus Pro模型提供加速

    作者: 時間:2025-02-07 來源:EEPW 收藏

    近日,發布模型,其超強性能和高精度引起業界關注。? 現已針對該模型進行優化,這使得AI開發者能夠以更低成本、更高效率實現復雜任務的部署與優化,有效滿足行業應用對于推理算力的需求,為AI應用的落地和規模化發展提供強有力的支持。

    image.png

    作為一款創新性的 AIGC模型, Janus模型集成了多模態理解和生成功能。該模型首次采用統一的Transformer架構,突破了傳統AIGC模型依賴多路徑視覺編碼的限制,實現了理解與生成任務的一體化支持。在此基礎上,通過優化訓練策略和擴展模型規模,顯著提升了文生圖等功能的性能與穩定性,并提供了10億參數和70億參數兩個版本,在性能與精度上展現了較強的競爭力。

    1738932426867939.png

    統一的Transformer架構下,文生圖模型的吞吐量高低已經從依賴加速器的高算力向充分利用HBM內存高帶寬和大容量轉換。? 憑借 2.45TB/秒的高帶寬和 96GB HBM 大容量內存,為 Janus Pro 模型提供了強大的計算支持,使其在生圖批處理任務中,隨著批量大小(Batch Size)的增加,吞吐性能得到顯著提升,大幅縮短任務處理時間。

    與此同時,結合Optimum-Habana 框架的優化,英特爾? 顯著提升了文生圖任務的吞吐性能和推理效率,僅需約 10 秒即可生成16張高質量的圖片,性能表現卓越。而且,開發者僅需調整數行代碼,即可實現這一結果,極大降低了開發門檻和遷移成本,為 AI 應用的高效部署提供便利。

    1738932447820536.png

    圖片來源:利用英特爾Gaudi 2D 運行 Janus-Pro-7B模型生成

    此外,DeepSeek的蒸餾模型在至強和Gaudi平臺上也得到了支持,能夠為客戶創造更好的總體擁有成本(TCO),推動AI的普惠。

    一直以來,英特爾始終秉承開放的態度,并通過軟硬件相結合的方式推動AI應用落地。目前,英特爾豐富的AI產品組合,包括英特爾?至強?處理器、英特爾?酷睿? Ultra處理器和英特爾銳炫?顯卡等,已經針對業界超過500個開源AI模型提供支持,廣泛涵蓋DeepSeek、Llama 3.1和通義千問等。同時,英特爾深耕開放生態,不僅以開放生態系統軟件實現針對性優化,也通過打造企業AI開放平臺(OPEA)為這些模型提供支持。


    評論


    相關推薦

    技術專區

    關閉
    主站蜘蛛池模板: 常宁市| 黑龙江省| 儋州市| 乡宁县| 锦屏县| 同仁县| 太原市| 东辽县| 莲花县| 桂阳县| 拜城县| 双鸭山市| 河池市| 中山市| 大田县| 久治县| 东乡族自治县| 遂平县| 通辽市| 晋中市| 陇川县| 德化县| 炉霍县| 东阿县| 沾化县| 晴隆县| 萨迦县| 界首市| 北海市| 五指山市| 临沂市| 夏津县| 台北市| 正宁县| 四平市| 诏安县| 东兴市| 施甸县| 共和县| 革吉县| 九龙坡区|