2026年 / 6 月 13日 / 星期六
京海傳媒 | Jinghai Media
  • 藝術人文
  • 兩岸國際
  • 交通產經
  • 社會生活
  • 休閒娛樂
  • 專題區
  • 影音區
沒有結果
查看所有結果
  • 藝術人文
  • 兩岸國際
  • 交通產經
  • 社會生活
  • 休閒娛樂
  • 專題區
  • 影音區
沒有結果
查看所有結果
京海傳媒 | Jinghai Media
沒有結果
查看所有結果
  • 藝術人文
  • 兩岸國際
  • 交通產經
  • 社會生活
  • 休閒娛樂
  • 專題區
  • 影音區
Home 合作媒體

Skymizer Taiwan Inc. 發表突破性架構 單卡實現超大型 LLM 推論

2026-04-23
發布在 合作媒體, 美通社
A A
302
瀏覽

提供業界領先的效能功耗比,單張 PCIe 介面卡即可執行 700B 參數模型——無需 GPU 叢集,亦無須密集散熱

新竹2026年4月23日 /美通社/ — 於 COMPUTEX 2026 展前,AI 推論解決方案先驅 Skymizer Taiwan Inc.( 臺灣發展軟體科技股份有限公司)今日預先揭露其在地端 AI 部署的重大突破——HTX301 推論晶片,內建於 COMPUTEX 2025 首次發表的軟硬體協同設計平台 HyperThought™。HTX301 為 HyperThought IP 的首款參考晶片,該 IP 為 AI 推論定義了長期的架構願景。此首版矽晶片在大幅簡化超大型模型推論所需基礎設施的同時,亦帶來卓越的效能功耗比。

打破 GPU 對超大型模型推論的壟斷

一直以來,在地端部署超大型模型皆需仰賴龐大的 GPU 叢集、NVLink/NVSwitch 等高速互連技術,以及密集的散熱系統——導致成本高昂且維運複雜。

Skymizer 於業界首次將此願景化為可能。

僅需一張 PCIe 介面卡——搭載 六顆 HTX301 晶片與 384 GB 記憶體——企業即可於本地執行 700B 參數模型推論,每卡功耗僅約 240W。

HyperThought 針對 不同尺寸與形式的彈性擴展 而設計——可封裝為 SoC 或介面卡,自 邊緣到迷你資料中心 皆可部署。單卡可由 1 顆晶片擴展至 6 顆晶片,記憶體容量介於 32 GB 至 384 GB,支援 4B 至 700B 參數 的模型——讓企業依實際工作負載需求,精準規劃部署規模,避免過度配置。

「推論已成為 AI 的主要工作負載,基礎設施也必須反映此一現實。」

「仰賴超大規模 GPU 叢集執行超大型 LLM 的時代已經結束。HyperThought 讓 AI 從僅屬於雲端巨擘的複雜工程,轉變為每一家企業皆可擁有的單卡級簡潔方案。」

—— William Wei,Skymizer 行銷長

消除企業 AI 的隱藏稅負

其結果是:企業在享有資料隱私、低延遲與完整營運掌控權的同時,亦可擺脫 GPU 叢集所帶來的基礎設施負擔。

地端推論亦消除了「按 token 計費」所帶來的支出焦慮——此焦慮已成為企業導入 AI 的無形稅負。雲端推論迫使團隊必須精打細算每筆查詢,並限縮 Agent 的使用。HyperThought 則徹底解除此限制:一旦部署完成,企業便可在固定的基礎設施成本下,執行無上限的推論。

HyperThought 為企業既有的 GPU 基礎設施提供互補,而非取代。透過將解碼(decode)密集的推論工作自 GPU 卸載,企業可提升整體叢集的利用率與電力效率。

驅動企業跨領域的 Agentic AI 工作流程

HyperThought 與 HTX301 專為 agentic AI 工作負載而設計,此類工作負載正快速成為企業自動化的核心基石。搭配 OpenClaw 等 agent harness 框架,HTX301 能提供這些系統所需的推論吞吐量,並同時具備完整的資料自主權與可預期的延遲表現。

此一架構可驅動跨產業與跨領域的 agentic 工作流程與自動化,包括:

金融服務(法遵、詐欺偵測、投資組合推理);醫療與生命科學(臨床決策輔助、藥物交互作用分析);製造業(預測性維護、品質檢測);法律與專業服務(合約審閱、機密知識檢索);政府與國防(主權 AI、機密分析);零售(客服自動化、庫存推理);軟體工程(私有 code copilot、自主 CI/CD);以及 半導體與 IC 設計(地端 RTL copilot、驗證 agent、針對自有 IP 的設計知識檢索)。

焦點應用:地端 AI Coding。AI 輔助編碼已成為現代軟體團隊的基本配備,且在「原始碼即公司命脈」的領域中,需求增長最為快速。IC 設計公司無法將自有 RTL 上傳至雲端編碼助手,否則將面臨價值數十億美元矽智財外洩的風險;軟體公司在面對機密程式碼與客戶資料時,亦有相同的考量。HTX301 能提供足以支撐完全地端執行私有 code copilot、RTL 生成器與驗證 agent 的吞吐量——既消除雲端外洩風險,又完整保留 AI 輔助工程所帶來的生產力效益。

除了 agentic 工作負載之外,單顆 HTX301 晶片亦支援裝置端推論——涵蓋語音轉寫、翻譯、視覺理解與多模態 AI——適用於邊緣伺服器、AI 工作站、智慧 NAS 系統及各類智能端點。

由 LISA™ 與 HyperThought™ 驅動

HyperThought 由 LISA™(Language Instruction Set Architecture,語言指令集架構) 所驅動,此為 Skymizer 自主研發、專為 Transformer 推論最佳化的語言中心指令集架構。LISA 在效能、功耗效率與擴展性方面,全面支援自邊緣裝置至企業叢集的各類部署。

地端部署的 HTX301 介面卡,與 HyperThought 裝置端 LPU 共用相同的 LISA 架構基礎——一套 ISA、一套部署流程,自邊緣至資料中心,一以貫之。

Prefill/Decode 分離:HyperThought P/D 策略

LLM 推論包含兩個本質上截然不同的階段:prefill(處理輸入提示,屬 compute-bound)與 decode(逐一生成 token,屬 memory-bandwidth-bound)。以 GPU 為核心的基礎設施強迫兩者共用同一塊矽晶片,在任一時刻總會造成運算資源或頻寬資源的閒置。HyperThought 自架構設計之初,即將此兩階段加以分離。

硬體堆疊——Decode 優先的專屬矽晶片。HTX301 為 decode 階段量身打造——此階段是主導真實世界推論延遲、對記憶體頻寬極度敏感的 token 生成過程。既有 GPU 處理 compute 密集的 prefill;HTX301 介面卡則負責 decode。每一塊矽晶片皆對應其最適合的階段。

軟體堆疊——統一的 P/D 調度。Skymizer 的統一軟體堆疊——涵蓋 KV-cache 管理員、具階段感知能力的排程器,以及動態配置引擎——可協同調度 prefill 與 decode 資源池,於節點之間傳遞 KV-cache 狀態,並隨工作負載變動即時重新平衡 P:D 比例。

「專為 decode 打造的硬體,搭配能協調每一份推論工作負載的智慧軟體堆疊——這才是在規模化場景下分離 P/D 的真正做法。」

—— Luba Tang, Skymizer 技術長

定義 AI 部署的下一個世代

隨著模型規模自數十億參數邁向兆級參數,業界對暴力式 GPU 擴展的依賴正面臨瓶頸。Skymizer 的存在,正是為了超越此一瓶頸——結合深厚的編譯器專業與針對 decode 最佳化的矽晶片,定義 AI 基礎設施的下一個世代。

有關 HyperThought 延伸平台的完整藍圖,將於 Skymizer 在 COMPUTEX 2026 的記者會中公布。

申請 HTX301 早期存取權: skymizer.ai/press

關於 Skymizer Taiwan Inc.

Skymizer (臺灣發展軟體科技股份有限公司)成立於 2013 年,是一家專注於 AI 推論的公司。其旗艦平台 HyperThought 結合編譯器驅動的軟體堆疊與針對 Transformer 最佳化的硬體,可於裝置端、邊緣端與地端部署環境中,提供高效能的推論服務。

前一篇文章

當 AI 成為「用戶」:OKX 全球商务官 Lennix 談 Onchain OS 與下一代鏈上交易形態

下一篇文章

台南德元埤荷蘭地景工程今動土

相關的文章

助市民前進科技廊帶 勞工局偕南科徵才促在地就業
新聞區

助市民前進科技廊帶 勞工局偕南科徵才促在地就業

2026-06-13
樹德科大115級畢典登場 畢業生揚帆啟航迎向新人生
新聞區

樹德科大115級畢典登場 畢業生揚帆啟航迎向新人生

2026-06-13
正修科大115級畢業典禮系列活動登場  逾千名畢業生揚帆啟航開創人生新篇章
新聞區

正修科大115級畢業典禮系列活動登場 逾千名畢業生揚帆啟航開創人生新篇章

2026-06-13
下一篇文章
台南德元埤荷蘭地景工程今動土

台南德元埤荷蘭地景工程今動土

最新新聞

助市民前進科技廊帶 勞工局偕南科徵才促在地就業

助市民前進科技廊帶 勞工局偕南科徵才促在地就業

2026-06-13
樹德科大115級畢典登場 畢業生揚帆啟航迎向新人生

樹德科大115級畢典登場 畢業生揚帆啟航迎向新人生

2026-06-13
正修科大115級畢業典禮系列活動登場  逾千名畢業生揚帆啟航開創人生新篇章

正修科大115級畢業典禮系列活動登場 逾千名畢業生揚帆啟航開創人生新篇章

2026-06-13
球后戴資穎、陳傑、朱木炎齊聚高雄   小小英雄運動會打造「含金量最高」幼兒運動盛會

球后戴資穎、陳傑、朱木炎齊聚高雄 小小英雄運動會打造「含金量最高」幼兒運動盛會

2026-06-13
臺北榮總新竹分院與蘇澳暨員山分院交流           聚焦病歷電子化與醫療精進

臺北榮總新竹分院與蘇澳暨員山分院交流 聚焦病歷電子化與醫療精進

2026-06-13

最多瀏覽

苗栗明德水庫南岸環湖步道建置工程開工        完工可騎乘至黃屋伙屋及海棠島

苗栗明德水庫南岸環湖步道建置工程開工 完工可騎乘至黃屋伙屋及海棠島

2025-03-06

少見脊椎屈曲牽張性骨折 微創手術助移工康復

2025-03-06

日本靜岡三島西扶輪社6學生 體驗苗栗火旁龍等特色文化

2025-03-26

「如果枇杷能演奏」古代就有的笑話 – 當年補校學生曾經發生過

2025-03-23
Copyright © 京海傳媒.
All rights reserved.
本站總訪問量:8,244,591

關於京海

  • 關於我們
  • 使用者條款
  • 隱私權政策
  • 合作媒體
  • 聯絡我們
  • 關於我們
  • 使用者條款
  • 隱私權政策
  • 合作媒體
  • 聯絡我們

聯絡我們

美通社

東陽光集團於新加坡濱海灣金沙開設首家海外旗艦店

艾美酒店首秀三峽門戶,宜昌三峽艾美酒店優雅啟幕

GSMA Intelligence 發現營運商可能是 2026 年世界盃的真正遊戲規則變革者

DXC 與 Anthropic 宣佈建立多年全球聯盟,將人工智能引入任務關鍵型企業系統

更多新聞>>

歡迎回來!

在下方登入您的帳戶

忘記密碼?

找回您的密碼

請輸入您的使用者名稱或電子郵件地址以重設您的密碼。

登入

新增播放列表

2026年 / 6 月 13日 / 星期六
  • 藝術人文
  • 兩岸國際
  • 交通產經
  • 社會生活
  • 休閒娛樂
  • 專題區
  • 影音區
沒有結果
查看所有結果

Copyright © 2024 京海傳媒. All rights reserved.

本網站使用 cookies。繼續使用本網站即表示您同意使用 cookie。造訪我們的隱私權政策。