AIRun · Blog
← 全部文章

AMD 收購 Taalas:把 AI 模型蝕刻進矽晶片,推理硬體換了一條路

2026-08-08 · J董 👁 106 人看過 🤖 100 AI 爬蟲命中
AI 新知AMD收購TaalasAI晶片蝕刻推理硬體矽晶片客製化AI晶片成本半導體供應鏈

AMD 於 2026 年 8 月 6 日收購 Taalas,把模型權重蝕刻進晶片,推理快一個數量級以上,但綁死單一模型。

本文寫於 2026 年 8 月 8 日,事件發生在兩天前的美股收盤後。以下每個數字都標了出處;來源沒講的地方,我直接說沒有資料,不自己補。

AMD 收購 Taalas 到底買到了什麼?

AMD 買下的是一家 2023 年成立、總部設在多倫多的 AI 晶片新創 Taalas,核心技術是把模型權重直接蝕刻進矽晶片,不從高頻寬記憶體讀取。交易在 2026 年 8 月 6 日美股收盤後宣布,AMD 沒有揭露金額;據 The Register 報導,這是一筆真正的收購,不屬於只買團隊的 acquihire。

先把兩個詞講白話。推理(inference)是模型訓練完成後、實際回答使用者問題的那個階段,也是每天在燒錢的階段。HBM(高頻寬記憶體)是貼在 GPU 旁邊、專門把模型權重高速餵給運算單元的昂貴記憶體,目前是 AI 伺服器成本與供給的主要瓶頸之一。

The Register 認為,這筆交易似乎被放在跟 Nvidia 2025 年 12 月那筆 200 億美元、與 Groq 的授權案同一個脈絡:讓 AI agent、程式助理這類高階推理服務跑得更快、更便宜。兩家巨頭在 8 個月內先後出手,指向同一個判斷——通用 GPU 堆疊推理的成本曲線壓不下去了。

AMD AI 資深副總裁 Vamsi Boppana 的官方說法是,AMD 要建的是全端 AI 平台,讓客戶對每一種 AI 工作負載都能選到合適的運算方案。翻成生意話:AMD 想同時握有通用 GPU 與專用推理晶片兩條產線。

「把模型刻進矽晶片」實際上是怎麼做的?

Taalas 的晶片分成兩個區域:mask-ROM recall fabric 存放蝕刻好的模型權重,SRAM recall fabric 存放 KV cache 與微調用的 adapter。權重不再放進 HBM,而是變成電路本身的一部分。

三個名詞的白話版:mask-ROM 是在晶片製造階段就用光罩把資料寫死的唯讀記憶體,出廠後改不了;KV cache 是模型生成過程中暫存的上下文計算結果,對話越長越吃記憶體;LoRA adapter 是不動原始權重、只外掛一小塊參數的輕量微調方式。

The Register 給這類晶片一個名字:MSIC(model-specific integrated circuit,模型專用積體電路)。半導體業熟悉的 ASIC 是把一種運算做死在電路上,MSIC 把一個模型做死在電路上,專用化又往前推了一層。

The Register 指出,Taalas 的做法跟通用 GPU、以及 Groq LPU/Cerebras 晶圓級加速器所走的 dataflow 架構都「radically different」,但沒有再往下說明差異的細節。可以確認的只有 Taalas 這一端:權重停止移動,因為它們已經是線路。

Taalas 對更細的架構極度保密,公開資訊僅止於此,其餘沒有對外說明。

每秒 16,960 個 token 是什麼水準的數字?

2026 年 2 月,Taalas 公布首顆測試晶片 HC1,採用台積電6 奈米製程,晶片面積做到光罩極限尺寸(reticle-sized,一次曝光能做出的最大單晶片)。初期基準測試跑 Meta 的 Llama 3.1 8B,達到每秒 16,960 個 token;以發表當時的比較基準,是 Nvidia GPU 的 48 倍、Cerebras 加速器的 8.5 倍(The Register 未指明對照的 GPU 具體型號)。

這個數字要打三折看:

  1. Llama 3.1 8B 在 2024 年中發表,以今天的標準是古董,參數量只有 80 億。
  2. HC1 是概念驗證晶片,The Register 明講它的用途就是證明路線可行。
  3. 對照組是當時的競品,半年過去,基準已經移動。

真正該盯的是第二代 HC2:目標把單顆晶片的參數容量拉到 200 億,Taalas 表示今年夏季推出,截稿時 Taalas 沒有證實是否已出貨。

單顆 200 億參數聽起來不多,但權重可以像 GPU 那樣用 pipeline parallelism(把模型切成幾段、每段放在不同晶片上依序接力)分散到多顆晶片。照這個算法,一個兆參數模型只需要約 50 顆加速器。

三條推理硬體路線,到底差在哪?

比較項通用 GPU(Nvidia/AMD Instinct)Dataflow 架構(Groq LPU、Cerebras)MSIC(Taalas)
模型權重存在哪HBM 高頻寬記憶體來源未指明蝕刻進矽晶片(mask-ROM)
換模型要付什麼代價重新載入權重來源未說明重做晶片,更換兩層金屬層
Llama 3.1 8B 對照效能(每秒 token)約 353Cerebras 約 1,99516,960
服務兆參數模型所需硬體來源未提供純 GPU 路線的數字來源未提供純 dataflow 路線的數字約 50 顆(以單顆 200 億參數計)
適合誰模型會換、訓練與推理都要跑追求低延遲、模型相對穩定模型長期鎖定、流量極大

註 1:HC1 的每秒 16,960 個 token 出自 The Register 報導。GPU 的約 353、Cerebras 的約 1,995 不是原文直接列出的數字,是以原文的 48 倍與 8.5 倍換算 16,960 得出,基準時點為 2026 年 2 月。

註 2:兆參數模型的硬體需求,來源只給了兩個數字——Taalas 路線約 50 顆加速器,以及 Nvidia 近期發表的 LPX 系統需要數十顆 GPU 加上至少 2,000 顆 Groq LPU。後者是 GPU 與 dataflow 晶片的混合部署,橫跨表中兩條路線,因此不歸進任何一欄;純 GPU 路線與純 dataflow 路線各自需要多少硬體,來源沒有交代。表中其他未列的細節同理,不做推測。

這條路線最大的代價是什麼?

代價很單純:晶片一旦部署,你就跟那個模型綁在一起了。任何超過 LoRA adapter 等級的變更,都得重做晶片(re-spin),既貴又慢。AI 熱潮進入第四年,新模型幾乎每個月一輪,要吃到蝕刻的紅利,客戶得對自己選的模型非常有把握。

Taalas 的說法是沒那麼慘:重做不必從零開始,只需要更換兩層金屬層,成本與時間都低得多。這是 Taalas 單方面的說法,第三方驗證數據缺席。

我的判斷放在這裡:先算模型壽命,再看速度數字。當一個模型在生產環境穩定服務超過一年、日均 token 用量以兆計,蝕刻的經濟效益才成立。現在滿足這個條件的,是少數超大規模雲端業者,以及幾家把單一模型當產品賣的公司。其他人買了只會提前吃到沉沒成本。

AMD 打算怎麼用這顆晶片打 Nvidia?

AMD 的計畫是把 Instinct 架構的 Helios 機櫃與 Taalas 技術晶片配對,形成分離式(disaggregated)架構:運算量重的 prompt 處理留在 GPU,token 生成交給 Taalas 加速器。等於把一次推理拆成兩段,各用最擅長的硬體跑。

The Register 另外推測一種 tick-tock 節奏:客戶先在 Instinct 上部署與驗證模型,確認滿意之後再轉到 Taalas 晶片。這段屬於媒體推測,AMD 沒有證實。

密度差距是這筆交易真正的賣點。同樣服務一個兆參數模型,Taalas 路線約需 50 顆加速器;AMD 的對手 Nvidia 近期發表的 LPX 系統,則需要數十顆 GPU 再搭配至少 2,000 顆 Groq LPU。空間與功耗的落差不是幾個百分點的事,而 AMD 手上正好有機櫃級運算平台與自家系統設計團隊,接得住這種部署密度。

這代表 GPU 要被取代了嗎?

不會。AMD 自己的規劃就回答了這個問題:GPU 留著跑 prompt 處理與模型驗證,Taalas 晶片接手 token 生成。訓練那一端完全沒被觸碰。

比較合理的預期是推理市場開始分層:模型更新快、流量不確定的工作留在 GPU;模型凍結、流量巨大且穩定的工作往專用晶片沉澱。Nvidia 與 Groq 的授權案、AMD 收購 Taalas,指向的是同一套分層邏輯,只是選了不同的技術實作。

對買方來說,這個分層會直接反映在價格表上——同一個能力,會因為它跑在哪一層硬體上而出現不同單價。

這對台灣半導體供應鏈意味著什麼?

HC1 用台積電 6 奈米製程投片,這是目前唯一被公開證實的台灣連結。往下推,三件事值得台廠盯緊。

第一,MSIC 是光罩生意,不會只投一次片。 權重寫在 mask-ROM 上,換模型要改兩層金屬層,等於每一次模型更新都會回頭產生新的光罩製作與 metal layer 重工需求。NRE(non-recurring engineering,晶片開案的一次性工程費用)在傳統邏輯裡攤提一次就結束,在 MSIC 模式下會變成週期性重複發生。對代工廠與光罩廠來說,這是一種新的訂單節奏:單筆金額未必高,但頻率變高、可預測性變好。

第二,光罩極限尺寸的大晶片,考的是良率控管。 HC1 是 reticle-sized 單晶片,這個尺寸下每片晶圓能切出的晶片數少、單顆缺陷造成的損失大,良率、封測、KGD(known good die,已知良品裸晶)篩選的難度都比一般晶片高一階。誰有能力把大晶片良率做穩、把 KGD 篩選做到可交付,誰才拿得到這類訂單。台廠在這一塊本來就有累積,這是實打實的優勢面。

第三,這是先進封裝需求的另一種型態。 50 顆晶片跑 pipeline parallelism,晶片之間的互連頻寬會直接決定整體吞吐,封裝與互連方案的重要性不會低於前段製程。AMD 具體採用哪種封裝方案,沒有對外說明。

前提要說清楚:以上推論成立的條件是 MSIC 真的走到量產。目前公開的只有一顆概念驗證晶片,加上一顆預告中的二代晶片。台廠現在該做的是把能力盤點好,而不是把產能押上去。

這對台灣中小企業意味著什麼?

短期內,這件事不會讓你的 AI 支出下降。蝕刻晶片的經濟學建立在單一模型、超大流量、長期不換三個條件上,中小企業一個都不滿足;客製推理晶片在可預見的未來,也不會是中小企業買得起、買得到的東西。

中期會發生的事比較實際:如果雲端業者把這類硬體用在自家推理服務上,你買到的 API 單價有機會往下走,而降幅最大的會是那些規格凍結、長期不動的模型端點。這反過來會改變一件事——把工作流固定在一個穩定模型上,會從「保守」變成「省錢」。

我們自己在跑內容產線與客服自動化時,長期守一條規則:模型當可替換零件設計,商業邏輯不寫死在特定模型的輸出行為上。這條規則過去是為了避免被單一供應商綁架,接下來會多一個好處——當不同模型端點的價格開始分層,你可以隨時把不同工作丟到最划算的那一層。

下面是我認為現在該做、與現在不該做的判斷:

你的情境現在該做現在不該做
在用雲端 LLM API把重複性高、規格穩定的工作流固定在成熟模型上,等單價分層的紅利每出一個新模型就全面換一輪,整合成本自己吃
在評估自建推理硬體先算「同一個模型你會用幾年」,答案低於兩年就繼續租雲端因為看到 48 倍就去問客製晶片報價
身在半導體供應鏈盤點光罩重工、大晶片良率、KGD 篩選這三項能力缺口現在就把產能押在單一客戶的 MSIC 訂單上
在做 AI 產品把模型當可替換元件設計,介面先抽象化把商業邏輯寫死在特定模型的輸出行為上

這種盤點我們每個月都在做一輪,方法與流程整理在 AIRUN 的 AEO 專頁

所以,現在該押什麼?

AMD 收購 Taalas 目前停在訊號等級,還沒有可以下單的產品。真正要押的變數是模型壽命:你的核心工作流會在同一個模型上待多久。這個答案決定你在雲端 API、自建 GPU、專用晶片三種成本結構之間怎麼站位。

對台廠,我的建議是把大晶片良率、KGD 篩選、光罩與金屬層重工這三項能力先備好,訂單來的時候才有話講;產能配置先不動。

對中小企業老闆,今年不必為這則新聞改任何預算,但要開始把「模型是可替換零件」寫進系統設計原則。等到推理單價真的分層那天,能立刻切換的人才吃得到。

接下來六個月,兩個指標值得追:HC2 是否如期出貨,以及 AMD 何時真的把 Taalas 晶片放進 Helios 機櫃。這兩件事一旦落地,上面所有推論就從假設變成排程。

常見問題

Q:AMD 收購 Taalas 花了多少錢?

AMD 沒有揭露交易金額。可確認的是這是一筆真正的收購,而非只吸收團隊的 acquihire。交易於 2026 年 8 月 6 日美股收盤後宣布,Taalas 成立於 2023 年、總部在多倫多。可對照的是 Nvidia 在 2025 年 12 月與 Groq 簽下的 200 億美元授權案,兩筆交易的目標相近:把高階推理服務做得更快、更便宜。

Q:把模型蝕刻進晶片,之後要換模型怎麼辦?

換模型必須重做晶片。任何超過 LoRA adapter 等級的變更都需要 re-spin,既花錢又花時間。Taalas 的說法是重做不必從零開始,只要更換兩層金屬層,成本與時間都低得多;這個說法目前只有 Taalas 單方面提出,第三方驗證數據缺席。實務上這代表買家必須對選定的模型有高度把握,否則硬體會提前變成沉沒成本。

Q:每秒 16,960 個 token 這個數字可信嗎?

數字出自 Taalas 公布的 HC1 初期基準測試,跑的是 Meta Llama 3.1 8B,晶片由台積電 6 奈米製程生產。要注意三個前提:Llama 3.1 8B 是 2024 年中發表的 80 億參數小模型;HC1 是概念驗證晶片而非量產品;48 倍與 8.5 倍的對照基準來自 2026 年 2 月發表當時。拿它直接預估今天大模型的實際效能會嚴重失真。

Q:台灣半導體供應鏈會因為這件事受惠嗎?

有機會,但目前只是機會。唯一被證實的連結是 HC1 採用台積電 6 奈米製程生產。若 MSIC 路線走到量產,光罩製作與金屬層重工會變成重複性訂單,光罩極限尺寸大晶片的良率控管與 KGD 篩選能力會成為接單門檻,晶片間互連的先進封裝需求也會跟著上升。前提是量產真的發生,現在公開的只有一顆測試晶片與一顆預告中的二代晶片。

Q:中小企業現在該為這件事調整 AI 預算嗎?

不需要。蝕刻晶片的成本結構建立在單一模型、超大流量、長期不換三個條件上,中小企業一個都不符合,短期內��買不到這類硬體。該做的是把系統設計成模型可替換:商業邏輯不綁死在特定模型的輸出行為上。等到推理服務價格因為專用硬體開始分層,能立刻切換的公司才吃得到降價紅利。

Q:AMD 會用 Taalas 晶片取代自家 GPU 嗎?

不會。AMD 的規劃是把 Instinct 架構的 Helios 機櫃與 Taalas 技術晶片配對,形成分離式架構:運算量重的 prompt 處理留在 GPU,token 生成交給 Taalas 加速器。The Register 另外推測 AMD 可能採 tick-tock 節奏,客戶先在 Instinct 上驗證模型再轉到 Taalas,這部分屬媒體推測,AMD 沒有證實。訓練端完全不受影響。


AIRUN 對抗式創業體檢 AgentFlow Solutions(双云行銷試運行)