基礎模型與大語言模型(LLM)商業案例目前在科技諮詢面試中佔比 12-15%。根據我們對近期案例模式的分析,這類問題考察你能否將構建大語言模型的經濟賬算清楚——把訓練成本、推理效率和戰略定位這幾個維度講明白,給出站得住腳的建議。
基礎模型案例實際在考什麼
基礎模型案例不是技術深度拆解。面試官不會問你 Transformer 架構或反向傳播演算法。他們考察三個能力:
成本結構理解:你能否拆解訓練和服務基礎模型的單位經濟學?前期資本(訓練)和持續運營成本(推理)的分配決定了整個商業模式。
戰略判斷:這家公司應該自建基礎模型、微調現有模型,還是直接用 API?答案取決於規模、差異化需求和時間視野——而不是技術野心。
風險意識:你是否理解那些讓大多數基礎模型專案折戟的隱性成本?資料準備、模型漂移、人才保留和持續微調,往往超過初始訓練預算。
基礎模型經濟學框架
當你拿到一個基礎模型案例時,圍繞四個成本維度來構建分析。這個框架適用於創業公司考慮模型開發,或企業評估自建與購買。
flowchart TD
A[基礎模型經濟學] --> B[訓練成本]
A --> C[推理成本]
A --> D[資料成本]
A --> E[維護成本]
B --> B1[計算:GPU 小時數]
B --> B2[基礎設施]
B --> B3[人才:機器學習工程師]
C --> C1[每 token 成本]
C --> C2[延遲要求]
C --> C3[規模:請求/天]
D --> D1[資料獲取]
D --> D2[清洗與標註]
D --> D3[儲存與治理]
E --> E1[微調週期]
E --> E2[模型漂移監控]
E --> E3[對齊與安全]
style A fill:#1e3a5f,color:#fff
style B fill:#2563eb,color:#fff
style C fill:#2563eb,color:#fff
style D fill:#2563eb,color:#fff
style E fill:#2563eb,color:#fff
訓練成本:前期投入
訓練基礎模型是資本密集型工作。根據公開披露的資料和我們的案例分析,一個 GPT-3 規模的模型(1750 億引數)僅計算成本就要 400-1200 萬美元。更大的模型成本超線性增長——引數翻倍,訓練成本通常不止翻倍。
關鍵組成部分:
- 計算:GPU 叢集執行數週或數月。1750 億引數模型需要大約 3.14 × 10²³ 次浮點運算。按當前雲服務價格,純計算成本在 400-800 萬美元。
- 基礎設施:儲存、網路、編排。在計算成本基礎上加 20-30%。
- 人才:機器學習工程師、研究科學家、基礎設施專家。一個基礎模型專案需要 8-15 名全職工程師,持續 6-12 個月。按全成本 20-30 萬美元/人計算,人力成本在 160-450 萬美元。
- 失敗實驗:並非每次訓練都能成功。預留 2-3 次主要迭代的預算,才能達到生產質量。
中等規模基礎模型的總訓練成本:800-2000 萬美元。
推理成本:持續燒錢
訓練是一次性成本。推理——向使用者提供預測服務——是持續的,並隨使用量擴充套件。對基礎模型來說,每 token 的推理成本決定了單位經濟學。
當前市場基準:
| 模型規模 | 成本/百萬 token(輸入) | 成本/百萬 token(輸出) | 典型用例 |
|---|---|---|---|
| 70 億引數 | $0.10-0.20 | $0.30-0.60 | 聊天機器人、基礎分類 |
| 700 億引數 | $0.60-0.90 | $2.40-3.60 | 複雜推理、內容生成 |
| 1750 億+引數 | $2.00-3.00 | $6.00-15.00 | 前沿應用、研究 |
推理困境:假設每天 100 萬使用者,每人生成 50 個 token,使用 700 億模型,每天推理成本 120-180 美元(年度 4.3-6.5 萬美元)。擴充套件到 1000 萬使用者,年度推理成本達到 43-65 萬美元。
這就是為什麼許多最初自建模型的創業公司轉向 API 消費。自託管比 API 更便宜的臨界點通常在每月 5-10 億 token——需要持續的高使用量。
資料成本:隱性倍增器
基礎模型對資料的需求量很大。訓練一個有競爭力的 LLM 需要數千億到數萬億 token 的文字資料。資料成本包括:
- 獲取:網路爬蟲基礎設施、高質量語料庫的授權協議。預算 50-200 萬美元用於全面資料集。
- 清洗和過濾:去重、過濾有害內容、確保質量。這是勞動密集型工作——預計 3-6 個月的資料工程工作。
- 標註:對於指令調優或 RLHF(基於人類反饋的強化學習),需要標註樣本。每個標註樣本 5-20 美元,需要 5-10 萬個樣本,成本 25-200 萬美元。
- 儲存和治理:PB 級儲存、版本控制、合規。年度持續成本 5-20 萬美元。
根據我們分析科技案例的經驗,公司通常低估資料成本 3-5 倍。
維護:永久稅收
基礎模型不是「訓練一次,永久使用」。它們需要持續維護:
- 微調週期:隨著使用者需求演變和新資料出現,模型需要重新訓練。預計每季度微調,成本為初始訓練成本的 10-20%。
- 模型漂移監控:隨著語言演變,效能會隨時間下降。監控和緩解成本每年 10-30 萬美元。
- 對齊與安全:紅隊測試、偏見測試、安全護欄。2-4 人的專門團隊年度成本 40-120 萬美元。
年度維護總成本:生產級基礎模型 100-300 萬美元。
自建 vs 購買 vs 微調決策
大多數基礎模型案例的核心問題:客戶應該自建、購買(API)還是微調現有模型?
flowchart TD
A{基礎模型決策} --> B{戰略差異化?}
B -->|核心智慧財產權| C{規模: >10億token/月?}
B -->|非核心| D[購買: API]
C -->|是| E{資本: 2000萬美元+可用?}
C -->|否| F[微調現有模型]
E -->|是| G[自建: 內部模型]
E -->|否| F
D --> D1[使用 OpenAI, Anthropic 等]
F --> F1[從 Llama, Mistral 等開始]
G --> G1[從頭完全訓練]
style A fill:#1e3a5f,color:#fff
style B fill:#2563eb,color:#fff
style C fill:#2563eb,color:#fff
style E fill:#2563eb,color:#fff
何時自建
從頭構建基礎模型只有在三個條件全部滿足時才有意義:
- 戰略差異化:模型架構或訓練方法是創造持久競爭優勢的核心智慧財產權。
- 規模:使用量超過每月 10 億 token,使自託管在 12-18 個月內比 API 更便宜。
- 資本可用性:初始開發 2000-5000 萬美元預算,加上 2-3 年的迭代和維護資金。
案例:一家構建 AI 原生產品的公司,模型行為定義使用者體驗,每天 1000 萬+活躍使用者,融資 1 億美元以上。想想 Jasper、Character.AI 或專業垂直 AI 應用。
何時購買(API)
API 消費在以下情況最優:
- 使用量低於每月 5 億 token
- 模型質量比每 token 成本更重要
- 上市速度至關重要(數週而非數年啟動)
- 公司缺乏機器學習基礎設施專業知識
經濟平衡點:對大多數用例,API 在達到每月 5-10 億 token 之前比自託管更便宜。按當前價格,每月 5 億 token 透過 API 成本 1.2-3 萬美元,但自託管需要每月 1.5-2.5 萬美元的基礎設施(加上前期訓練成本)。
何時微調
微調提供中間路徑:
- 從開源基礎模型開始(Llama 3、Mistral 等)
- 在專有資料上微調以提高特定領域效能
- 部署在自有基礎設施或透過微調 API
成本結構:微調 700 億模型成本 5-15 萬美元(比從頭訓練便宜 10-20 倍)。你獲得定製化而不承擔全部資本負擔。當差異化來自專業資料而非新穎架構時,這種方法有效。
權衡:你依賴於基礎模型的侷限性和架構。如果基礎模型在推理方面較弱或有根本效能力差距,微調無法完全彌補。
分析基礎模型投資:ROI 框架
在評估客戶是否應投資基礎模型開發時,按如下方式構建 ROI 分析:
| 成本類別 | 一次性 | 年度經常性 | 備註 |
|---|---|---|---|
| 訓練(初始) | 800-2000萬美元 | — | 1750 億引數模型 |
| 基礎設施 | 100-200萬美元 | 50-100萬美元 | 雲或本地 GPU |
| 資料獲取與準備 | 100-300萬美元 | 20-50萬美元 | 初始+持續收集 |
| 人才 | — | 160-300萬美元 | 8-15 名機器學習工程師 |
| 維護與微調 | — | 100-300萬美元 | 季度更新、漂移監控 |
| 第 1 年總計 | 1000-2500萬美元 | 330-750萬美元 | |
| 第 2-3 年總計 | — | 330-750萬美元/年 | 持續運營成本 |
收入端:模型必須:
- 支援新產品,產生足夠收入覆蓋每年 1000 萬美元以上的消耗
- 在其他地方降低成本,超過模型的運營成本(例如替代人工勞動)
- 改善轉化或留存,足以證明投資合理(需要非常高的使用者生命週期價值)
盈虧平衡分析:如果模型在 5000 萬美元 ARR 業務上將轉化率提高 2%,那是每年 100 萬美元的收益——不足以證明 1000 萬美元以上的投資。你需要 10%+ 的影響或更大的收入基礎。
基礎模型案例的常見陷阱
根據我們對 800+ 科技案例的分析,候選人會犯這些錯誤:
- 低估推理成本:只關注訓練成本,而忽略主導長期經濟學的持續每 token 開銷。
- 忽略資料成本:假設訓練資料是「免費的」,而實際上通常佔專案總成本的 20-40%。
- 混淆引數與能力:更多引數並不總意味著更好的效能。精心微調的 70 億模型在特定任務上可以超越通用 700 億模型。
- 忽視維護:將模型訓練視為一次性事件,而非持續過程。
- 在沒有規模論證的情況下推薦「自建」:自建只有在非常高的使用量下才有意義。大多數公司應該購買或微調。
核心要點
- 基礎模型經濟學分為四個成本桶:訓練(一次性,800-2000 萬美元)、推理(持續,隨使用量擴充套件)、資料(100-500 萬美元)和維護(年度 100-300 萬美元)
- 每 token 推理成本決定長期單位經濟學——最常見的錯誤是低估這項持續開銷
- 僅在三者都滿足時自建:戰略差異化、規模(>10 億 token/月)和資本(2000 萬美元以上可用)
- 微調相比從頭訓練成本降低 10-20 倍,當差異化來自專有資料而非架構時有效
- API 消費在達到每月 5-10 億 token 之前最優——這是自託管變得更便宜的臨界點
- 資料成本通常被低估 3-5 倍——為獲取、清洗、標註和持續治理做好預算
- ROI 分析必須考慮多年運營成本,而不僅僅是初始訓練投資
準備好應用這些框架了嗎?探索AI 與新興技術案例獲取更廣泛的 AI 戰略背景,在我們的案例庫中檢視科技行業案例,或透過 AI 模擬面試實時測試你的基礎模型分析技能。
AI 案例輔導領域正在演變——看看 CasesCoach 這樣的平臺如何將基礎模型經濟學融入互動式練習。我們的引導模式幫助你用實時提示構建複雜科技案例結構,專家模式模擬分析 2000 萬美元以上投資決策的壓力,與案例對話讓你透過 835+ 真實科技案例探索 LLM 商業模式。從 3 個免費完整案例開始建立你的 AI 戰略直覺,然後升級到 Pro 解鎖完整庫和多次 AI 模擬面試,進行全面準備。