根據AI應用程式需要改變嘅責任,揀選 LiteLLM 嘅替代方案。比較 Portkey、Cloudflare AI Gateway 同 OpenRouter 以滿足選定嘅閘道或管理訪問要求;當缺少層係使用計費時,請比較 Lago。當現有應用程式希望通過已批准嘅Builder安排支付合資格推理,並允許應用程式附加費同歸屬收益時,請評估 ShareAI。
已於2026年10月23日審核。 ShareAI 發布咗呢個比較並運營其中一個討論嘅計劃。當前官方參考支持功能;截圖係實際捕獲。執行嘅代碼係離線合成分類帳。冇進行生產代理遷移、密鑰配置、漏洞測試、客戶發票、付款或性能基準測試。
LiteLLM 已經記錄咗自定義模型成本、供應商利潤、虛擬密鑰同計費整合。將其簡化為供應商名稱適配器嘅比較忽略咗商業同控制面,團隊可能已經使用。喺決定替代方案需要保留乜嘢之前,請識別實際代理版本、許可範圍、配置同周邊付款安排。
LiteLLM 已經支持商業化嘅內容。
自定義定價參考 描述咗成本覆蓋、折扣同供應商價格映射。利潤指南 記錄咗內部計費同成本回收嘅百分比或固定金額費用。保留原因: 當應用程式需要自己嘅價格映射並擁有適當嘅運營模式時,請評估嗰啲現有控制。可配置推理利潤唔係 ShareAI 嘅獨有功能。
收費指南描述咗一個 Lago 回調,用於內部或者外部使用收費,並可選擇客戶、用戶或者團隊歸屬。呢個係現有嘅集成路徑,唔係自動完成發票或者付款嘅證明。比較實際事件映射、計劃同付款連接,而唔係聲稱 LiteLLM 無法參與客戶收費。
當前倉庫許可證區分咗單獨許可嘅企業目錄同MIT許可證內容,並喺其指定限制之外。檢查實際選擇嘅版本同功能。一個廣泛嘅開源標籤唔代表每個企業控制或者商業服務都包括喺內,而許可費只係運營成本嘅一部分。
一個多租戶寫作應用更改咗佢嘅自定義模型價格。
考慮一個假設嘅寫作應用,佢已經有現有嘅客戶工作空間。佢嘅網關為每個工作空間發放訪問密鑰,喺供應商之間路由,並包括一個帶有自定義價格嘅私人模型。財務部希望分配基礎設施開銷,並評估合資格推理嘅應用利潤。產品部亦需要一個清晰嘅規則,處理喺生成部分草稿後失敗嘅請求。
困難嘅變更係一個新嘅私人模型,其價格映射未完成。應用仍然生成草稿,但網關記錄為零成本,配置嘅預算無法阻止進一步工作。另外,如果收費集成信任未經驗證嘅客戶控制請求字段,可能會聲稱另一個客戶嘅身份。一個成功嘅草稿同一個合理嘅成本圖表無法解決呢兩個失敗。
比較整個過程:受信任嘅工作空間准入、實際模型使用、配置價格、接受客戶收費同收款。保留原始草稿任務同重複嘗試。一個重試可能會產生更多供應商消耗,但無提供另一個有用嘅草稿。一個明確嘅更正應該更改商業記錄,而唔係抹去已經運行嘅內容或者默默地將其分配到另一個工作空間。
按運營同商業所有權比較替代方案。
| 選項 | 評估佢嘅 | 分開資格認證。 |
|---|---|---|
| Portkey | 網關控制同可觀察性。 | 選定部署、功能範圍同付款所有權。 |
| Cloudflare AI Gateway | 管理資金路徑同自定義HTTPS供應商。 | 憑證優先級、請求格式同實際客戶收費。 |
| OpenRouter | 管理模型訪問同用戶控制嘅推理密鑰。 | 用戶授權、路由策略同應用商業條款。 |
| Lago | 使用收費同其選定嘅運營模式。 | 受信任事件、部署、計劃同收款集成。 |
| ShareAI Builder Program | 獲批嘅客戶支付推理,附加應用附加費 | 資格、應用歸屬同賬戶特定結算。 |
寫作應用程式可以喺評估另一個計費或已批准嘅推理流程時,保持一個運作中嘅閘道。呢個需要實際嘅整合同清晰嘅用戶解釋。冇自動同步嘅預算、共享錢包或者產品之間嘅原生連接被暗示。為每個准入決定、已量度嘅使用項目、客戶收費同修正分配一個單一擁有者。
追蹤一個草稿由工作區准入到付款嘅過程。
| 階段 | 保留證據 | 寫作應用程式問題。 |
|---|---|---|
| 許可 | 可信嘅工作區、密鑰同實際權限。 | 呢個用戶可唔可以訪問呢個模型? |
| 執行 | 邏輯草稿、供應商嘗試同返回嘅使用情況。 | 實際消耗咗咩資源? |
| 價格。 | 有版本嘅成本映射同選定嘅利潤。 | 邊個計算適用於嗰項工作? |
| 客戶收費 | 接受嘅條款同明確嘅修正。 | 客戶同意支付嘅金額係幾多? |
| 收集同釋放。 | 實際收據同適用嘅結算狀態。 | 收到咗咩價值並變得可用? |
保持嗰啲觀察結果連結,但唔好將佢哋視為一個成功標誌。密鑰可以授權一個模型而唔係建立一個客戶購買。一個配置嘅利潤可以被計算而唔係被收集。一個正確嘅最終餘額可以隱藏一個缺失事件或者錯誤嘅工作區。支援同財務應該能夠重建相同嘅原始草稿同其明確嘅調整。
Portkey:比較閘道操作同請求證據。
Portkey 文檔描述咗閘道、可觀察性、護欄同管理功能,並提供獨立嘅部署參考。優點:當寫作應用程式想比較操作控制同模型請求相關嘅證據時,評估所選範圍。從實際政策同失敗行為開始,而唔係模型數量排名。
權衡:限定具體版本、託管、保留數據、價格配置同客戶付款安排。支出控制同追蹤同收集已接受嘅收費係唔同嘅工作。一個自託管參考唔會自動包括每個託管儀表板或者企業服務。比較實際選定嘅實施同支援責任。
對於私人寫作模型,喺更改生產路由之前,檢查一個已知嘅非零請求同客戶映射。排練一個部分草稿並重試。保留用戶見到嘅內容、供應商消耗嘅內容同應用程式嘅商業政策收費,而唔係將匹配嘅請求數量視為整個工作流程成功遷移嘅證據。
Cloudflare AI Gateway:比較資金同自定義端點。
Cloudflare 統一計費參考描述咗供應商密鑰同信用資金模式嘅訪問方式。其自定義供應商指南涵蓋咗HTTPS端點,包括自託管模型嘅例子。優點:當應用程式想評估唔同嘅網關同資金安排以配合所選模型時,可以比較呢啲現有功能。
權衡:確認請求格式、憑證優先級、控制同實際客戶定價。一條統一兼容性路徑同一條供應商專屬路徑有唔同嘅要求。分析成本映射本身並唔能夠建立一個被接受嘅轉售收費。使用唔同資金來源成功回應仍然可能會產生意想唔到嘅應用程式擁有者賬單。
對於寫作應用程式,將私人模型同缺失嘅生產憑證一齊比較。檢查邊個賬戶資助咗結果,邊個記錄描述咗客戶收費。保留你對緩存或中斷草稿嘅政策。一個唔同嘅網關並唔會自動繼承LiteLLM中配置嘅每個預算、模型權限同計費回調。
OpenRouter:比較受管理訪問同用戶資助請求。
OpenRouter 快速入門描述咗受管理模型訪問。其OAuth指南明確允許用戶使用用戶控制嘅密鑰授權應用程式,並用佢哋自己嘅OpenRouter信用資助請求。優點:當寫作應用程式希望客戶資助合資格嘅推理,而唔係將每個請求都收費到應用程式擁有者時,可以比較呢個過程。
權衡:確認模型可用性、供應商政策、密鑰處理同實際應用程式商業協議。應用程式歸屬指南描述咗使用關聯同排名。單靠呢啲並唔能夠建立一個已批准嘅應用程式附加費或收到嘅收益。用戶資助模型訪問並唔係ShareAI獨有;比較完整嘅已批准商業路徑。
對於作者,模擬一個已斷開嘅用戶帳戶、用盡嘅信用額同埋一個失敗嘅最終草稿,而之前嘅工作係成功嘅。保持受信任嘅客戶同預期嘅付款人。模型訪問嘅更改唔應該默默咁向應用程式擁有者收費,或者暗示其獨立嘅寫作訂閱、支援責任同私人模型基礎設施已經隨住憑證轉移。
Lago:明確比較使用計費層
Lago 簡介描述咗使用計費,而官方倉庫提供咗一個開源部署路徑。優點:比較所選版本,當寫作應用程式缺乏將受信任嘅使用同商業條款轉化為計費記錄嘅責任時。LiteLLM 自己嘅計費指南已經識別咗一個 Lago 集成路徑。
權衡:確認實際部署、所需版本功能、事件映射同付款集成。運行自託管實施需要更新、可用性同恢復。一個使用計費系統唔會自動取代允許模型調用嘅網關,或者建立商戶記錄角色嘅關係。保持每個技術同財務步驟嘅擁有者。
對於私人模型,比較一個受信任嘅工作區標識符、已同意嘅可計費單位同明確嘅更正。調和網關計算嘅成本同實際出售嘅計劃。一個已發布嘅回調示例唔能證明延遲事件、重播或者客戶爭議會喺應用程式所選部署中產生預期嘅發票同收到嘅付款。
ShareAI:比較已批准應用程式附加費同結算
ShareAI Builder Program 涉及一個已經存在並擁有自己用戶嘅應用程式。合資格嘅流量通過 ShareAI,Builder 配置一個允許嘅附加費或者利潤,而最終客戶為該推理支付 ShareAI。應用程式歸屬嘅收益遵循該計劃。優點:當寫作應用程式希望獲得批准嘅推理付款同歸屬流程時,對比呢個安排。
取捨:應用程式審批、合資格流量、實際模型訪問同帳戶條款都好重要。已驗證公司Builder有45日審核期先至可以收到付款。個人目前係為咗ShareAI用途累積推理價值,唔可以提現或者進行帳戶轉移。應用程式會繼續喺其他地方建設、託管、分發同維護。佢嘅寫作訂閱、支援同其他商業責任會保持明確。
提供基礎設施或者自定義端點係屬於適用嘅供應商或者Prosumer嘅入門流程,獨立於Builder歸屬之外。LiteLLM已經記錄咗自定義價格同利潤;自定義端點亦喺其他地方存在。比較實際接受、路由、付款人同釋放情況。ShareAI唔會建立一個通用嘅計費替代方案、一個通用嘅商戶記錄服務,或者自動遷移現有嘅網關密鑰同權限。
利潤計算需要一個被接受嘅商業政策。
利潤參考描述咗喺配置折扣之後應用利潤,並且供應商特定設置會覆蓋全局利潤。保留每個草稿使用嘅計算版本。後續嘅全局配置更改唔應該抹去早前接受收費嘅解釋。內部成本回收同經批准嘅外部應用程式價格可以有唔同嘅合同處理方式。
計費參考提供咗客戶、內部用戶同團隊歸屬選擇。喺可信應用程式上下文中選擇身份,而唔係接受任意客戶提供嘅聲明。保留邏輯工作同原始調整。回調嘅存在唔能證明重播事件唔會雙重收費,或者生成嘅發票已經支付。
確認零成本映射同整個密鑰生命周期。
定價指南明確指出,零輸入同輸出成本會繞過預算檢查,而當路由同定價供應商唔一致時,定價供應商嘅映射係好重要嘅。虛擬密鑰指南記錄咗唔同嘅權限繼承範圍。應該比較密鑰嘅實際擁有者、團隊同模型配置,而唔係將創建密鑰嘅人當作其有效權限嘅證明。
同一個密鑰指南區分咗只創建自定義掛鉤同更新執行同更廣泛嘅有效狀態策略掛鉤。一個喺創建時符合到期規則嘅密鑰,除非實際選擇嘅策略涵蓋咗該操作,否則可以喺之後進行編輯。演練所選版本嘅創建、編輯、旋轉同撤銷路徑。喺部署之前,檢查其當前官方版本同建議信息;呢個比較唔係用嚟測試安全性或者推薦未經資格嘅舊版本。
喺純算術情況下,1000 USD嘅推理加上一個假設嘅15%附加費會產生150 USD嘅總附加費同1150 USD嘅總額。呢啲合成數字唔係LiteLLM或者ShareAI嘅費用、收到嘅收入、淨利潤或者稅務結果。實際嘅基礎設施、供應商同計費成本、修正同資格會影響結果。
喺接受實時商業路徑之前檢查算術。
以下執行嘅固定裝置會去重相同嘅活動,拒絕衝突嘅重複項,並以整數USD分記錄明確嘅調整。佢唔會部署代理、提供密鑰、調用計費回調或者收取付款。呢啲結果需要實際嘅運行時同商業證據圍繞計算。
JavaScript
import assert from "node:assert/strict";
const records = [
{id: "usage-a", customer: "demo", cents: 60000n, kind: "usage"},
{id: "usage-b", customer: "demo", cents: 50000n, kind: "usage"},
{id: "usage-a", customer: "demo", cents: 60000n, kind: "usage"},
{id: "adjustment-b", customer: "demo", cents: -10000n, kind: "adjustment"}
];
function netCents(rows) {
const seen = new Map();
let total = 0n;
for (const row of rows) {
assert.equal(row.customer, "demo");
const fingerprint = [row.customer, row.cents.toString(), row.kind].join("|");
if (seen.has(row.id)) {
if (seen.get(row.id) !== fingerprint) throw new Error("Conflicting duplicate");
continue;
}
if (row.cents < 0n && row.kind !== "adjustment") throw new Error("Invalid sign");
seen.set(row.id, fingerprint);
total += row.cents;
}
return total;
}
const base = netCents(records);
assert.equal(base, 100000n);
assert.throws(() => netCents([...records,
{id: "usage-a", customer: "demo", cents: 1n, kind: "usage"}
]));
const numerator = base * 1500n; // Hypothetical 15 percent in basis points.
if (numerator % 10000n !== 0n) throw new Error("Define contractual rounding first");
const surcharge = numerator / 10000n;
assert.equal(surcharge, 15000n);
const usd = cents => `${cents / 100n}.${(cents % 100n).toString().padStart(2, "0")}`;
console.log(JSON.stringify({baseUSD: usd(base), grossSurchargeUSD: usd(surcharge),
totalUSD: usd(base + surcharge), paidReceiptVerified: false}));觀察到嘅輸出係1000 USD嘅示例推理、150 USD嘅總附加費同1150 USD嘅總額,並無經過驗證嘅已支付收據。喺生產中保留受信任嘅工作區身份、原始草稿、實際使用同接受嘅修正。一個正確嘅總和唔可以證明執行嘅權限、正確嘅發票或者收到嘅款項。
首先移動一個模型、工作區同修正路徑。
- 確定實際嘅網關版本、許可範圍、密鑰同計費集成。
- 選擇需要更改嘅運營或者商業責任。
- 保留受信任嘅客戶身份同版本化嘅模型價格映射。
- 演練非零使用、零成本映射、密鑰編輯同明確嘅修正。
- 驗證實際付款證據,避免重複嘅實時收款。
- 保留原始記錄並回滾直到完整嘅客戶旅程被驗證。
當LiteLLM嘅當前實現適合時保留佢。比較網關替代方案嘅實際運行邊界,Lago針對選定嘅計費要求,ShareAI針對經批准嘅客戶支付推理。從一個草稿開始,其入場、消耗、價格、交付同財務修正可以一齊解釋。
常見問題
AI應用應該比較邊個LiteLLM替代方案?
Portkey、Cloudflare AI Gateway 同埋 OpenRouter 解決咗特定嘅閘道或者管理訪問需求。Lago 解決使用計費,包括由 LiteLLM 自己記錄嘅路徑。ShareAI 涉及經批准嘅客戶支付推理,並附加應用程式附加費。揀需要改變嘅責任範疇。
LiteLLM 已經可以應用推理利潤未?
可以。現行指南記錄咗內部計費同成本回收嘅百分比同固定金額供應商或者全球利潤。供應商設置會覆蓋全球利潤,而利潤會喺配置折扣之後應用。一個計算本身並唔會建立被接受嘅外部收費或者收取嘅金額。
LiteLLM 可以參與外部客戶計費未?
佢現行嘅計費指南記錄咗一個 Lago 回調,包含客戶、用戶或者團隊歸屬選項。需要確認可信身份、可計費事件、計劃規則同支付連接。一個示例回調唔係完成發票或者支付嘅證明。
零記錄成本係咪一定代表免費推理?
唔係。缺失或者錯誤嘅定價映射可能需要調查,而現行指南明確記錄咗繞過預算檢查嘅零成本設置。喺接受顯示金額為商業正確之前,請比較實際供應商使用量同所選配置。
一個密鑰創建規則係咪自動涵蓋後續編輯?
唔係。虛擬密鑰參考區分咗創建鉤子、更新鉤子同更廣泛嘅有效狀態策略鉤子。需要確認所選版本同實際創建、編輯、旋轉同撤銷路徑。一個合規嘅初始密鑰唔會建立永久執行。
係咪每個 LiteLLM 功能都受一個 MIT 許可證涵蓋?
經審查嘅存儲庫許可證區分咗一個單獨許可嘅企業目錄同 MIT 許可證內容,喺其指定限制之外。需要檢查實際版本、功能同部署。一個廣泛嘅開源描述唔會建立相同嘅商業範圍。
ShareAI嘅Builder結算喺唔同賬戶類型之間有咩唔同?
經驗證嘅公司Builder有45日審核期先至可以支付。個人目前累積推理價值用於ShareAI,唔包括現金提取或者賬戶轉移。批准、合資格流量同賬戶條款適用;使用同收益唔係保證嘅。
ShareAI 可以取代每個 LiteLLM 控制同計費功能未?
Builder Program 涉及經批准嘅路由推理、一個允許嘅應用程式附加費同歸屬。應用程式會喺其他地方託管同維護。其他閘道政策、軟件收費同財務責任需要明確決定;唔會自動暗示密鑰、錢包或者計費遷移。