BTC $81,606.07 -0.60%
ETH $2,432.04 -0.81%
BNB $721.60 -1.15%
XRP $1.30 -2.61%
SOL $104.88 -1.56%
TRX $0.3353 +0.10%
DOGE $0.0801 -2.40%
ADA $0.2231 -3.52%
BCH $278.19 -1.53%
LINK $12.25 -2.79%
HYPE $79.92 -2.08%
AAVE $155.83 -3.43%
SUI $1.00 -3.90%
XLM $0.1791 -2.53%
ZEC $1,172.06 -4.51%
AAPL $343.01 +0.06%
AMZN $249.86 -2.21%
GOOGL $340.04 -2.89%
MSFT $528.99 -2.23%
META $708.46 -4.29%
NVDA $214.93 -1.56%
TSLA $352.93 -7.42%
SNDK $1,299.85 -5.64%
INTC $89.88 -5.22%
SPCX $145.77 -4.22%
MU $882.05 -4.13%
AMD $531.95 -4.19%
BTC $81,606.07 -0.60%
ETH $2,432.04 -0.81%
BNB $721.60 -1.15%
XRP $1.30 -2.61%
SOL $104.88 -1.56%
TRX $0.3353 +0.10%
DOGE $0.0801 -2.40%
ADA $0.2231 -3.52%
BCH $278.19 -1.53%
LINK $12.25 -2.79%
HYPE $79.92 -2.08%
AAVE $155.83 -3.43%
SUI $1.00 -3.90%
XLM $0.1791 -2.53%
ZEC $1,172.06 -4.51%
AAPL $343.01 +0.06%
AMZN $249.86 -2.21%
GOOGL $340.04 -2.89%
MSFT $528.99 -2.23%
META $708.46 -4.29%
NVDA $214.93 -1.56%
TSLA $352.93 -7.42%
SNDK $1,299.85 -5.64%
INTC $89.88 -5.22%
SPCX $145.77 -4.22%
MU $882.05 -4.13%
AMD $531.95 -4.19%

Vitalik 分享本地私有 LLM 方案,強調隱私與安全優先

2026-04-02 14:53:42

ChainCatcher 消息,Vitalik Buterin 發文分享其截至 2026 年 4 月的本地化、私有化 LLM 部署方案,核心目標是將隱私、安全與自主可控作為前提,儘量減少遠程模型及外部服務接觸個人數據的機會,並透過本地推理、文件本地存儲及沙箱隔離等方式降低數據洩露、模型越獄及惡意內容利用風險。

在硬體方面,其測試了搭載 NVIDIA 5090 GPU 的筆記本、AMD Ryzen AI Max Pro 128 GB 統一記憶體設備及 DGX Spark 等方案,並使用 Qwen3.5 35B 與 122B 模型進行本地推理。

其中,5090 筆記本在 35B 模型下可達約 90 tokens/s,AMD 方案約 51 tokens/s,DGX Spark 約 60 tokens/s。Vitalik 表示,其更傾向於基於高性能筆記本構建本地 AI 環境,同時使用 llama-server、llama-swap 及 NixOS 等工具搭建整體工作流。

app_icon
ChainCatcher 與創新者共建Web3世界