BTC $81,607.33 -0.61%
ETH $2,431.66 -0.80%
BNB $721.51 -1.16%
XRP $1.31 -2.22%
SOL $104.85 -1.44%
TRX $0.3353 +0.10%
DOGE $0.0806 -1.74%
ADA $0.2239 -2.83%
BCH $278.13 -0.75%
LINK $12.25 -2.48%
HYPE $80.03 -1.46%
AAVE $156.53 -2.72%
SUI $1.00 -3.10%
XLM $0.1792 -2.22%
ZEC $1,167.26 -5.31%
AAPL $343.13 +0.11%
AMZN $249.92 -2.26%
GOOGL $340.23 -2.84%
MSFT $529.00 -2.38%
META $708.22 -4.35%
NVDA $214.89 -1.65%
TSLA $353.78 -6.79%
SNDK $1,299.89 -5.87%
INTC $89.83 -5.83%
SPCX $145.79 -4.56%
MU $882.17 -4.31%
AMD $531.32 -4.46%
BTC $81,607.33 -0.61%
ETH $2,431.66 -0.80%
BNB $721.51 -1.16%
XRP $1.31 -2.22%
SOL $104.85 -1.44%
TRX $0.3353 +0.10%
DOGE $0.0806 -1.74%
ADA $0.2239 -2.83%
BCH $278.13 -0.75%
LINK $12.25 -2.48%
HYPE $80.03 -1.46%
AAVE $156.53 -2.72%
SUI $1.00 -3.10%
XLM $0.1792 -2.22%
ZEC $1,167.26 -5.31%
AAPL $343.13 +0.11%
AMZN $249.92 -2.26%
GOOGL $340.23 -2.84%
MSFT $529.00 -2.38%
META $708.22 -4.35%
NVDA $214.89 -1.65%
TSLA $353.78 -6.79%
SNDK $1,299.89 -5.87%
INTC $89.83 -5.83%
SPCX $145.79 -4.56%
MU $882.17 -4.31%
AMD $531.32 -4.46%

Vitalik 分享本地私有 LLM 方案,强调隐私与安全优先

2026-04-02 14:53:42

ChainCatcher 消息,Vitalik Buterin 发文分享其截至 2026 年 4 月的本地化、私有化 LLM 部署方案,核心目标是将隐私、安全与自主可控作为前提,尽量减少远程模型及外部服务接触个人数据的机会,并通过本地推理、文件本地存储及沙箱隔离等方式降低数据泄露、模型越狱及恶意内容利用风险。

在硬件方面,其测试了搭载 NVIDIA 5090 GPU 的笔记本、AMD Ryzen AI Max Pro 128 GB 统一内存设备及 DGX Spark 等方案,并使用 Qwen3.5 35B 与 122B 模型进行本地推理。

其中,5090 笔记本在 35B 模型下可达约 90 tokens/s,AMD 方案约 51 tokens/s,DGX Spark 约 60 tokens/s。Vitalik 表示,其更倾向于基于高性能笔记本构建本地 AI 环境,同时使用 llama-server、llama-swap 及 NixOS 等工具搭建整体工作流。

app_icon
ChainCatcher 与创新者共建Web3世界