CPO của Western Digital: Xử lý flash hiện tại, xử lý HDD trong toàn bộ vòng đời

Tin tức từ ChainCatcher, Giám đốc sản phẩm của Western Digital, Ahmed Shihab, đã đăng bài cho biết, chìa khóa của cuộc cạnh tranh lưu trữ AI không phải là đơn thuần theo đuổi phương tiện nhanh nhất, mà là khả năng mở rộng dung lượng một cách bền vững với chi phí có thể chấp nhận được. Ông cho rằng, nhiều kiến trúc hoạt động tốt ở giai đoạn đầu, nhưng khi quy mô dữ liệu từ vài PB tăng lên hàng trăm PB hoặc thậm chí cấp EB, có thể sẽ lộ ra vấn đề do chi phí không kiểm soát được.

Flash phù hợp cho các tình huống hiệu suất cao, độ trễ thấp như trọng số mô hình, GPU tràn, bộ nhớ KV và ngữ cảnh phiên; trong khi HDD thì phù hợp hơn cho dữ liệu quy mô lớn, lưu trữ lâu dài và nhạy cảm với chi phí như tài liệu huấn luyện, nhật ký, điểm kiểm tra, hồ sơ tuân thủ, dữ liệu tổng hợp và đầu ra suy diễn. Ông tóm tắt: "Flash xử lý hiện tại, HDD xử lý toàn bộ vòng đời."

Trong quy mô AI, chi phí lưu trữ sẽ trở thành vấn đề kiến trúc. Việc lưu trữ một khối lượng lớn dữ liệu trên phương tiện hiệu suất cao trong thời gian dài sẽ chiếm dụng ngân sách cho tính toán, mạng, điện và nhân sự. Đối với nhiều tải lưu trữ hàng loạt, vấn đề không phải là flash có thể lưu trữ hay không, mà là khách hàng có thể chịu đựng chi phí sử dụng flash trong thời gian dài hay không.

Lưu trữ AI trong tương lai sẽ không bị chi phối bởi một công nghệ duy nhất, mà nên được thiết kế theo từng lớp dựa trên hiệu suất, chi phí, tiêu thụ điện, mật độ, độ tin cậy và vòng đời dữ liệu. Ông nhấn mạnh, đây không phải là cuộc cạnh tranh giữa flash và HDD, mà là cần phải ghép nối phương tiện phù hợp cho các tải công việc khác nhau ngay từ đầu, nếu không kiến trúc có thể ảnh hưởng đến tính bền vững của doanh nghiệp khi quy mô mở rộng.