Mark Zuckerberg khoe sở hữu cụm chip H100 lớn nhất thế giới

Trong cuộc họp báo cáo tài chính quý III/2024, CEO Meta Mark Zuckerberg đã tiết lộ thông tin đáng chú ý: công ty đang triển khai một cụm máy chủ khổng lồ chứa hơn 100.000 GPU Nvidia H100. Đây là số lượng chip lớn nhất từng được công bố trên truyền thông, với mỗi GPU H100 có giá trị 30.000-40.000 USD. Nếu chỉ tính riêng chi phí mua GPU, cụm máy chủ này có giá trị ước tính vượt 4 tỷ USD.

Ông Zuckerberg nhấn mạnh rằng cụm máy chủ này đang được sử dụng để huấn luyện mô hình ngôn ngữ lớn (LLM) Llama 4, một dự án AI đầy tham vọng của Meta. Llama 4 được kỳ vọng sẽ vượt trội về tốc độ và năng lực suy đoán so với các mô hình trước đó, với phiên bản nhỏ dự kiến ra mắt vào đầu năm 2025.

Cuộc chạy đua GPU trong lĩnh vực AI

Việc sở hữu số lượng lớn GPU Nvidia H100 đã trở thành thước đo cạnh tranh trong ngành công nghệ, đặc biệt khi các công ty lớn như Meta và xAI của Elon Musk không ngừng đầu tư vào hệ thống máy chủ khổng lồ. Trước đây, Musk đã giới thiệu siêu máy tính Colossus với 100.000 GPU H100 để huấn luyện chatbot Grok. Tuy nhiên, Meta dường như đã vượt qua mốc này, củng cố vị trí dẫn đầu trong cuộc đua AI.

Không chỉ Meta và xAI, các công ty khác cũng đang tìm cách mở rộng quy mô hệ thống AI của mình. Elon Musk thậm chí tuyên bố xAI sẽ tăng gấp đôi số lượng GPU H100 và H200, đạt mức 200.000 trong vài tháng tới.

GPU Nvidia H100, được mệnh danh là “ngựa thồ” của ngành trí tuệ nhân tạo, đã trở thành công cụ không thể thiếu trong việc huấn luyện các mô hình ngôn ngữ lớn như ChatGPT. Với khả năng tính toán song song vượt trội so với CPU, H100 và các sản phẩm tương tự từ AMD đang là tâm điểm trong cuộc cách mạng AI.

Meta và các đối thủ đang chạy đua để sở hữu nhiều GPU nhất không chỉ vì nhu cầu công nghệ mà còn để thu hút nhân tài. Các nhà nghiên cứu hàng đầu trong lĩnh vực AI hiện đặt yếu tố tài nguyên phần cứng, như số lượng GPU H100, lên hàng đầu khi lựa chọn công ty làm việc.

Tương lai của AI và sự đầu tư không giới hạn

Sự đầu tư mạnh mẽ vào GPU cho thấy tham vọng của các công ty trong việc định hình tương lai của trí tuệ nhân tạo. Với những tiến bộ vượt bậc như Llama 4, Meta đang hướng đến việc tạo ra những ứng dụng AI ngày càng mạnh mẽ, đáp ứng nhu cầu ngày càng cao của thị trường. Cuộc đua giữa Meta, xAI, và các công ty công nghệ lớn khác không chỉ thúc đẩy phát triển AI mà còn mở ra cơ hội tiếp cận công nghệ tiên tiến hơn cho toàn thế giới.