xAI của Elon Musk bắt tay với Nvidia để mở rộng Grok

Updated: 29/10/2024 at 16:00

Nhà sản xuất chip Nvidia vừa công bố vào thứ Hai rằng công nghệ mạng Spectrum-X của họ đã góp phần mở rộng siêu máy tính Colossus, thuộc startup xAI, hiện đang được công nhận là cụm đào tạo AI lớn nhất thế giới.

Siêu máy tính Colossus và khả năng đào tạo AI vượt trội

Tọa lạc tại Memphis, Tennessee, Colossus đảm nhiệm vai trò đào tạo cho thế hệ thứ ba của Grok, bộ mô hình ngôn ngữ lớn của xAI, được phát triển nhằm hỗ trợ các tính năng chatbot dành cho người dùng đăng ký X Premium. Siêu máy tính này được hoàn thành trong chỉ 122 ngày và đã bắt đầu đào tạo các mô hình đầu tiên chỉ 19 ngày sau khi lắp đặt. Theo thông báo của Nvidia, xAI, startup của tỷ phú công nghệ Elon Musk, dự định tăng gấp đôi công suất của hệ thống lên 200.000 GPU.

Colossus là một hệ thống GPU khổng lồ, trong đó mỗi GPU đảm nhiệm việc xử lý các tập dữ liệu lớn. Khi các mô hình Grok được đào tạo, chúng cần phân tích một khối lượng lớn văn bản, hình ảnh và dữ liệu để cải thiện độ chính xác trong phản hồi. Được Musk ca ngợi là cụm đào tạo AI mạnh mẽ nhất thế giới, Colossus kết nối 100.000 GPU NVIDIA Hopper thông qua mạng Remote Direct Memory Access (truy cập bộ nhớ trực tiếp từ xa) thống nhất. GPU Hopper của Nvidia xử lý các tác vụ phức tạp bằng cách phân chia khối lượng công việc và thực hiện xử lý song song.

Kiến trúc này cho phép dữ liệu di chuyển trực tiếp giữa các node, giúp giảm thiểu độ trễ và tối ưu hóa thông lượng cho các tác vụ đào tạo AI quy mô lớn. Trong khi các mạng Ethernet truyền thống thường gặp phải tình trạng tắc nghẽn và mất gói tin, dẫn đến giới hạn thông lượng ở mức 60%, Spectrum-X đạt được thông lượng lên đến 95% mà không làm giảm độ trễ.

Spectrum-X không chỉ cải thiện khả năng giao tiếp giữa các GPU mà còn tăng tốc độ và độ chính xác trong việc đào tạo Grok, điều này rất quan trọng để phát triển các mô hình AI có khả năng phản hồi hiệu quả trong các tương tác với con người. Thông báo mới cho thấy Nvidia tiếp tục khẳng định vị thế của mình trong lĩnh vực sản xuất chip đồ họa và AI, trong bối cảnh nhu cầu ngày càng tăng về công nghệ này.

Tham gia Telegram: https://t.me/tapchibitcoinvn

Theo dõi Twitter (X): https://twitter.com/tapchibtc_io

Theo dõi Tiktok: https://www.tiktok.com/@tapchibitcoin

Itadori

Theo Decrypt

Được đề cập trong bài viết
Bình luận
Mới cập nhật

Vào thứ 6, sàn giao dịch Mỹ Coinbase thông báo ra mắt tích hợp  giao dịch phi tập trung (DEX), cho phép người dùng mua bán các tài sản kỹ thuật số trước đây chưa thể truy cập trên nền tảng. Trong bối cảnh phát triển tích cực này và sự... ...

Tại thời điểm viết bài, giá Pendle (PENDLE) đã tăng 38% trong một tuần, trong khi khối lượng giao dịch tăng vọt tới 414%. Với hơn 90% nguồn cung đã được mở khóa, các trader đang chú ý đến ngày 11 tháng 8 – thời điểm phát hành token tiếp... ...

Tuần này, thị trường crypto đã buộc phải đối mặt với một thực tế rõ ràng: BlackRock – ông lớn tài chính toàn cầu – xác nhận không có kế hoạch ra mắt quỹ ETF dành cho XRP hay Solana, theo chia sẻ từ chủ tịch The ETF Store, Nate... ...

Cardano (ADA) tăng giá 2,5% trong 24 giờ qua. Khối lượng giao dịch hàng ngày của altcoin này cũng tăng mạnh tới 74%. Trong khi đó, Bitcoin đang cố gắng vượt qua mức kháng cự 117.500 đô la, nhưng hiện tại vẫn chưa thành công. Liệu Cardano có tiếp tục... ...

Ethereum (ETH) đã lần đầu tiên vượt qua ngưỡng 4.000 USD trong vòng tám tháng qua, đạt mức cao nhất trong ngày là 4.170 USD. Cột mốc tâm lý quan trọng này đưa ETH cách mức cao nhất mọi thời đại là 4.867 USD, được thiết lập vào tháng 11... ...

Biểu đồ giá hàng tuần của Solana (SOL) cho thấy altcoin này có khả năng hướng tới mốc $300 sau khi kiểm tra vùng đáy năm 2024, ngay dưới $120. Về phía tăng, các mốc $183, $200 và $225 sẽ là những ngưỡng kháng cự mạnh đối với phe bò.... ...

Theo nhận định của nhà phân tích ETF James Seyffart, công ty quản lý tài sản lớn nhất thế giới – BlackRock không nên được phép ra mắt quỹ Solana ETF cùng lúc với các nhà phát hành tại Mỹ đã nộp hồ sơ trước đó. “Như vậy là quá... ...

Ethereum (ETH) đã một lần nữa chinh phục ngưỡng 4.000 USD vào thứ Bảy, khi nhu cầu mua vào từ các công ty đại chúng – những đơn vị xem ETH là tài sản chiến lược trong kho dự trữ – tiếp tục gia tăng mạnh mẽ và bền bỉ.... ...

Tháng trước, các dự án tiền điện tử đã thu hút 2,67 tỷ USD vốn đầu tư, tương đương 85% tổng số tiền huy động trong cả quý II. Theo dữ liệu từ DefiLlama, con số này cao hơn 6% so với tháng 6, khi các startup crypto vượt mốc... ...

Đợt tăng giá của Ethereum từ mức $2.400 hồi tháng 7 và sự phục hồi từ $3.300 vào tuần trước đều được thúc đẩy bởi niềm tin tăng giá mạnh mẽ cùng nhu cầu lớn từ các tổ chức. Những yếu tố này nhiều khả năng sẽ tiếp tục hỗ... ...

Xem thêm bài viết

Chọn chế độ hiển thị:
Bình thường Bảo vệ mắt Dark Mode