xAI của Elon Musk bắt tay với Nvidia để mở rộng Grok

Updated: 29/10/2024 at 16:00

Nhà sản xuất chip Nvidia vừa công bố vào thứ Hai rằng công nghệ mạng Spectrum-X của họ đã góp phần mở rộng siêu máy tính Colossus, thuộc startup xAI, hiện đang được công nhận là cụm đào tạo AI lớn nhất thế giới.

Siêu máy tính Colossus và khả năng đào tạo AI vượt trội

Tọa lạc tại Memphis, Tennessee, Colossus đảm nhiệm vai trò đào tạo cho thế hệ thứ ba của Grok, bộ mô hình ngôn ngữ lớn của xAI, được phát triển nhằm hỗ trợ các tính năng chatbot dành cho người dùng đăng ký X Premium. Siêu máy tính này được hoàn thành trong chỉ 122 ngày và đã bắt đầu đào tạo các mô hình đầu tiên chỉ 19 ngày sau khi lắp đặt. Theo thông báo của Nvidia, xAI, startup của tỷ phú công nghệ Elon Musk, dự định tăng gấp đôi công suất của hệ thống lên 200.000 GPU.

Colossus là một hệ thống GPU khổng lồ, trong đó mỗi GPU đảm nhiệm việc xử lý các tập dữ liệu lớn. Khi các mô hình Grok được đào tạo, chúng cần phân tích một khối lượng lớn văn bản, hình ảnh và dữ liệu để cải thiện độ chính xác trong phản hồi. Được Musk ca ngợi là cụm đào tạo AI mạnh mẽ nhất thế giới, Colossus kết nối 100.000 GPU NVIDIA Hopper thông qua mạng Remote Direct Memory Access (truy cập bộ nhớ trực tiếp từ xa) thống nhất. GPU Hopper của Nvidia xử lý các tác vụ phức tạp bằng cách phân chia khối lượng công việc và thực hiện xử lý song song.

Kiến trúc này cho phép dữ liệu di chuyển trực tiếp giữa các node, giúp giảm thiểu độ trễ và tối ưu hóa thông lượng cho các tác vụ đào tạo AI quy mô lớn. Trong khi các mạng Ethernet truyền thống thường gặp phải tình trạng tắc nghẽn và mất gói tin, dẫn đến giới hạn thông lượng ở mức 60%, Spectrum-X đạt được thông lượng lên đến 95% mà không làm giảm độ trễ.

Spectrum-X không chỉ cải thiện khả năng giao tiếp giữa các GPU mà còn tăng tốc độ và độ chính xác trong việc đào tạo Grok, điều này rất quan trọng để phát triển các mô hình AI có khả năng phản hồi hiệu quả trong các tương tác với con người. Thông báo mới cho thấy Nvidia tiếp tục khẳng định vị thế của mình trong lĩnh vực sản xuất chip đồ họa và AI, trong bối cảnh nhu cầu ngày càng tăng về công nghệ này.

Tham gia Telegram: https://t.me/tapchibitcoinvn

Theo dõi Twitter (X): https://twitter.com/tapchibtc_io

Theo dõi Tiktok: https://www.tiktok.com/@tapchibitcoin

Itadori

Theo Decrypt

Được đề cập trong bài viết
Bình luận
Mới cập nhật

Một báo cáo gần đây từ công ty quản lý tài sản Swissblock cùng với những phân tích từ chuyên gia khác cho thấy thị trường crypto đang bước vào giai đoạn đầu của mùa altcoin. Mặc dù Bitcoin vẫn chiếm ưu thế lớn, nhưng các chuyên gia tin rằng... ...

Ethereum (ETH) hiện đang đứng trước một cơ hội lớn để có bước đột phá mạnh mẽ, nhưng động lực có thể đến từ một nguồn ít ai ngờ đến: việc bật đèn xanh cho các quỹ ETF Ethereum giao ngay và khả năng triển khai staking trong các sản... ...

Cục Thống kê Lao động Hoa Kỳ (BLS) vừa công bố Chỉ số Giá Tiêu dùng (CPI), cho thấy lạm phát đã hạ nhiệt trong tháng 6. Sau thông báo, thị trường crypto phản ứng đáng kể, trong bối cảnh ảnh hưởng từ các tín hiệu kinh tế của nước... ...

XRP vừa chứng kiến một cú bứt phá mạnh mẽ về hoạt động, vươn lên vị trí số 2 trên Coinbase với khối lượng giao dịch trong 24 giờ đạt tới 413 triệu USD. Đáng chú ý, hơn 167 triệu XRP — tương đương gần 500 triệu USD — đã... ...

Các công ty kho bạc Ethereum (ETH) đã mua vào ít nhất 1,6 tỷ đô la trong tháng qua, giữa bối cảnh các tổ chức tích cực gom hàng khi giá tăng mạnh. Theo thông báo gần đây, các công ty nắm giữ kho bạc ETH đã tích lũy hơn... ...

Dogecoin (DOGE) hiện đang giao dịch trên mức hỗ trợ quan trọng tại 0,19 đô la, tạo nền tảng vững chắc cho xu hướng tăng ngắn hạn. Mặc dù giá đã giảm khoảng 7% trong 24 giờ qua, sự phục hồi từ mức 0,19 đô la vẫn thể hiện một... ...

Mùa altcoin, được kỳ vọng sẽ bùng nổ từ lâu, vẫn chưa thực sự đến. Trong khi đó, Bitcoin liên tục đạt những mức giá cao kỷ lục trong thời gian gần đây, khiến nhiều nhà đầu tư vào altcoin cảm thấy bất an. Tuy nhiên, đây chưa hẳn là... ...

Mặc dù giá Solana đang có dấu hiệu hạ nhiệt so với mức đỉnh gần đây 168 đô la, nhưng bức tranh tổng thể vẫn nghiêng về phe mua. Dù có sự điều chỉnh về mức 160 đô la, ba chỉ báo quan trọng cho thấy đây chỉ là một... ...

Đà tăng giá mạnh mẽ của Bitcoin và Ethereum dường như đã lan tỏa đến các altcoin, với HBAR đang ghi nhận những dấu hiệu tích lũy đầy hứa hẹn. Sau một đợt điều chỉnh nhẹ, giá của HBAR đã phục hồi và vượt qua ngưỡng 0,23 đô la, trong... ...

Trong những năm gần đây, cổ phiếu liên quan đến lĩnh vực crypto đã dần khẳng định vị thế như một loại tài sản đầu tư tiềm năng. Không chỉ thu hút sự quan tâm từ nhà đầu tư cá nhân, mà còn nhận được sự chú ý ngày càng... ...

Xem thêm bài viết

Chọn chế độ hiển thị:
Bình thường Bảo vệ mắt Dark Mode