Meta ra mắt Llama 3.2 mã nguồn mở: AI có thể “nhìn” và bỏ vừa trong túi bạn

Updated: 27/09/2024 at 13:00

Đây là một tuần đầy tích cực cho AI mã nguồn mở.

Vào thứ Tư, Meta công bố bản nâng cấp cho mô hình ngôn ngữ lớn hàng đầu của mình, Llama 3.2. Không chỉ có khả năng đàm thoại, Llama 3.2 còn có thể “nhìn thấy”.

Điều đặc biệt hơn là một số phiên bản của mô hình này có thể tích hợp vào điện thoại thông minh mà không làm giảm chất lượng, cho phép tương tác AI riêng tư trên thiết bị mà không cần gửi dữ liệu đến các máy chủ bên thứ ba.

Ra mắt tại sự kiện Meta Connect, Llama 3.2 có bốn phiên bản khác nhau, mỗi phiên bản đều có điểm mạnh riêng. Các mô hình tham số lớn – 11B và 90B – có khả năng xử lý cả văn bản và hình ảnh, thực hiện các nhiệm vụ phức tạp như phân tích biểu đồ, chú thích hình ảnh và xác định các đối tượng trong ảnh dựa trên mô tả ngôn ngữ tự nhiên.

Llama 3.2 được giới thiệu cùng tuần với Molmo của Viện Allen, tuyên bố là mô hình LLM thị giác đa phương tiện mã nguồn mở tốt nhất, hoạt động tương đương với các chatbot nổi tiếng như GPT-4o, Claude 3.5 Sonnet và Reka Core.

Meta cũng giới thiệu hai mô hình nhẹ: các mô hình 1B và 3B tham số, được thiết kế cho hiệu suất cao, tốc độ nhanh và các nhiệm vụ lặp đi lặp lại không đòi hỏi nhiều tính toán. Mặc dù kích thước nhỏ, chúng có khả năng “gọi công cụ” tốt hơn và một cửa sổ ngữ cảnh 128K token, lý tưởng cho việc tóm tắt, theo dõi hướng dẫn và viết lại trên thiết bị.

Đội ngũ kỹ thuật của Meta đã thực hiện các kỹ thuật tinh vi để đạt được điều này, sử dụng cắt tỉa có cấu trúc và chuyển giao tri thức để loại bỏ dữ liệu không cần thiết từ các mô hình lớn hơn và chuyển giao kiến thức từ các mô hình lớn sang các mô hình nhỏ hơn.

Kết quả là một bộ mô hình nhỏ gọn vượt trội hơn so với các đối thủ cạnh tranh trong cùng phân khúc, vượt qua các mô hình như Gemma 2 2.6B của Google và Phi-2 2.7B của Microsoft trên nhiều bài kiểm tra.

Meta cũng đang tăng cường AI trên thiết bị, hợp tác với các công ty phần cứng lớn như Qualcomm, MediaTek và Arm để đảm bảo Llama 3.2 hoạt động tốt với các chip di động. Các công ty điện toán đám mây như AWS, Google Cloud và Microsoft Azure cũng cung cấp quyền truy cập tức thì vào các mô hình mới.

Khả năng thị giác của Llama 3.2 được cải thiện nhờ các điều chỉnh kiến trúc thông minh, thêm trọng số bộ điều hợp vào mô hình ngôn ngữ hiện có, tạo cầu nối giữa các bộ mã hóa hình ảnh và lõi xử lý văn bản.

Llama 3.2 được phát hành dưới dạng mã nguồn mở theo tiêu chuẩn của Meta, có sẵn để tải xuống trên Llama.com và Hugging Face, cũng như thông qua hệ sinh thái đối tác rộng lớn của họ. Những ai muốn chạy mô hình trên đám mây có thể sử dụng Google Collab Notebook hoặc Groq cho các tương tác dựa trên văn bản, tạo ra gần 5000 token trong chưa đầy 3 giây.

Thử nghiệm Llama 3.2

Meta đã thử nghiệm Llama 3.2 trên nhiều nhiệm vụ khác nhau và nhận thấy mô hình này hoạt động tốt trong các tương tác dựa trên văn bản. Tuy nhiên, khả năng mã hóa của nó cho kết quả không đồng nhất. Khi thử nghiệm trên nền tảng của Groq, Llama 3.2 đã tạo ra mã cho các trò chơi phổ biến và các chương trình đơn giản, nhưng mô hình 70B gặp khó khăn khi được yêu cầu tạo mã cho một trò chơi tùy chỉnh. Ngược lại, mô hình 90B mạnh hơn lại hiệu quả và tạo ra một trò chơi hoàn chỉnh ngay lần thử đầu tiên.

Llama 3.2 xuất sắc trong việc xác định các yếu tố chủ quan trong hình ảnh, nhưng gặp khó khăn với văn bản nhỏ trong biểu đồ. Tuy nhiên, nó hoạt động xuất sắc khi đọc văn bản trong các hình ảnh lớn hơn, phân biệt đúng tên và vai trò công việc mà không mắc lỗi nào.

Tổng kết

Llama 3.2 là một cải tiến lớn so với thế hệ trước và là bổ sung tuyệt vời cho ngành công nghiệp AI mã nguồn mở. Điểm mạnh của nó nằm ở khả năng diễn giải hình ảnh và nhận diện văn bản lớn, với một số điểm cần cải thiện trong việc xử lý hình ảnh chất lượng thấp và các nhiệm vụ mã hóa phức tạp. Khả năng tương thích trên thiết bị cũng hứa hẹn tương lai của các nhiệm vụ AI cục bộ và riêng tư, là đối trọng tuyệt vời với các đề xuất độc quyền như Gemini Nano và các mô hình của Apple.

Tham gia Telegram: https://t.me/tapchibitcoinvn

Theo dõi Twitter (X): https://twitter.com/tapchibtc_io

Theo dõi Tiktok: https://www.tiktok.com/@tapchibitcoin

Thạch Sanh

Theo Decrypt

Được đề cập trong bài viết
Bình luận
Mới cập nhật

Các quỹ Bitcoin ETF giao ngay đã chứng kiến nhu cầu mạnh trong tuần này, ghi nhận hơn 1,7 tỷ đô la dòng vốn đổ vào trước khi tuần giao dịch kết thúc vào thứ 6. Dữ liệu từ SoSoValue cho thấy các ETF có một tuần giao dịch mạnh,... ...

Hyperliquid (HYPE) đã tăng 7,55% lên mức cao nhất mọi thời đại (ATH) mới là 57,38 đô la trước khi điều chỉnh nhẹ về 56,44 đô la tại thời điểm viết bài. Trong cùng giai đoạn, vốn hóa thị trường của HYPE đạt ATH mới 19,13 tỷ đô la, trong... ...

Vàng vừa đạt mức cao nhất mọi thời đại (ATH) mới khoảng 3.675 đô la. Trong nhiều năm, đà tăng của vàng thường được xem là tín hiệu sức mạnh cho Bitcoin. Các trader tin rằng Bitcoin thường đi theo vàng với độ trễ khoảng 200 ngày. Tuy nhiên, mô... ...

Valour Pi (PI), một sản phẩm ETP được xây dựng để theo dõi tiền điện tử gốc của Pi Network, đang chật vật tìm động lực tăng trưởng khi thị trường hầu như không có nhiều hoạt động. Bất chấp việc ETP thiếu lực hút, Pi Coin lại bắt đầu... ...

Trong phiên giao dịch ngày thứ Sáu, các giao thức Tài chính phi tập trung (DeFi) như Raydium (RAY) và Jupiter (JUP) nổi bật trong nhóm dẫn dắt thị trường tiền điện tử, hưởng lợi từ đà bứt phá mạnh mẽ của Solana (SOL). Phân tích kỹ thuật cho thấy... ...

Bitcoin (BTC) đã ghi nhận đà phục hồi đáng chú ý trong ngày thứ Sáu, khi giá tăng 1% trong 24 giờ qua, vượt ngưỡng 115.000 USD. Dữ liệu on-chain từ Glassnode cho thấy nhiều chỉ báo kỹ thuật đang củng cố triển vọng lạc quan, phản ánh rằng thị... ...

Trong bối cảnh thị trường crypto liên tiếp lập kỷ lục mới, những tiếng nói cảnh báo về một bong bóng tiềm ẩn ngày càng trở nên mạnh mẽ. Các nhân vật có ảnh hưởng hàng đầu trong ngành – từ Arjun Sethi của Kraken, Barry Silbert của Digital Currency... ...

Tron (TRX) tiếp tục duy trì nhịp tăng, ghi nhận thêm gần 1% trong phiên thứ Sáu, sau khi đã bứt phá 2,36% ở phiên giao dịch trước đó nhờ lực cầu bán lẻ dâng cao. Các tín hiệu từ phân tích kỹ thuật và dữ liệu phái sinh đều... ...

Vốn hóa thị trường altcoin hiện chỉ còn cách mức đỉnh lịch sử vỏn vẹn vài phần trăm. Nhiều nhà phân tích tin rằng trong tháng 9, thị trường có thể đạt đến một mức cao hơn nữa. Có nhiều yếu tố cho thấy mùa altcoin đã bước vào giai... ...

Dogecoin tiếp tục duy trì đà phục hồi trong tuần này khi làn sóng tích lũy từ các tổ chức và kỳ vọng về một quỹ DOGE ETF tại Mỹ đã thúc đẩy sự hứng khởi của nhà đầu tư. Xu hướng mua vào quy mô lớn từ CleanCore Solutions... ...

Xem thêm bài viết

Chọn chế độ hiển thị:
Bình thường Bảo vệ mắt Dark Mode