Meta Chuẩn Bị Phát Hành Llama 4 Đầu Năm Sau, Hướng Tới Trí Tuệ Máy Tự Động (AMI)
Mục lục
- Meta Chuẩn Bị Phát Hành Llama 4
- Trí Tuệ Máy Tự Động (AMI): Một Khái Niệm Mới?
- Llama: Lợi Thế Của Học Tự Giám Sát (SSL)
- Khả Năng Tạo Dữ Liệu Tổng Hợp Chất Lượng Cao
- Llama 4: Khi Nào?
- Phiên Bản Nén Của Llama 3.2
1. Meta Chuẩn Bị Phát Hành Llama 4
Meta, công ty mẹ của Facebook, dự kiến sẽ phát hành phiên bản mới nhất của mô hình ngôn ngữ lớn (LLM) Llama vào đầu năm 2025. Llama 4 được kỳ vọng sẽ mang đến những cải tiến đáng kể so với Llama 3, đặc biệt là trong khả năng suy luận và giải quyết vấn đề thực tế phức tạp.
2. Trí Tuệ Máy Tự Động (AMI): Một Khái Niệm Mới?
Meta đang đặt mục tiêu hướng tới một hình thức trí tuệ nhân tạo mới gọi là "Trí tuệ Máy Tự Động" (AMI). AMI khác biệt với AGI (Trí tuệ Nhân tạo Chung) ở chỗ nó tập trung vào việc kết hợp các kỹ năng nhận thức, suy luận và lập kế hoạch để giúp con người trong cuộc sống hàng ngày.
Theo Yann LeCun, nhà khoa học trưởng về AI của Meta, AMI sẽ hướng tới các hệ thống có khả năng hiểu được nguyên nhân và kết quả, cũng như mô phỏng thế giới vật chất.
3. Llama: Lợi Thế Của Học Tự Giám Sát (SSL)
Meta sử dụng kỹ thuật "Học Tự Giám Sát" (SSL) trong quá trình đào tạo Llama. SSL cho phép Llama học được những biểu diễn rộng lớn về dữ liệu từ nhiều lĩnh vực khác nhau, mang lại sự linh hoạt và kiến thức tổng quát.
Trong khi đó, RLHF (Học Cường hóa với Phản hồi từ Con người) được sử dụng trong GPT-4o và các mô hình khác hiện nay tập trung vào việc tinh chỉnh hành vi cho các nhiệm vụ cụ thể.
4. Khả Năng Tạo Dữ Liệu Tổng Hợp Chất Lượng Cao
Llama được đánh giá là một lựa chọn tối ưu cho việc tạo dữ liệu tổng hợp. Llama 3.1 405B đặc biệt được đào tạo để tạo dữ liệu hỗ trợ các sắc thái ngôn ngữ cụ thể, nâng cao hiệu quả mô hình trong các khu vực thiếu dữ liệu.
Meta tập trung vào các bộ dữ liệu ngôn ngữ Ấn Độ để tăng cường khả năng của mô hình trong môi trường đa ngôn ngữ, nâng cao tính dễ tiếp cận và chức năng cho người nói các ngôn ngữ này.
5. Llama 4: Khi Nào?
Mark Zuckerberg, CEO của Meta, đã xác nhận rằng công ty đã bắt đầu đào tạo Llama 4. Zuckerberg dự kiến Llama 4 sẽ là một bước tiến đáng kể so với Llama 3.
Meta dự kiến sẽ phát hành Llama 4 vào đầu năm 2025, tiếp tục xu hướng phát hành phiên bản mới mỗi vài tháng.
6. Phiên Bản Nén Của Llama 3.2
Gần đây, Meta đã giới thiệu các phiên bản nén của Llama 3.2, nâng cao hiệu suất AI trên thiết bị với tốc độ suy luận nhanh hơn gấp bốn lần, giảm kích thước mô hình 56% và giảm sử dụng bộ nhớ 41%.
Kết luận
Meta đang nỗ lực phát triển Llama 4, với mục tiêu hướng tới một hình thức AI mới gọi là AMI. Llama có lợi thế từ việc sử dụng SSL, giúp nó học được những kiến thức tổng quát và tạo dữ liệu tổng hợp chất lượng cao. Meta dự kiến sẽ phát hành Llama 4 vào đầu năm 2025, hứa hẹn sẽ mang đến những đột phá mới trong lĩnh vực AI.
0 comments Blogger 0 Facebook
Đăng nhận xét