Meta cần gấp 10 lần sức mạnh tính toán để huấn luyện Llama 4 so với Llama 3

• Mark Zuckerberg tuyên bố Meta sẽ cần gấp 10 lần sức mạnh tính toán để huấn luyện Llama 4 so với Llama 3.

• Zuckerberg muốn xây dựng năng lực trước khi cần thiết hơn là quá muộn, do thời gian chuẩn bị cho các dự án suy luận mới khá dài.

• Meta phát hành Llama 3 với 80 tỷ tham số vào tháng 4/2024. Gần đây họ ra mắt phiên bản nâng cấp Llama 3.1 405B với 405 tỷ tham số, là mô hình nguồn mở lớn nhất của Meta.

• CFO Susan Li cho biết Meta đang cân nhắc các dự án trung tâm dữ liệu và xây dựng năng lực để huấn luyện các mô hình AI trong tương lai.

• Đầu tư này dự kiến sẽ làm tăng chi tiêu vốn của Meta trong năm 2025.

• Chi tiêu vốn của Meta đã tăng gần 33% lên 8,5 tỷ USD trong Q2 2024, từ 6,4 tỷ USD một năm trước, chủ yếu do đầu tư vào máy chủ, trung tâm dữ liệu và cơ sở hạ tầng mạng.

• Theo báo cáo của The Information, OpenAI chi 3 tỷ USD để huấn luyện mô hình và thêm 4 tỷ USD để thuê máy chủ với giá ưu đãi từ Microsoft.

• Meta đang xây dựng cơ sở hạ tầng linh hoạt để có thể chuyển hướng năng lực huấn luyện sang suy luận AI tạo sinh hoặc công việc xếp hạng và đề xuất cốt lõi khi cần thiết.

Ấn Độ là thị trường lớn nhất của chatbot Meta AI.

• Meta không kỳ vọng các sản phẩm AI tạo sinh sẽ đóng góp đáng kể vào doanh thu trong thời gian tới.

📌 Meta cần gấp 10 lần sức mạnh tính toán để huấn luyện Llama 4 so với Llama 3. Zuckerberg muốn đầu tư sớm vào năng lực AI. Chi tiêu vốn Q2/2024 tăng 33% lên 8,5 tỷ USD. Ấn Độ là thị trường lớn nhất của Meta AI.

https://techcrunch.com/2024/08/01/zuckerberg-says-meta-will-need-10x-more-computing-power-to-train-llama-4-than-llama-3/

Thảo luận

© Sóng AI - Tóm tắt tin, bài trí tuệ nhân tạo