• GSMA Foundry đã ra mắt Open-Telco LLM Benchmarks, một khung đánh giá AI nguồn mở được thiết kế để nâng cao hiệu suất của mô hình ngôn ngữ lớn (LLM) trong lĩnh vực viễn thông.

• Sáng kiến này được hỗ trợ bởi các tổ chức lớn như Hugging Face, The Linux Foundation, Deutsche Telekom, SK Telecom và nhiều đơn vị khác.

• Mục tiêu chính là cải thiện hiệu quả, an ninh và tuân thủ của AI trong mạng 5G và 6G.

• Các LLM hiện tại gặp khó khăn trong việc xử lý kiến thức kỹ thuật, khắc phục sự cố mạng và tuân thủ quy định trong lĩnh vực viễn thông.

• GPT-4 đạt điểm dưới 75% trên TeleQnA và dưới 40% trên bài kiểm tra phân loại tài liệu 3GPP.

• Phi-2 của Microsoft chỉ đạt 10% trên MATH500, một bộ câu hỏi toán học tổng quát.

• Open-Telco LLM Benchmarks sẽ đánh giá các mô hình AI trên 3 lĩnh vực chính: chuyên môn viễn thông, hiệu quả năng lượng, an toàn và tuân thủ.

• Các tình huống thực tế được đánh giá bao gồm: tối ưu hóa mạng, phát hiện lỗi và khắc phục sự cố, tự động hóa dịch vụ khách hàng, hiệu quả năng lượng.

• Sáng kiến này kết hợp các nhà khai thác mạng, nhà nghiên cứu AI và nhà phát triển để đóng góp bộ dữ liệu, mô hình AI và các trường hợp sử dụng viễn thông.

• GSMA Open-Telco LLM Benchmarks mời gọi sự đóng góp từ các nhà khai thác mạng di động, nhà phát triển AI, nhà cung cấp công nghệ và các startup.

• Tại MWC25 Barcelona, hội nghị thượng đỉnh 'Gen AI Summit: Experimentation to Transformation' sẽ khám phá các ứng dụng thực tế của AI tạo sinh trong viễn thông.

📌 GSMA ra mắt Open-Telco LLM Benchmarks, một khung đánh giá AI nguồn mở cho viễn thông, nhằm cải thiện hiệu suất LLM trong mạng 5G và 6G. Sáng kiến này được hỗ trợ bởi các tên tuổi lớn như Hugging Face và The Linux Foundation, tập trung vào việc nâng cao chuyên môn, hiệu quả năng lượng, an toàn và tuân thủ của AI trong viễn thông.