Công cụ kiểm tra tuân thủ Luật AI của EU tiết lộ những thiếu sót của các mô hình AI lớn

• Một công cụ mới do startup Thụy Sĩ LatticeFlow AI và các đối tác phát triển đã kiểm tra các mô hình AI tạo sinh của các công ty công nghệ lớn theo Đạo luật AI của EU.

• Công cụ này chấm điểm các mô hình AI từ 0 đến 1 trên nhiều hạng mục, bao gồm độ mạnh mẽ kỹ thuật và an toàn.

• Kết quả cho thấy một số mô hình AI nổi tiếng còn thiếu sót trong các lĩnh vực quan trọng như khả năng phục hồi an ninh mạng và đầu ra phân biệt đối xử.

• Mô hình GPT-3.5 Turbo của OpenAI chỉ đạt 0,46 điểm về đầu ra phân biệt đối xử, trong khi mô hình Qwen1.5 72B Chat của Alibaba Cloud chỉ đạt 0,37 điểm.

• Về khả năng chống tấn công prompt hijacking, mô hình Llama 2 13B Chat của Meta đạt 0,42 điểm, còn mô hình 8x7B Instruct của Mistral chỉ đạt 0,38 điểm.

• Mô hình Claude 3 Opus của Anthropic đạt điểm trung bình cao nhất là 0,89.

• Các công ty không tuân thủ Đạo luật AI có thể bị phạt tới 35 triệu euro hoặc 7% doanh thu hàng năm toàn cầu.

• EU đang nỗ lực thiết lập cách thực thi các quy tắc của Đạo luật AI đối với các công cụ AI tạo sinh như ChatGPT.

• Các chuyên gia đang soạn thảo bộ quy tắc thực hành quản lý công nghệ này vào mùa xuân 2025.

• Công cụ kiểm tra của LatticeFlow cung cấp chỉ dẫn sớm về các lĩnh vực cụ thể mà các công ty công nghệ có nguy cơ vi phạm luật.

• CEO của LatticeFlow cho rằng kết quả kiểm tra nhìn chung là tích cực và cung cấp lộ trình để các công ty tinh chỉnh mô hình của họ theo Đạo luật AI.

• Ủy ban châu Âu hoan nghênh nghiên cứu và nền tảng đánh giá mô hình AI này như một bước đầu tiên trong việc áp dụng luật mới.

• Công cụ kiểm tra sẽ được cung cấp miễn phí cho các nhà phát triển để kiểm tra sự tuân thủ của mô hình của họ trực tuyến.

📌 Công cụ kiểm tra mới tiết lộ các mô hình AI lớn còn thiếu sót về an ninh mạng và phân biệt đối xử theo Đạo luật AI của EU. Các công ty có nguy cơ bị phạt tới 35 triệu euro nếu không tuân thủ. Ủy ban châu Âu hoan nghênh công cụ này như bước đầu áp dụng luật mới.

https://www.channelnewsasia.com/business/exclusive-eu-ai-act-checker-reveals-big-techs-compliance-pitfalls-4681611