Một nhà phát triển vừa ra mắt phiên bản mới của bộ phân loại bình luận do AI tạo ra (AI code comment detector), được xây dựng trên bộ dữ liệu công khai cùng nền tảng kỹ thuật cải tiến. Đáng chú ý, toàn bộ quá trình xử lý và phân tích diễn ra hoàn toàn cục bộ ngay trên trình duyệt của người dùng, đảm bảo dữ liệu mã nguồn hoặc đoạn văn bản tải lên không bị rò rỉ ra bên ngoài.
Điểm nâng cấp lớn của công cụ nằm ở giao diện người dùng trực quan, cho phép nhấp vào bất kỳ đoạn văn bản nào để xem chi tiết các tính năng kích hoạt (feature activation) và mức độ đóng góp của chúng vào kết quả dự đoán. Về hiệu suất, mô hình đạt độ chính xác cân bằng (balanced accuracy) 77% khi phân biệt giữa người và máy tính. Công cụ nhận diện đúng 73% bình luận do con người viết và 80% bình luận do bot tạo ra.
Đặc biệt, hệ thống sử dụng chỉ số xác suất đã qua hiệu chỉnh (calibrated probability). Khi mô hình đạt độ tin cậy từ 80% trở lên, tỷ lệ báo động giả (false positive) giảm xuống chỉ còn 5%. Ngược lại, ở ngưỡng không chắc chắn khoảng 50%, khả năng dự đoán sai sẽ tương đương với một lần tung đồng xu.
Đây là công cụ hữu ích cho cộng đồng lập trình viên và quản trị viên dự án mã nguồn mở tại Việt Nam, giúp kiểm duyệt tự động các dòng mã hoặc pull request, loại bỏ những đoạn comment rác sinh ra bởi LLM mà vẫn bảo mật thông tin nội bộ.
Nguồn: Hacker News — Biên dịch & tổng hợp: danhbaai.com