NovAScore: Chỉ số tự động mới để đánh giá tính mới ở cấp độ tài liệu
Tháng 1 năm 2025
nhà cái uy tín nhất hiện nay tôi giới thiệu NovAScore (Đánh giá tính mới trong Điểm nguyên tử), một chỉ số tự động để đánh giá tính mới ở cấp độ tài liệu. NovAScore tổng hợp điểm mới lạ và nổi bật của thông tin nguyên tử, mang lại khả năng diễn giải cao và phân tích chi tiết về tính mới của tài liệu. Với sơ đồ điều chỉnh trọng lượng động, NovAScore mang lại tính linh hoạt nâng cao và một chiều bổ sung để đánh giá cả mức độ mới lạ lẫn tầm quan trọng của thông tin trong tài liệu.
Khung khám phá cho chú thích của con người đối với bộ dữ liệu giọng nói được hỗ trợ bởi LLM
Tháng 8 năm 2025
nhà cái uy tín nhất hiện nay tôi giới thiệu một khung cho ASR vòng lặp con người dựa trên LLM được thiết kế để nâng cao chất lượng của bản ghi ASR, đặc biệt tập trung vào việc thu thập chính xác các thực thể được đặt tên. Đóng góp quan trọng của công việc này là chứng minh rằng khi LLM được cung cấp các ví dụ về bản ghi có chú thích chất lượng cao, thì ngay cả một tập hợp nhỏ cũng có thể cải thiện đáng kể WER và tỷ lệ thu hồi thực thể.
Đánh giá tự động dựa trên so sánh để tóm tắt cuộc họp
Tháng 8 năm 2025
nhà cái uy tín nhất hiện nay tôi giới thiệu CREAM (Đánh giá tự động được xếp hạng Elo dựa trên tham chiếu dựa trên so sánh để tóm tắt cuộc họp), một khung mới giải quyết những thách thức đặc biệt trong việc đánh giá tóm tắt cuộc họp. CREAM tận dụng sự kết hợp giữa lý luận theo chuỗi suy nghĩ và sự liên kết các sự kiện chính để đánh giá tính ngắn gọn và đầy đủ của các bản tóm tắt do mô hình tạo ra mà không cần tham khảo.