Phương pháp tóm tắt rồi tìm kiếm để trả lời câu hỏi bằng video dài: Phương pháp

Bảng liên kết

• Tóm tắt và giới thiệu
• Phương pháp
• Thí nghiệm
• Công việc có liên quan
• Phần kết luận
• Hạn chế và Tài liệu tham khảo
• A. Chi tiết thử nghiệm
• B. Mẫu nhắc nhở

2. Phương pháp

2.1. Tạo cốt truyện

2.2. Tìm kiếm tường thuật

Với câu chuyện tóm tắt và câu hỏi, chúng tôi muốn lấy đoạn clip tương đối ngắn có liên quan đến câu hỏi từ video dài. Các mô hình ngôn ngữ tạo ra văn bản mở không đều và thường ồn ào. Để truy xuất phần chính xác của video, chúng tôi điều khiển mô hình xuất ra các chỉ mục của cốt truyện thay vì dạng văn bản.

Các chỉ mục được tạo có thể vẫn bị nhiễu do tính chất mở của các mô hình ngôn ngữ. Khi mô hình đưa ra câu trả lời ở dạng văn bản, chúng tôi sử dụng điểm rouge-l [19] để tìm các ứng viên có độ tương tự với câu được tạo cao hơn ngưỡng chỉ định α ≥ 0,5.

2.3. Kiểm tra trực quan