TAILIEUCHUNG - Xây dựng bộ dữ liệu tiếng Việt cho bài toán trả lời câu hỏi trực quan (visual question answering)

Bài toán trả lời câu hỏi trực quan (VQA) là bài toán kết hợp thị giác máy tính và xử lý ngôn ngữ tự nhiên. Trong bài viết này, chúng tôi trình bày các chiến lược xây dựng bộ dữ liệu VQA mới bằng tiếng Việt, Flickr8k-ViQA, bằng cách sinh tự động các cặp câu hỏi – câu trả lời từ những chú thích của bộ dữ liệu Flickr8k. | XÂY DỰNG BỘ DỮ LIỆU TIẾNG VIỆT CHO BÀI TOÁN TRẢ LỜI CÂU HỎI TRỰC QUAN VISUAL QUESTION ANSWERING VĨNH ANH NGHIÊM QUÂN NGUYỄN THỊ LAN ANH NGUYỄN LÊ TRUNG THÀNH ĐINH THỊ DIỆU MINH Khoa Tin học Trường Đại học Sư phạm Đại học Huế Email vinhanhnghiemquan@ Tóm tắt Bài toán trả lời câu hỏi trực quan VQA là bài toán kết hợp thị giác máy tính và xử lý ngôn ngữ tự nhiên. Trong bài báo này chúng tôi trình bày các chiến lược xây dựng bộ dữ liệu VQA mới bằng tiếng Việt Flickr8k-ViQA bằng cách sinh tự động các cặp câu hỏi câu trả lời từ những chú thích của bộ dữ liệu Flickr8k. Chúng tôi mô tả các công cụ đã sử dụng phân tích những trở ngại gặp phải trong quá trình xây dựng và cách khắc phục đồng thời đề xuất cách đánh giá các mô hình trên bộ dữ liệu này. Từ khóa Trả lời câu hỏi trực quan sinh câu hỏi tự động sinh câu hỏi trực quan. 1. MỞ ĐẦU Được đề xuất từ năm 2015 1 bài toán trả lời câu hỏi trực quan Visual Question Answering kết hợp hai lĩnh vực quan trọng của học máy Machine Learning là thị giác máy tính Computer Vision và xử lý ngôn ngữ tự nhiên Natural Language Processing . Dựa vào một hình ảnh và một câu hỏi ngôn ngữ tự nhiên về hình ảnh đó mô hình phải đưa ra một câu trả lời tương ứng bằng ngôn ngữ tự nhiên. Do câu hỏi có thể tập trung vào các vùng khác nhau của hình ảnh tiền cảnh foreground hậu cảnh background ngữ cảnh context hoặc các chi tiết khác nên đòi hỏi mô hình vừa phải nhận biết được các bộ phận của ảnh vừa phải kết hợp các bộ phận đó với câu hỏi và suy luận ra câu trả lời 1 . Các nghiên cứu bằng tiếng Việt về bài toán này hiện nay gặp một trở ngại chung đó là thiếu các bộ dữ liệu huấn luyện và kiểm thử bằng tiếng Việt. Do khác biệt về ngữ pháp và văn phạm nên việc huấn luyên trên bộ dữ liệu tiếng Anh hay ngôn ngữ khác rồi áp dụng vào tiếng Việt là không khả thi. Từ ý tưởng của Ren và cộng sự 2 trong bài báo này chúng tôi đề xuất một thuật toán cho phép sinh ra các cặp câu hỏi câu trả lời từ những câu mô tả hình ảnh vốn tồn tại với số lượng lớn .

• Cơ sở dữ liệu
• Trả lời câu hỏi trực quan
• Sinh câu hỏi tự động
• Sinh câu hỏi trực quan
• Xây dựng bộ dữ liệu tiếng Việt
• Ngôn ngữ học hiện đại
• Ngôn ngữ giới trẻ
• Ngữ pháp chức năng hệ thống
• Ngữ pháp tạo sinh
• Lý thuyết ngôn ngữ học hiện đại
• Ngôn ngữ mạng
• Tiếng Hán hiện đại
• Hiện tượng ngôn ngữ mạng
• Nâng cao chất lượng dạy học ngôn ngữ
• Đặc điểm của ngôn ngữ mạng
• Ngôn ngữ học
• Ngôn ngữ tiếng Việt
• Cú pháp tiếng Việt
• Cú pháp học
• Cấu trúc ngôn ngữ
• Luận văn Thạc sĩ Ngôn ngữ học
• Đặc điểm cặp trao Đáp
• Ngôn ngữ biểu đạt tình cảm lứa đôi
• Tác phẩm văn xuôi hiện đại
• Luận văn Thạc sĩ
• Lí luận ngôn ngữ học
• Động từ trong tiếng Anh hiện đại
• Động từ trong tiếng Việt hiện đại
• Động từ nói năng
• Nhóm động từ nói năng trong tiến Anh
• Luận văn Ngôn ngữ học
• Tiểu thuyết hiện đại Việt Nam
• Đặc điểm ngôn ngữ tiêu đề
• Phong cách ngôn ngữ văn chương
• Vũ Ngọc Phan
• Nhà văn hiện đại
• Đặc điểm về ngôn ngữ trong văn học
• Ngôn ngữ phê bình trong Nhà văn hiện đại
• Giọng điệu phê bình trong Nhà văn hiện đại
• Phê bình văn học
• Biểu hiện của ngôn ngữ mạng
• Ngôn ngữ chat
• Lạm dụng ngôn ngữ mạng
• Điều chỉnh ngôn ngữ mạng
• Luận văn Thạc sĩ Ngôn ngữ
• Câu tồn tại tiếng Hán hiện đại
• Cấu trúc ngữ pháp tiếng Hán hiện đại
• Đặc điểm cấu trúc ngữ pháp tiếng Hán
• Phần sau câu tồn tại tiếng Hán
• Tạp chí Khoa học & Công nghệ
• Thụ đắc ngôn ngữ
• Chuyển di ngôn ngữ
• Biểu thị mục đích “为了” trong tiếng Hán
• Dạy học ngôn ngữ tiếng Hán cho người Việt
• Cách thể hiện phép lịch sự
• Thể hiện phép lịch sự bằng phương pháp giao tiếp
• Phương pháp giao tiếp ngôn ngữ
• Giao tiếp phi ngôn ngữ
• Bài thuyết trình Tiếng Anh
• Quan hệ quyền thế trong diễn ngôn hội thoại
• Diễn ngôn hội thoại
• Lý thuyết X gạch
• Văn học trung đại
• Hiện tượng song ngữ
• Chính sách ngôn ngữ Việt Nam
• Ngôn ngữ dân tộc
• Văn học Việt Nam
• Song ngữ trong văn học trung đại Việt Nam
• phương tiện giao tiếp
• phi ngôn ngữ trong tiểu thuyết
• phi ngôn ngữ trong truyện ngắn
• bình diện ngữ dụng học
• vai trò của ngôn ngữ
• ngôn ngữ và sự chắc chắn
• ngôn ngữ và nhận thức
• tri thức và ngôn ngữ
• Nghiên cứu dịch thuật
• Khuynh hướng nghiên cứu ngôn ngữ
• Nghiên cứu ngôn ngữ
• Lý thuyết ngôn ngữ học
• Ảnh hưởng của các lý thuyết hiện đại
• Lý thuyết hiện đại
• Ngữ pháp tiếng Việt
• Việt ngữ học
• Luận án Tiến sĩ
• Luận án Tiến sĩ Ngôn ngữ học
• Khung ngôn ngữ ma trận
• Chuyển mã tiếng Anh
• Giao tiếp tiếng Việt
• Nghiên cứu lí luận
• Tìm hiểu ngôn ngữ trong đời sống xã hội hiện đại
• Dạy học các chuyên đề học tập
• Quy trình dạy học các chuyên đề học tập
• Giáo dục phổ thông môn Ngữ văn
• Nhóm loại từ chỉ bất động vật
• Loại từ trong tiếng Việt
• Tiểu thuyết Mạc Ngôn
• Ngôn ngữ tiểu thuyết
• Thiên mã hành không
• Lý luận văn học hiện đại Phương Tây
• Mỹ học tiểu thuyết
• Lý luận ngôn ngữ
• Luận văn Thạc sĩ Khoa học
• Hô ngữ tiếng Việt
• Hô ngữ trong tiếng Hán hiện đại
• Ngôn ngữ giao tiếp
• cơ sở ngôn ngữ
• chuyên khoa ngôn ngữ
• nghiên cứu xã hội
• ngữ pháp câu từ