TAILIEUCHUNG - Bài giảng Xử lý ngôn ngữ tự nhiên: Chương 5 - Nguyễn Kiêm Hiếu (ĐH Bách khoa Hà Nội)

Bài giảng "Xử lý ngôn ngữ tự nhiên - Chương 5: Hệ hỏi đáp" cung cấp cho người học các kiến thức về hỏi đáp, các loại câu hỏi, cách tiếp cận IR, ma trận từ - văn bản, Wolfram Alpha,. nội dung chi tiết. | Chương 5 Hệ hỏi - đáp Hệ hỏi – đáp Chatbot IT4772 Xử lý ngôn ngữ tự nhiên Viện CNTT-TT, ĐHBKHN 2 Chương 5 Hệ hỏi – đáp Hệ hỏi - đáp INFORMATION EXTRACTION ● NATURAL LANGUAGE UNDERSTANDING Trả lời các câu hỏi dưới dạng ngôn ng ữ t ự nhiên câu hỏi END-TO-END APPLICATIONS câu trả lời Siri, could you tell me where can I find a husband who just talk and give me money whenever I want? NATURAL LANGUAGE GENERATION Uhm, let me think. Maybe you should try combining a cassette and an ATM. DATA + LINGUISTICS + MACHINE LEARNING . 3 4 Chương 5 Hệ hỏi – đáp Hệ hỏi – đáp Các loại câu hỏi Chương 5 Hệ hỏi – đáp Hệ hỏi - đáp Tiêu chí IR QA Đầu vào Câu truy vấn dưới dạng từ khóa Câu hỏi Yêu cầu Liên quan Chính xác Đầu ra Các văn bản Câu trả lời ● Câu hỏi đóng: Ai? Ai là tác giả của cuốn sách “Suối nguồn t ươi tr ẻ”? Tác phẩm “Suối nguồn tươi trẻ” do ai sáng tác? Tiểu thuyết “Suối nguồn tươi trẻ” được viết bởi nhà văn nào? Ai là người đầu tiên dịch “Suối nguồn t ươi tr ẻ” sang ti ếng Việt? 5 Chương 5 Hệ hỏi – đáp Hệ hỏi – đáp Các loại câu hỏi ● 6 Chương 5 Hệ hỏi – đáp Hệ hỏi – đáp Các loại câu hỏi Câu hỏi đóng: ● Bao giờ? Câu hỏi đóng Ở đâu? Bài hát “Người lạ ơi” được viết khi nào? Bài “Người lạ ơi” được sáng tác năm nào? Tác phẩm “Người lạ ơi” được sáng tác vào thời điểm nào? Tuyên ngôn độc lập được đọc ở đâu? Tuyên ngôn độc lập được viết ở đâu? Địa điểm nổ ra Cách mạng tháng Tám ở đâu? 7 8 Chương 5 Hệ hỏi – đáp Hệ hỏi – đáp Các loại câu hỏi ● Chương 5 Hệ hỏi – đáp Hệ hỏi – đáp Các loại câu hỏi Câu hỏi đóng ● Bao nhiêu? Câu hỏi đóng Đúng/sai, lựa chọn Một ngày cần uống ít nhất bao nhiêu n ước? Lượng nước tối thiểu phải uống một ngày là bao nhiêu? Có phải Mặt trời và các hành tinh quay xung quanh Trái Đất không? Nếu cùng lúc có tín hiệu điều khiển của đèn báo và c ảnh sát giao thông thì tuân theo cái nào? Trong bài toán phân tích từ loại có nh ất thi ết ph ải ti ến hành tách từ không? 9 Chương 5 Hệ hỏi – đáp Hệ hỏi – đáp Các loại câu

• Kỹ thuật lập trình
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Xử lý ngôn ngữ tự nhiên
• Ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Ma trận từ văn bản
• Wolfram Alpha
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Phân tích ngữ nghĩa
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Tách từ tiếng Việt
• Gán nhãn từ loại
• Phân tích cú pháp
• Nghĩa từ vựng
• Phân giải nhập nhằng từ
• Phân loại văn bản
• Lexical chain
• Phản hồi thông tin
• Phân loại tin tự động
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Bài toán PTCP
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học