TAILIEUCHUNG - Bài giảng Xử lý ngôn ngữ tự nhiên (Natural Language Processing): Bài 1 - Lê Thanh Hương

Bài giảng Xử lý ngôn ngữ tự nhiên (Natural Language Processing): Bài 1 cung cấp cho người học những kiến thức cơ bản như: Hiểu các nguyên tắc cơ bản và các cách tiếp cận trong xử lý ngôn ngữ tự nhiên, học được các công cụ và kỹ thuật có thể dùng để phát triển các hệ thống hiểu văn bản và nói chuyện với con người. . | Mục đích môn học Xử lý ngôn ngữ tự nhiên z (Natural Language Processing) z z Hiểu các nguyên tắc cơ bản và các cách tiếp cận trong XLNNTN Học ọc các kỹ ỹ thuật uậ và à cô công g cụ có thể ể dù dùng g để p phát á triển ể các hệ ệ thống ố g hiểu văn bản hoặc nói chuyện với con người Thu được một số ý tưởng về các vấn đề mở trong XLNN Tài liệu tham khảo Lê Thanh Hương Bộ môn Hệ thống Thông tin Viện CNTT &TT – Trường ĐHBKHN Email: huonglt huonglt-fit@mail fit@ hut edu vn z z z Christopher Manning and Hinrich Schütze. 1999. Foundations of Statistical Natural Language Processing. The MIT Press. Dan Jurafsky and James Martin Martin. 2000 2000. Speech and Language Processing. PrenticeHall. James Allen. 1994. Natural Language Understanding. The Benjamins/Cummings Publishing Company Inc. 1 Thông tin chung z Giữa kỳ: 30% z z z z z Điểm danh:10% Đóng góp trong giờ học:10% BTL: 10% Cuối kỳ: thi viết 70% Điều kiện được thi cuối kỳ: z z Âm thanh Ý nghĩa Vắng mặt ít hơn 30% số lần điểm danh Có tất cả các loại điểm giữa kỳ z Bài tập lớn: z Viết tiểu luận hoặc cài đặt chương trình theo nhóm (<= 4sv) Bảo vệ kết quả trong 2 tuần cuối của học kỳ z z Xử lý NNTN là gì? Đánh giá z z 2 Website: 3 4 1 Xử lý NNTN = chuyển đổi âm thanh thành ngữ nghĩa Xử lý NNTN là gì? z z NNTN là trung tâm của trí tuệ con người 5 ELIZA z Mục đích: hiểu được nhiều ngôn ngữ Không chỉ đơn giản là xử lý xâu hoặc so khớp từ khoá 6 Nói chuyện với Eliza z z z z ogaff/eliza/ z z z z z z z z 7 E: how are you today? H: not so good E: why do you say not so good? H: i suffer from allergies? E: that’s interesting H: i come out in spots E: i’m not sure i know what you’re talking about H: spots on my face E: your face H: that’s right E: is it really that right? 8 2 Nói chuyện với Eliza z z z z z z z z z z z Nói .

• Kỹ thuật lập trình
• Xử lý ngôn ngữ tự nhiên
• Xử lý ngôn ngữ
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân tích ngữ nghĩa
• Phân loại tin tự động
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Tách từ tiếng Việt
• Gán nhãn từ loại
• Phân tích cú pháp
• Nghĩa từ vựng
• Phân giải nhập nhằng từ
• Phân loại văn bản
• Lexical chain
• Phản hồi thông tin
• Bài toán PTCP
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học