TAILIEUCHUNG - Báo cáo khoa học: "Correcting Errors in a Treebank Based on Synchronous Tree Substitution Grammar"

This paper proposes a method of correcting annotation errors in a treebank. By using a synchronous grammar, the method transforms parse trees containing annotation errors into the ones whose errors are corrected. The synchronous grammar is automatically induced from the treebank. We report an experimental result of applying our method to the Penn Treebank. | Correcting Errors in a Treebank Based on Synchronous Tree Substitution Grammar Yoshihide Kato1 and Shigeki Matsubara2 information Technology Center Nagoya University 2Graduate School of Information Science Nagoya University Furo-cho Chikusa-ku Nagoya 464-8601 Japan yosihide@ Abstract This paper proposes a method of correcting annotation errors in a treebank. By using a synchronous grammar the method transforms parse trees containing annotation errors into the ones whose errors are corrected. The synchronous grammar is automatically induced from the treebank. We report an experimental result of applying our method to the Penn Treebank. The result demonstrates that our method corrects syntactic annotation errors with high precision. 1 Introduction Annotated corpora play an important role in the fields such as theoretical linguistic researches or the development of NLP systems. However they often contain annotation errors which are caused by a manual or semi-manual mark-up process. These errors are problematic for corpus-based researches. To solve this problem several error detection and correction methods have been proposed so far Eskin 2000 Nakagawa and Matsumoto 2002 Dickinson and Meurers 2003a Dickinson and Meurers 2003b Ule and Simov 2004 Murata et al. 2005 Dickinson and Meurers 2005 Boyd et al. 2008 . These methods detect corpus positions which are marked up incorrectly and find the correct labels . pos-tags for those positions. However the methods cannot correct errors in structural annotation. This means that they are insufficient to correct annotation errors in a treebank. This paper proposes a method of correcting errors in structural annotation. Our method is based on a synchronous grammar formalism called synchronous tree substitution grammar STSG Eisner 2003 which defines a tree-to-tree transfor mation. By using an STSG our method transforms parse trees containing errors into the ones whose errors are corrected. The grammar is .

• Báo cáo khoa học
• Correcting Errors in a Treebank
• Synchronous Tree Substitution Grammar
• Yoshihide Kato
• báo cáo khoa học
• báo cáo ngôn ngữ
• ngôn ngữ tự nhiên
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Xử lý ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân loại tin tự động
• Tạo chí tin học
• Điều khiển học
• Truy vấn ngôn ngữ tự nhiên
• Phép dịch truy vấn ngôn ngữ tự nhiên
• Truy vấn SQL
• Văn phạm ngữ nghĩa
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Phân tích ngữ nghĩa
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Bài toán PTCP
• Phân tích cú pháp
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học
• Gán nhãn từ loại
• Ngôn ngữ tự nhiên trong dịch máy
• Hệ thống dịch máy
• Phương pháp xây dựng bảng từ
• Tác từ
• Conditional random fields
• Nhận dạng thực thể có tên
• Đối tượng vật lý trừu tượng
• Phân lớp văn bản
• Biểu diễn nhị phân
• Ma trận từ văn bản
• Wolfram Alpha
• Trích rút thông tin
• Phương pháp Snowball