TAILIEUCHUNG - Báo cáo khoa học: "A Rote Extractor with Edit Distance-based Generalisation and Multi-corpora Precision Calculation"

In this paper, we describe a rote extractor that learns patterns for finding semantic relationships in unrestricted text, with new procedures for pattern generalization and scoring. These include the use of partof-speech tags to guide the generalization, Named Entity categories inside the patterns, an edit-distance-based pattern generalization algorithm, and a pattern accuracy calculation procedure based on evaluating the patterns on several test corpora. | A Rote Extractor with Edit Distance-based Generalisation and Multi-corpora Precision Calculation Enrique Alfonseca12 Pablo Castells1 Manabu Okumura2 Maria Ruiz-Casado12 1 Computer Science Deptartment Univ. Autonoma de Madrid 2Precision and Intelligence Laboratory Tokyo Institute of Technology enrique@ oku@ maria@ Abstract In this paper we describe a rote extractor that learns patterns for finding semantic relationships in unrestricted text with new procedures for pattern generalization and scoring. These include the use of part-of-speech tags to guide the generalization Named Entity categories inside the patterns an edit-distance-based pattern generalization algorithm and a pattern accuracy calculation procedure based on evaluating the patterns on several test corpora. In an evaluation with 14 entities the system attains a precision higher than 50 for half of the relationships considered. 1 Introduction Recently there is an increasing interest in automatically extracting structured information from large corpora and in particular from the Web Craven et al. 1999 . Because of the difficulty of collecting annotated data several procedures have been described that can be trained on unannotated textual corpora Riloff and Schmelzenbach 1998 Soderland 1999 Mann and Yarowsky 2005 . An interesting approach is that of rote extractors Brin 1998 Agichtein and Gravano 2000 Ravichandran and Hovy 2002 which look for textual contexts that happen to convey a certain relationship between two concepts. In this paper we describe some contributions to the training of Rote extractors including a procedure for generalizing the patterns and a more complex way of calculating their accuracy. We first introduce the general structure of a rote extractor and its limitations. Next we describe the proposed modifications Sections 2 3 and 4 and the evaluation performed Section 5 . .

• Báo cáo khoa học
• A Rote Extractor
• Edit Distance based Generalisation
• Multi corpora Precision Calculation
• báo cáo khoa học
• mô hình ngôn ngữ
• xử lý ngôn ngữ tự nhiên
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân tích ngữ nghĩa
• Phân loại tin tự động
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Tách từ tiếng Việt
• Gán nhãn từ loại
• Phân tích cú pháp
• Nghĩa từ vựng
• Phân giải nhập nhằng từ
• Phân loại văn bản
• Lexical chain
• Phản hồi thông tin
• Bài toán PTCP
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học