TAILIEUCHUNG - Báo cáo khoa học: "Extracting Paraphrases from a Parallel Corpus"

While paraphrasing is critical both for interpretation and generation of natural language, current systems use manual or semi-automatic methods to collect paraphrases. We present an unsupervised learning algorithm for identification of paraphrases from a corpus of multiple English translations of the same source text. Our approach yields phrasal and single word lexical paraphrases as well as syntactic paraphrases. | Extracting Paraphrases from a Parallel Corpus Regina Barzilay and Kathleen R. McKeown Computer Science Department Columbia University 10027 New York NY UsA regina kathy @ Abstract While paraphrasing is critical both for interpretation and generation of natural language current systems use manual or semi-automatic methods to collect paraphrases. We present an unsupervised learning algorithm for identification of paraphrases from a corpus of multiple English translations of the same source text. Our approach yields phrasal and single word lexical paraphrases as well as syntactic paraphrases. 1 Introduction Paraphrases are alternative ways to convey the same information. A method for the automatic acquisition of paraphrases has both practical and linguistic interest. From a practical point of view diversity in expression presents a major challenge for many NLP applications. In multidocument summarization identification of paraphrasing is required to find repetitive information in the input documents. In generation paraphrasing is employed to create more varied and fluent text. Most current applications use manually collected paraphrases tailored to a specific application or utilize existing lexical resources such as Word-Net Miller et al. 1990 to identify paraphrases. However the process of manually collecting paraphrases is time consuming and moreover the collection is not reusable in other applications. Existing resources only include lexical paraphrases they do not include phrasal or syntactically based paraphrases. From a linguistic point of view questions concern the operative definition of paraphrases what types of lexical relations and syntactic mechanisms can produce paraphrases Many linguists Halliday 1985 de Beaugrande and Dressler 1981 agree that paraphrases retain approximate conceptual equivalence and are not limited only to synonymy relations. But the extent of interchangeability between phrases which form paraphrases is an open question .

• Báo cáo khoa học
• Extracting Paraphrases
• a Parallel Corpus
• Regina Barzilay and Kathleen R
• McKeown
• báo cáo khoa học
• mô hình ngôn ngữ
• xử lý ngôn ngữ tự nhiên
• Definition Sentences on the Web
• Chikara Hashimoto
• báo cáo ngôn ngữ
• ngôn ngữ tự nhiên
• Technical Terms
• Noisy Parallel Software Corpora
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân tích ngữ nghĩa
• Phân loại tin tự động
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Tách từ tiếng Việt
• Gán nhãn từ loại
• Phân tích cú pháp
• Nghĩa từ vựng
• Phân giải nhập nhằng từ
• Phân loại văn bản
• Lexical chain
• Phản hồi thông tin
• Bài toán PTCP
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học