TAILIEUCHUNG - Báo cáo khoa học: "Syntax-based Statistical Machine Translation using Tree Automata and Tree Transducers"

In this paper I present a Master’s thesis proposal in syntax-based Statistical Machine Translation. I propose to build discriminative SMT models using both tree-to-string and tree-to-tree approaches. Translation and language models will be represented mainly through the use of Tree Automata and Tree Transducers. These formalisms have important representational properties that makes them well-suited for syntax modeling. nce it’s u | Syntax-based Statistical Machine Translation using Tree Automata and Tree Transducers Daniel Emilio Beck Computer Science Department Federal University of Sao Carlos daniel_beck@ Abstract In this paper I present a Master s thesis proposal in syntax-based Statistical Machine Translation. I propose to build discriminative SMT models using both tree-to-string and tree-to-tree approaches. Translation and language models will be represented mainly through the use of Tree Automata and Tree Transducers. These formalisms have important representational properties that makes them well-suited for syntax modeling. I also present an experiment plan to evaluate these models through the use of a parallel corpus written in English and Brazilian Portuguese. 1 Introduction Statistical Machine Translation SMT has dominated Machine Translation MT research in the last two decades. One of its variants Phrase-based SMT PB-SMT is currently considered the state of the art in the area. However since the advent of PB-SMT by Koehn et al. 2003 and Och and Ney 2004 purely statistical MT systems have not achieved considerable improvements. So new research directions point toward the use of linguistic resources integrated into SMT systems. According to Lopez 2008 there are four steps when building an SMT system translational equivalence modeling1 parameterization parameter estimation and decoding. This Master s thesis proposal aims to improve SMT systems by including syntactic information in the first and second steps. There 1 For the remainder of this proposal I will refer to this step as simply translation model. 36 fore I plan to investigate two approaches the Tree-to-String TTS and the Tree-to-Tree TTT models. In the former syntactic information is provided only for the source language while in the latter it is provided for both source and target languages. There are many formal theories to represent syntax in a language like Context-free Grammars CFGs Tree Substitution Grammars

• Báo cáo khoa học
• Syntax based Statistical Machine Translation
• Tree Automata
• Tree Transducers
• báo cáo khoa học
• báo cáo ngôn ngữ
• ngôn ngữ tự nhiên
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Xử lý ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân loại tin tự động
• Tạo chí tin học
• Điều khiển học
• Truy vấn ngôn ngữ tự nhiên
• Phép dịch truy vấn ngôn ngữ tự nhiên
• Truy vấn SQL
• Văn phạm ngữ nghĩa
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Phân tích ngữ nghĩa
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Bài toán PTCP
• Phân tích cú pháp
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học
• Gán nhãn từ loại
• Ngôn ngữ tự nhiên trong dịch máy
• Hệ thống dịch máy
• Phương pháp xây dựng bảng từ
• Tác từ
• Conditional random fields
• Nhận dạng thực thể có tên
• Đối tượng vật lý trừu tượng
• Phân lớp văn bản
• Biểu diễn nhị phân
• Ma trận từ văn bản
• Wolfram Alpha
• Trích rút thông tin
• Phương pháp Snowball