TAILIEUCHUNG - Báo cáo khoa học: "An Open-License Broad Coverage Lexicon"

Broad coverage lexicons for the English language have traditionally been handmade. This approach, while accurate, requires too much human labor. Furthermore, resources contain gaps in coverage, contain specific types of information, or are incompatible with other resources. We believe that the state of open-license technology is such that a comprehensive syntactic lexicon can be automatically compiled. | NULEX An Open-License Broad Coverage Lexicon Clifton J. McFate Northwestern University Evanston IL. USA. c-mcfate@ Kenneth D. Forbus Northwestern University Evanston IL. USA forbus@ Abstract Broad coverage lexicons for the English language have traditionally been handmade. This approach while accurate requires too much human labor. Furthermore resources contain gaps in coverage contain specific types of information or are incompatible with other resources. We believe that the state of open-license technology is such that a comprehensive syntactic lexicon can be automatically compiled. This paper describes the creation of such a lexicon NU-LEX an open-license feature-based lexicon for general purpose parsing that combines WordNet VerbNet and Wiktionary and contains over 100 000 words. NU-LEX was integrated into a bottom up chart parser. We ran the parser through three sets of sentences 50 sentences total from the Simple English Wikipedia and compared its performance to the same parser using Comlex. Both parsers performed almost equally with NU-LEX finding all lex-items for 50 of the sentences and Comlex succeeding for 52 . Furthermore NULEX s shortcomings primarily fell into two categories suggesting future research directions. 1 Introduction While there are many types of parsers available all of them rely on a lexicon of words whether syntactic like Comlex enriched with semantics like WordNet or derived from tagged corpora like the Penn Treebank Macleod et al 1994 Fellbaum 1998 Marcus et al 1993 63 However many of these resources have gaps that the others can fill in. WordNet for example only contains open-class words and it lacks the extensive subcategorization frame and agreement information present in Comlex Miller et al 1993 Macleod et al 1994 . Comlex while syntactically deep doesn t have tagged usage data or semantic groupings Macleod et al 1994 . Furthermore many of these resources do not map to one another or have restricted

• Báo cáo khoa học
• An Open License Broad Coverage Lexicon
• Clifton J
• McFate
• Long Papers
• báo cáo khoa học
• báo cáo ngôn ngữ
• ngôn ngữ tự nhiên
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Xử lý ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân loại tin tự động
• Tạo chí tin học
• Điều khiển học
• Truy vấn ngôn ngữ tự nhiên
• Phép dịch truy vấn ngôn ngữ tự nhiên
• Truy vấn SQL
• Văn phạm ngữ nghĩa
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Phân tích ngữ nghĩa
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Bài toán PTCP
• Phân tích cú pháp
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học
• Gán nhãn từ loại
• Ngôn ngữ tự nhiên trong dịch máy
• Hệ thống dịch máy
• Phương pháp xây dựng bảng từ
• Tác từ
• Conditional random fields
• Nhận dạng thực thể có tên
• Đối tượng vật lý trừu tượng
• Phân lớp văn bản
• Biểu diễn nhị phân
• Ma trận từ văn bản
• Wolfram Alpha
• Trích rút thông tin
• Phương pháp Snowball