TAILIEUCHUNG - Báo cáo khoa học: "Should we Translate the Documents or the Queries in Cross-language Information Retrieval?"

Previous comparisons of document and query translation suffered difficulty due to differing quality of machine translation in these two opposite directions. We avoid this difficulty by training identical statistical translation models for both translation directions using the same training data. We investigate information retrieval between English and French, incorporating both translations directions into both document translation and query translation-based information retrieval, as well as into hybrid systems. . | Should we Translate the Documents or the Queries in Cross-language Information Retrieval J. Scott McCarley IBM . Watson Research Center . Box 218 Yorktown Heights NY 10598 jsmc@ Abstract Previous comparisons of document and query translation suffered difficulty due to differing quality of machine translation in these two opposite directions. We avoid this difficulty by training identical statistical translation models for both translation directions using the same training data. We investigate information retrieval between English and French incorporating both translations directions into both document translation and query translation-based information retrieval as well as into hybrid systems. We find that hybrids of document and query translation-based systems outperform query translation systems even human-quality query translation systems. 1 Introduction Should we translate the documents or the queries in cross-language information retrieval The question is more subtle than the implied two alternatives. The need for translation has itself been questioned although non-translation based methods of cross-language information retrieval CLIR such as cognate-matching Buckley et al. 1998 and cross-language Latent Semantic Indexing Dumais et al. 1997 have been developed the most common approaches have involved coupling information retrieval IR with machine translation MT . For convenience we refer to dictionary-lookup techniques and interlingua Diekema et al. 1999 as translation even if these techniques make no attempt to produce coherent or sensibly-ordered language this distinction is important in other areas but a stream of words is adequate for IR. Translating the documents into the query s language s and translating the queries into the document s language s represent two extreme approaches to coupling MT and IR. These two approaches are neither equivalent nor mutually exclusive. They are not equivalent because machine translation is not an .

• Báo cáo khoa học
• Translate the Documents
• the Queries in Cross language
• Information Retrieval
• báo cáo khoa học
• mô hình ngôn ngữ
• xử lý ngôn ngữ tự nhiên
• Bi determine Luyện thi tiếng anh
• skills students tiếng anh
• Uyên translate anh văn
• documents Học anh văn
• tiếng anh giao tiếp
• word Vũng tiếng anh
• Tiếng anh Đàm Thoại
• inclusive of the anh văn
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân tích ngữ nghĩa
• Phân loại tin tự động
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Tách từ tiếng Việt
• Gán nhãn từ loại
• Phân tích cú pháp
• Nghĩa từ vựng
• Phân giải nhập nhằng từ
• Phân loại văn bản
• Lexical chain
• Phản hồi thông tin
• Bài toán PTCP
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học