TAILIEUCHUNG - Báo cáo khoa học: "Word or Phrase? Learning Which Unit to Stress for Information Retrieval∗"

The use of phrases in retrieval models has been proven to be helpful in the literature, but no particular research addresses the problem of discriminating phrases that are likely to degrade the retrieval performance from the ones that do not. In this paper, we present a retrieval framework that utilizes both words and phrases flexibly, followed by a general learning-to-rank method for learning the potential contribution of a phrase in retrieval. | Word or Phrase Learning Which Unit to Stress for Information Retrieval Young-In Song and Jung-Tae Lee and Hae-Chang Rim Microsoft Research Asia Beijing China Dept. of Computer Radio Communications Engineering Korea University Seoul Korea yosong@ jtlee rim @ Abstract The use of phrases in retrieval models has been proven to be helpful in the literature but no particular research addresses the problem of discriminating phrases that are likely to degrade the retrieval performance from the ones that do not. In this paper we present a retrieval framework that utilizes both words and phrases flexibly followed by a general learning-to-rank method for learning the potential contribution of a phrase in retrieval. We also present useful features that reflect the compositionality and discriminative power of a phrase and its constituent words for optimizing the weights of phrase use in phrase-based retrieval models. Experimental results on the TREC collections show that our proposed method is effective. 1 Introduction Various researches have improved the quality of information retrieval by relaxing the traditional bag-of-words assumption with the use of phrases. Miller et al. 1999 Song and Croft 1999 explore the use n-grams in retrieval models. Fagan 1987 Gao et al. 2004 Metzler and Croft 2005 Tao and Zhai 2007 use statistically-captured term dependencies within a query. Strzalkowski et al. 1994 Kraaij and Pohlmann 1998 Arampatzis et al. 2000 study the utility of various kinds of syntactic phrases. Although use of phrases clearly helps there still exists a fundamental but unsolved question Do all phrases contribute an equal amount of increase in the performance of information retrieval models Let us consider a search query World Bank Criticism which has the following phrases world This work was done while Young-In Song was with the Dept. of Computer Radio Communications Engineering Korea University. bank and bank criticism . Intuitively the former .

• Báo cáo khoa học
• Word or Phrase
• Learning Which Unit to Stress
• Information Retrieval∗
• báo cáo khoa học
• báo cáo ngôn ngữ
• xử lý ngôn ngữ tự nhiên
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân tích ngữ nghĩa
• Phân loại tin tự động
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Tách từ tiếng Việt
• Gán nhãn từ loại
• Phân tích cú pháp
• Nghĩa từ vựng
• Phân giải nhập nhằng từ
• Phân loại văn bản
• Lexical chain
• Phản hồi thông tin
• Bài toán PTCP
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học