TAILIEUCHUNG - Báo cáo khoa học: "Automatic Assessment of Coverage Quality in Intelligence Reports"

Common approaches to assessing document quality look at shallow aspects, such as grammar and vocabulary. For many real-world applications, deeper notions of quality are needed. This work represents a first step in a project aimed at developing computational methods for deep assessment of quality in the domain of intelligence reports. We present an automated system for ranking intelligence reports with regard to coverage of relevant material. | Automatic Assessment of Coverage Quality in Intelligence Reports Samuel Brody School of Communication and Information Rutgers University sdbrody@ Paul Kantor School of Communication and Information Rutgers University Abstract Common approaches to assessing document quality look at shallow aspects such as grammar and vocabulary. For many real-world applications deeper notions of quality are needed. This work represents a first step in a project aimed at developing computational methods for deep assessment of quality in the domain of intelligence reports. We present an automated system for ranking intelligence reports with regard to coverage of relevant material. The system employs methodologies from the field of automatic summarization and achieves performance on a par with human judges even in the absence of the underlying information sources. 1 Introduction Distinguishing between high- and low-quality documents is an important skill for humans and a challenging task for machines. The majority of previous research on the subject has focused on low-level measures of quality such as spelling vocabulary and grammar. However in many real-world situations it is necessary to employ deeper criteria which look at the content of the document and the structure of argumentation. One example where such criteria are essential is decision-making in the intelligence community. This is also a domain where computational methods can play an important role. In a typical situation an intelligence officer faced with an important decision receives reports from a team of analysts on a specific topic of interest. Each decision may involve several areas of interest resulting in several collections of reports. Addi- 491 tionally the officer may be engaged in many decision processes within a small window of time. Given the nature of the task it is vital that the limited time be used effectively . that the highest-quality information be handled first. Our .

• Báo cáo khoa học
• Automatic Assessment
• Coverage Quality
• Intelligence Reports
• báo cáo khoa học
• báo cáo ngôn ngữ
• ngôn ngữ tự nhiên
• Automatic selection
• Informative sentences
• Generate multiple choice questions
• Multiple choice questions
• Educational assessment
• báo cáo hóa học
• công trình nghiên cứu về hóa học
• tài liệu về hóa học
• cách trình bày báo cáo
• BMC Bioinformatics
• Protein features
• Computational methods
• Several protein features
• Ubuntu operating system
• Contest management system
• Programming skills
• Automatic assessment system
• Examiner's psychology
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Xử lý ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân loại tin tự động
• Tạo chí tin học
• Điều khiển học
• Truy vấn ngôn ngữ tự nhiên
• Phép dịch truy vấn ngôn ngữ tự nhiên
• Truy vấn SQL
• Văn phạm ngữ nghĩa
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Phân tích ngữ nghĩa
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Bài toán PTCP
• Phân tích cú pháp
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học
• Gán nhãn từ loại
• Ngôn ngữ tự nhiên trong dịch máy
• Hệ thống dịch máy
• Phương pháp xây dựng bảng từ
• Tác từ
• Conditional random fields
• Nhận dạng thực thể có tên
• Đối tượng vật lý trừu tượng
• Phân lớp văn bản
• Biểu diễn nhị phân
• Ma trận từ văn bản
• Wolfram Alpha
• Trích rút thông tin
• Phương pháp Snowball