TAILIEUCHUNG - Báo cáo khoa học: "An Experiment in Evaluating the Quality of Translations"

To lay the foundations for a systematic procedure that could be applied to any scientific translation, this experiment evaluates the error variances attributable to various sources inherent in a design in which discrete, randomly ordered sentences from translations are rated for intelligibility and for fidelity to the original. | Mechanical Translation and Computational Linguistics and 4 September and December 1966 An Experiment in Evaluating the Quality of Translations by John B. Carroll Graduate School of Education Harvard University To lay the foundations for a systematic procedure that could be applied to any scientific translation this experiment evaluates the error variances attributable to various sources inherent in a design in which discrete randomly ordered sentences from translations are rated for intelligibility and for fidelity to the original. The procedure is applied to three human and three mechanical translations into English of four passages from a Russian work on cybernetics yielding mean scores for the translations. Human and mechanical translations are clearly different in over-all quality although substantial overlap is noted when individual sentences are considered. The procedure also clearly differentiates within sets of human translations and within sets of mechanical translations. Results from the two scales are highly correlated and these in turn are highly correlated with reading times. A procedure in which highly intelligent monolingual raters . without knowledge of the foreign language compare a test translation with a carefully prepared translation is found to be more reliable than one in which bilingual raters compare the English translation with the Russian original. Introduction It would be desirable in studies of the merits of machine translation attempts to have available a relatively simple yet accurate and valid technique for scaling the quality of translations. It has also become apparent that such a technique would be useful in assessing human translations. The present experiment seeks to lay the foundations for the development of a technique. There have been several other experiments in measuring the quality of mechanical translations 1 2 but the procedures proposed in these experiments have generally been too laborious too subject to

• Báo cáo khoa học
• An Experiment in Evaluating the Quality of Translations
• John B
• Carroll
• Mechanical Translation and Computational Linguistics
• báo cáo khoa học
• báo cáo ngôn ngữ
• ngôn ngữ tự nhiên
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Xử lý ngôn ngữ tự nhiên
• Kỹ thuật lập trình
• Mô hình ngôn ngữ
• Mô hình n gram
• Dịch máy
• Phương pháp dịch máy
• Hiểu ngôn ngữ
• Phân loại tin tự động
• Tạo chí tin học
• Điều khiển học
• Truy vấn ngôn ngữ tự nhiên
• Phép dịch truy vấn ngôn ngữ tự nhiên
• Truy vấn SQL
• Văn phạm ngữ nghĩa
• Xử lý nhập nhằng ngữ nghĩa
• Xử lý ngữ nghĩa
• Phân tích ngữ nghĩa
• Biểu diễn vị từ
• Thuộc tính về sự kiện
• Thuộc tính về sự kiện
• Xử lý ngôn ngữ
• Natural Language Processing
• Ngôn ngữ lập trình
• Nhập nhằng cấu trúc
• Tri thức về ngôn ngữ
• Mô hình ngôn ngữ Google Book N grams
• Mô hình ngôn ngữ KenLM
• Phương pháp làm mịn
• Bài toán PTCP
• Phân tích cú pháp
• Cấu trúc ngữ pháp
• Phân tích cú pháp xác suất
• CKY kết hợp xác suất
• Văn phạm phi ngữ cảnh xác suất
• Hình thái học
• Gán nhãn từ loại
• Ngôn ngữ tự nhiên trong dịch máy
• Hệ thống dịch máy
• Phương pháp xây dựng bảng từ
• Tác từ
• Conditional random fields
• Nhận dạng thực thể có tên
• Đối tượng vật lý trừu tượng
• Phân lớp văn bản
• Biểu diễn nhị phân
• Ma trận từ văn bản
• Wolfram Alpha
• Trích rút thông tin
• Phương pháp Snowball