Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Sức khỏe - Y tế
Văn bản luật
Nông Lâm Ngư
Kỹ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
Tài liệu HOT
Tìm
Danh mục
Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Y tế sức khỏe
Văn bản luật
Nông lâm ngư
Kĩ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
Thông tin
Điều khoản sử dụng
Quy định bảo mật
Quy chế hoạt động
Chính sách bản quyền
0
Trang chủ
Luận Văn - Báo Cáo
Báo cáo khoa học
Báo cáo khoa học: "Better Hypothesis Testing for Statistical Machine Translation: Controlling for Optimizer Instability"
TAILIEUCHUNG - Báo cáo khoa học: "Better Hypothesis Testing for Statistical Machine Translation: Controlling for Optimizer Instability"
In statistical machine translation, a researcher seeks to determine whether some innovation (., a new feature, model, or inference algorithm) improves translation quality in comparison to a baseline system. To answer this question, he runs an experiment to evaluate the behavior of the two systems on held-out data. In this paper, we consider how to make such experiments more statistically reliable. We provide a systematic analysis of the effects of optimizer instability—an extraneous variable that is seldom controlled for—on experimental outcomes, and make recommendations for reporting results more accurately. . | Better Hypothesis Testing for Statistical Machine Translation Controlling for Optimizer Instability Jonathan H. Clark Chris Dyer Alon Lavie Noah A. Smith Language Technologies Institute Carnegie Mellon University PittsbUrgh PA 15213 UsA jhclark cdyer alavie nasmith @ Abstract In statistical machine translation a researcher seeks to determine whether some innovation . a new feature model or inference algorithm improves translation quality in comparison to a baseline system. To answer this question he runs an experiment to evaluate the behavior of the two systems on held-out data. In this paper we consider how to make such experiments more statistically reliable. We provide a systematic analysis of the effects of optimizer instability an extraneous variable that is seldom controlled for on experimental outcomes and make recommendations for reporting results more accurately. 1 Introduction The need for statistical hypothesis testing for machine translation MT has been acknowledged since at least Och 2003 . In that work the proposed method was based on bootstrap resampling and was designed to improve the statistical reliability of results by controlling for randomness across test sets. However there is no consistently used strategy that controls for the effects of unstable estimates of model While the existence of optimizer instability is an acknowledged problem it is only infrequently discussed in relation to the reliability of experimental results and to our knowledge there has yet to be a systematic study of its effects on 1We hypothesize that the convention of trusting BLEU score improvements of . 1 is not merely due to an appreciation of what qualitative difference a particular quantitative improvement will have but also an implicit awareness that current methodology leads to results that are not consistently reproducible. 176 hypothesis testing. In this paper we present a series of experiments demonstrating that optimizer instability
Minh Quang
79
6
pdf
Báo lỗi
Trùng lắp nội dung
Văn hóa đồi trụy
Phản động
Bản quyền
File lỗi
Khác
Upload
Tải xuống
đang nạp các trang xem trước
Bấm vào đây để xem trước nội dung
Tải xuống
TÀI LIỆU LIÊN QUAN
Báo cáo khoa học: "Better Hypothesis Testing for Statistical Machine Translation: Controlling for Optimizer Instability"
6
65
0
Báo cáo y học: " Modeling the signaling endosome hypothesis: Why a drive to the nucleus is better than a (random) walk"
15
32
0
The myth of “the earlier the better” in foreign language learning or the optimal age to learn a foreign language
15
88
1
TÀI LIỆU XEM NHIỀU
Một Case Về Hematology (1)
8
462059
59
Giới thiệu :Lập trình mã nguồn mở
14
23791
74
Tiểu luận: Tư tưởng Hồ Chí Minh về xây dựng nhà nước trong sạch vững mạnh
13
11123
536
Câu hỏi và đáp án bài tập tình huống Quản trị học
14
10363
458
Phân tích và làm rõ ý kiến sau: “Bài thơ Tự tình II vừa nói lên bi kịch duyên phận vừa cho thấy khát vọng sống, khát vọng hạnh phúc của Hồ Xuân Hương”
3
9645
106
Ebook Facts and Figures – Basic reading practice: Phần 1 – Đặng Tuấn Anh (Dịch)
249
8637
1148
Tiểu luận: Nội dung tư tưởng Hồ Chí Minh về đạo đức
16
8356
423
Mẫu đơn thông tin ứng viên ngân hàng VIB
8
7942
2249
Đề tài: Dự án kinh doanh thời trang quần áo nữ
17
6978
260
Giáo trình Tư tưởng Hồ Chí Minh - Mạch Quang Thắng (Dành cho bậc ĐH - Không chuyên ngành Lý luận chính trị)
152
6713
1607
TỪ KHÓA LIÊN QUAN
Báo cáo khoa học
Better Hypothesis Testing
Statistical Machine Translation
Controlling
Optimizer Instability
báo cáo khoa học
báo cáo ngôn ngữ
ngôn ngữ tự nhiên
Bài giảng Xử lý ngôn ngữ tự nhiên
Xử lý ngôn ngữ tự nhiên
Kỹ thuật lập trình
Mô hình ngôn ngữ
Mô hình n gram
Dịch máy
Phương pháp dịch máy
Hiểu ngôn ngữ
Phân loại tin tự động
Tạo chí tin học
Điều khiển học
Truy vấn ngôn ngữ tự nhiên
Phép dịch truy vấn ngôn ngữ tự nhiên
Truy vấn SQL
Văn phạm ngữ nghĩa
Xử lý nhập nhằng ngữ nghĩa
Xử lý ngữ nghĩa
Phân tích ngữ nghĩa
Biểu diễn vị từ
Thuộc tính về sự kiện
Thuộc tính về sự kiện
Xử lý ngôn ngữ
Natural Language Processing
Ngôn ngữ lập trình
Nhập nhằng cấu trúc
Tri thức về ngôn ngữ
Mô hình ngôn ngữ Google Book N grams
Mô hình ngôn ngữ KenLM
Phương pháp làm mịn
Bài toán PTCP
Phân tích cú pháp
Cấu trúc ngữ pháp
Phân tích cú pháp xác suất
CKY kết hợp xác suất
Văn phạm phi ngữ cảnh xác suất
Hình thái học
Gán nhãn từ loại
Ngôn ngữ tự nhiên trong dịch máy
Hệ thống dịch máy
Phương pháp xây dựng bảng từ
Tác từ
Conditional random fields
Nhận dạng thực thể có tên
Đối tượng vật lý trừu tượng
Phân lớp văn bản
Biểu diễn nhị phân
Ma trận từ văn bản
Wolfram Alpha
Trích rút thông tin
Phương pháp Snowball
TÀI LIỆU MỚI ĐĂNG
Sáng tạo trong thuật toán và lập trình với ngôn ngữ Pascal và C# Tập 2 - Chương 4
47
291
2
28-06-2024
THE ANTHROPOLOGY OF ONLINE COMMUNITIES BY Samuel M.Wilson and Leighton C. Peterson
19
188
2
28-06-2024
Báo cáo nghiên cứu nông nghiệp " Biofertiliser inoculant technology for the growth of rice in Vietnam: Developing technical infrastructure for quality assurance and village production for farmers "
12
112
0
28-06-2024
Báo cáo nghiên cứu nông nghiệp " Field control of pest fruit flies in Vietnam "
14
160
2
28-06-2024
ĐỀ THI THỬ ĐẠI HỌC 2009 – THPT ĐÔNG SƠN 1 – LẦN 2 – MÔN TOÁN
8
123
1
28-06-2024
Báo cáo nghiên cứu khoa học " HÃY LÀM CHO HUẾ XANH HƠN VÀ ĐẸP HƠN "
6
142
1
28-06-2024
Tổng hợp Đề thi học sinh giỏi môn Sinh lớp 9 cấp huyện vòng 1 năm 2010-2011
12
202
2
28-06-2024
Color Atlas of Ophthamology
165
105
0
28-06-2024
báo cáo hóa học:" A decade of modelling research yields considerable evidence for the importance of concurrency: a response to Sawers and Stillwaggon"
7
118
0
28-06-2024
Sử dụng mô hình ARCH và GARCH để phân tích và dự báo về giá cổ phiếu trên thị trường chứng khoán
24
1041
0
28-06-2024
TÀI LIỆU HOT
Mẫu đơn thông tin ứng viên ngân hàng VIB
8
7942
2249
Giáo trình Tư tưởng Hồ Chí Minh - Mạch Quang Thắng (Dành cho bậc ĐH - Không chuyên ngành Lý luận chính trị)
152
6713
1607
Ebook Chào con ba mẹ đã sẵn sàng
112
4010
1299
Ebook Tuyển tập đề bài và bài văn nghị luận xã hội: Phần 1
62
5694
1193
Ebook Facts and Figures – Basic reading practice: Phần 1 – Đặng Tuấn Anh (Dịch)
249
8637
1148
Giáo trình Văn hóa kinh doanh - PGS.TS. Dương Thị Liễu
561
3633
665
Giáo trình Sinh lí học trẻ em: Phần 1 - TS Lê Thanh Vân
122
3845
601
Giáo trình Pháp luật đại cương: Phần 1 - NXB ĐH Sư Phạm
274
4392
544
Tiểu luận: Tư tưởng Hồ Chí Minh về xây dựng nhà nước trong sạch vững mạnh
13
11123
536
Bài tập nhóm quản lý dự án: Dự án xây dựng quán cafe
35
4291
483
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.