Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Sức khỏe - Y tế
Văn bản luật
Nông Lâm Ngư
Kỹ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
Tài liệu HOT
Tìm
Danh mục
Kinh doanh - Marketing
Kinh tế quản lý
Biểu mẫu - Văn bản
Tài chính - Ngân hàng
Công nghệ thông tin
Tiếng anh ngoại ngữ
Kĩ thuật công nghệ
Khoa học tự nhiên
Khoa học xã hội
Văn hóa nghệ thuật
Y tế sức khỏe
Văn bản luật
Nông lâm ngư
Kĩ năng mềm
Luận văn - Báo cáo
Giải trí - Thư giãn
Tài liệu phổ thông
Văn mẫu
Thông tin
Điều khoản sử dụng
Quy định bảo mật
Quy chế hoạt động
Chính sách bản quyền
0
Trang chủ
Khoa Học Xã Hội
Ngôn ngữ học
Phân loại văn bản tiếng Việt dựa trên mô hình chủ đề
TAILIEUCHUNG - Phân loại văn bản tiếng Việt dựa trên mô hình chủ đề
Trong bài viết đề xuất một giải pháp mới trong xử lý tiếng Việt bằng cách xây dựng mô hình chủ đề tiếng Việt. Phương pháp này sử dụng cách thức tìm một từ lõi và phát triển để tự sinh ra các từ khác trong chủ đề dựa trên Naive Bayes. Dựa trên tập dữ liệu huấn luyện, chúng tôi tính toán xác suất của các từ trong mô hình chủ đề tiếng Việt. Kết quả thực nghiệm cho thấy rằng, phương pháp của chúng tôi đề xuất có hiệu quả trong việc phân loại các văn bản tiếng Việt theo nhiều lớp chủ đề nhỏ hơn. Đồng thời, có độ chính xác khá cao và thời gian xử lý phân loại nhanh hơn so với các phương pháp đã được đề xuất trước đó. | Kỷ yếu Hội nghị Khoa học Quốc gia lần thứ IX Nghiên cứu cơ bản và ứng dụng Công nghệ thông tin FAIR 9 Cần Thơ ngày 4-5 8 2016 DOI PHÂN LOẠI VĂN BẢN TIẾNG VIỆT DỰA TRÊN MÔ HÌNH CHỦ ĐỂ Bùi Khánh Linh 1 Nguyễn Thị Thu Hà1 Nguyễn Thị Ngọc Tú1 Đào Thanh Tĩnh2 1 Khoa CNTT Trường Đại học Điện lực Hà Nội 2 Khoa CNTT Trường Đại học Lê Quý Đôn Hà Nội linbk@ hantt@ tunn@ tinhdt@ TÓM TẮT Trong bài báo này chúng tôi đề xuất một giải pháp mới trong xử lý tiếng Việt bằng cách xây dựng mô hình chủ đề tiếng Việt. Phương pháp này sử dụng cách thức tìm một từ lõi và phát triển để tự sinh ra các từ khác trong chủ đề dựa trên Naive Bayes. Dựa trên tập dữ liệu huấn luyện chúng tôi tính toán xác suất của các từ trong mô hình chủ đề tiếng Việt. Kết quả thực nghiệm cho thấy rằng phương pháp của chúng tôi đề xuất có hiệu quả trong việc phân loại các văn bản tiếng Việt theo nhiều lớp chủ đề nhỏ hơn. Đồng thời có độ chính xác khá cao và thời gian xử lý phân loại nhanh hơn so với các phương pháp đã được đề xuất trước đó. Từ khóa Mô hình chủ đề tiếng Việt khai phá văn bản từ lõi Naive Bayes. I. ĐẶT VẤN ĐỀ Phân loại văn bản là một trong những phần quan trọng của việc khai phá dữ liệu văn bản khá nhiều các hệ thống phân loại văn bản sử dụng kỹ thuật dựa trên tri thức knowledge based hoặc dựa trên các luật được xây dựng sẵn để tạo thành một tập hợp các quy tắc logic để hiểu và phân loại văn bản. Mỗi loại hay còn gọi là lớp class tương đương với một chủ đề ví dụ thể thao chính trị hay nghệ thuật . Nhiệm vụ phân loại được bắt đầu xây dựng từ một tập các văn bản D d1 d2 . dn được gọi là tập huấn luyện trong đó các tài liệu di được gán nhãn cj - với cj thuộc tập các chủ đề C c1 c2 . cm . Nhiệm vụ tiếp theo là xác định được mô hình phân loại trên cơ sở đó có thể gán đúng lớp để một tài liệu dk bất kỳ có thể phân loại chính xác vào một trong những chủ đề của tập chủ đề C 1 2 3 6 . Bài toán phân loại văn bản được mô phỏng thành quá trình .
Xuân Nghi
85
6
pdf
Báo lỗi
Trùng lắp nội dung
Văn hóa đồi trụy
Phản động
Bản quyền
File lỗi
Khác
Upload
Tải xuống
đang nạp các trang xem trước
Bấm vào đây để xem trước nội dung
Tải xuống
TÀI LIỆU LIÊN QUAN
Tiểu luận: Phân tích đánh giá mô hình chủ đầu tư trực tiếp quản lý dự án
19
126
1
Chủ đề: Nghiên cứu ứng dụng mô hình số thủy văn đánh giá lượng bổ cập cho nước dưới đất; áp dụng cho hạ lưu sông Đồng Nai
35
128
1
Phân loại văn bản tiếng việt dựa trên mô hình chủ đề và lý thuyết Naive Bayes
7
141
1
Luận văn Thạc sĩ Công nghệ thông tin: Xây dựng mô hình các chủ đề và công cụ tìm kiếm ngữ nghĩa
94
45
1
Luận văn Thạc sĩ Hệ thống thông tin: Ứng dụng các mô hình chủ đề ẩn vào mô hình phân hạng lại dòng cập nhật trên mạng xã hội Twitter
60
92
0
Luận văn Thạc sĩ: Vận dụng mô hình dạy học theo chủ đề vào dạy học chương “Cân bằng của vật rắn” Vật lý 10 trung học phổ thông ở nước Cộng hòa Dân chủ Nhân dân Lào
67
109
0
Tóm tắt Luận văn Thạc sĩ Hệ thống thông tin: Ứng dụng các mô hình chủ đề ẩn vào mô hình phân hạng lại dòng cập nhật trên mạng xã hội Twitter
24
88
0
Nghiên cứu mô hình chủ nghĩa xã hội ở Việt Nam: Một số vấn đề cần quan tâm
10
104
2
Luận văn Thạc sĩ Giáo dục học: Vận dụng mô hình dạy học điều tra vào dạy một số chủ đề trong sách giáo khoa Vật lí 10 Nâng cao
125
138
1
Luận văn Thạc sĩ Sư phạm Toán: Dạy học mô hình hóa toán học chủ đề Hàm số trong chương trình trung học cơ sở
117
101
6
TÀI LIỆU XEM NHIỀU
Một Case Về Hematology (1)
8
461868
55
Giới thiệu :Lập trình mã nguồn mở
14
22645
59
Tiểu luận: Tư tưởng Hồ Chí Minh về xây dựng nhà nước trong sạch vững mạnh
13
10893
529
Câu hỏi và đáp án bài tập tình huống Quản trị học
14
10067
446
Phân tích và làm rõ ý kiến sau: “Bài thơ Tự tình II vừa nói lên bi kịch duyên phận vừa cho thấy khát vọng sống, khát vọng hạnh phúc của Hồ Xuân Hương”
3
9522
104
Ebook Facts and Figures – Basic reading practice: Phần 1 – Đặng Tuấn Anh (Dịch)
249
8283
1125
Tiểu luận: Nội dung tư tưởng Hồ Chí Minh về đạo đức
16
8240
423
Mẫu đơn thông tin ứng viên ngân hàng VIB
8
7864
2220
Đề tài: Dự án kinh doanh thời trang quần áo nữ
17
6687
253
Vật lý hạt cơ bản (1)
29
5771
85
TỪ KHÓA LIÊN QUAN
Ngôn ngữ học
Mô hình chủ đề
Khai phá văn bản
Phân loại văn bản tiếng Việt
Văn bản tiếng Việt
Phân loại văn bản tiếng Việt theo chủ đề
Tiêu luận Phân tích mô hình quản lý
Quản lý dự án
Mô hình chủ đầu tư quản lý
Cải tiến mô hình quản lý
Thực trạng mô hình quản lý
Đề tài Quản lý dự án
Nghiên cứu ứng dụng mô hình
Tổng quan về mô hình WetSpass
Cơ sở lý thuyết mô hình WetSpass
Ứng dụng mô hình WetSpass
Mô hình WetSpass
Lý thuyết Naive Bayes
Khai phá dữ liệu
Luận văn Thạc sĩ
Luận văn Thạc sĩ Công nghệ thông tin
Công cụ tìm kiếm ngữ nghĩa
Mô hình các chủ đề
Quy trình xây dựng mô hình các chủ đề
Thuâṭ toán Latent Dirichlet Allocation
Công nghệ thông tin
Hệ thống thông tin
Mô hình chủ đề ẩn
Mô hình phân hạng
Dòng cập nhật trang thái
Mạng xã hội Twitter
Mô hình dạy học theo chủ đề
Vận dụng mô hình dạy học
Cân bằng của vật rắn
Dạy học Cân bằng của vật rắn
Vật lý 10 trung học phổ thông
Dạy học Vật lý ở CHDCND Lào
Mô hình đề xuất
Mô hình LDA
Cải thiện mô hình tính hạng
Phương pháp học tính hạng
Mô hình chủ nghĩa xã hội
Mô hình xã hội chủ nghĩa của Việt Nam
Văn kiện Đại hội lần thứ XI
4 trụ cột của sự phát triển đất nước
Văn kiện Đại hội lần thứ XII
Mô hình dạy học điều tra
Vận dụng mô hình dạy học điều tra
Dạy học điều tra theo chủ đề
Chuyển động thẳng biến đổi đều
Dạy học Các lực cơ học
Dạy học điều tra môn Vật lí
Luận văn Thạc sĩ Sư phạm Toán
Phương pháp dạy học môn Toán
Dạy học mô hình hóa toán học
Chủ đề Hàm số
Phương pháp dạy học bằng mô hình hóa
Mô hình 5E
Dạy học theo mô hình 5E
Chủ đề sinh trưởng của vi sinh vật
Dạy học sinh học 10
Tổ chức dạy học tích hợp
Chủ đề dạy học STEAM
Mô hình giáo dục STEAM
Dạy học chủ đề phòng học xanh
Dạy học môn Sinh học 11
Quy trình thiết kế bài học STEAM
Ứng dụng mô hình CAPM
Xác định chi phí vốn
Mô hình tài chính
Xác định giá trị tài sản
Mô hình CAPM
Định giá chứng khoán
Đề tài chứng khoán
Mô hình dữ liệu đất đai
Mô hình chức năng
Hệ thống thông tin đất đai
Thông tin đất đai
Tài nguyên đất đai
Nguồn lực đất đai
Năng lực mô hình hóa toán học
Đánh giá năng lực mô hình hóa toán học
Giá trị lớn nhất – giá trị nhỏ nhất của hàm số
Năng lực mô hình hóa
Hàm số dạy ở lớp 12
Bài giảng Triết học
Chủ nghĩa duy vật
Chủ nghĩa duy tâm
Giai đoạn phát triển
Chủ nghĩa tư bản
Mô hình nhà nước
Mô hình phân quyền
Khảo sát hiện trạng
Xác định yêu cầu
Đặc tả yêu cầu
Mô hình phần tích
Mô hình mô tả yêu cầu khách hàng
Mô hình hóa yêu cầu
Hệ thức lượng trong tam giác
Dạy học môn Hình học 10
Mô hình toán học
Đổi mới giáo dục
Chương trình tích hợp
Mô hình đa môn
Mô hình dựa trên chuỗi vấn đề
Mô hình dựa trên chủ đề
Chương trình dạy học tích hợp
Giáo dục phổ thông Australia
chủ đề mạng
mạng truyền thông
tài liệu mạng
kiến trúc phân tầng
mô hình OSI
Suy diễn hậu nghiệm
Online Frank Wolfe
Học trực tuyến
Xấp xỉ ngẫu nhiên
Thuật toán Online Maximum a Posterior Estimation
Luận án tiến sĩ
Luận án tiến sĩ Khoa học máy tính
Khoa học máy tính
Phân tích mạng xã hội
Mô hình chủ đề và ứng dụng
Phân lớp khối lượng lớn văn bản
Phân lớp văn bản theo chủ đề
Xây dựng mô hình phân tán
Phân lớp văn bản
Khai thác dữ liệu
Bài toán suy diễn hậu nghiệm
Bài toán tối ưu không lồi
Bài toán NP Hard
Phương pháp biến phân Variational Bayes
TÀI LIỆU MỚI ĐĂNG
CẤU TẠO HẠT NHÂN NGUYÊN TỬ-ĐỘ HỤT KHỐI-NĂNG LƯỢNG LIÊN KẾT-LK RIÊNG
12
268
0
27-04-2024
extremetech Hacking BlackBerry phần 9
31
250
0
27-04-2024
extremetech Hacking Firefox phần 7
46
187
0
27-04-2024
Anh văn bằng C-124
8
175
0
27-04-2024
MySQL Basics for Visual Learners PHẦN 9
15
184
0
27-04-2024
Công nghiệp gang thép Việt Nam : Một giai đoạn phát triển và chuyển đổi chính sách mới part 5
6
194
0
27-04-2024
MySQL Database Usage & Administration PHẦN 7
37
156
0
27-04-2024
MySQL Database Usage & Administration PHẦN 9
37
141
0
27-04-2024
BÀI GIẢNG VỀ - MẠCH ĐIỆN II - Chương I: Phân tích mạch trong miền thời gian
38
140
0
27-04-2024
Lịch sử Đội TNTP Hồ Chí Minh - CHƯƠNG III VÂNG LỜI BÁC DẠY, LÀM NGHÌN VIỆC TỐT, CHỐNG MỸ, CỨU NƯỚC, THIẾU NIÊN SĂN SÀNG
45
137
0
27-04-2024
TÀI LIỆU HOT
Mẫu đơn thông tin ứng viên ngân hàng VIB
8
7864
2220
Giáo trình Tư tưởng Hồ Chí Minh - Mạch Quang Thắng (Dành cho bậc ĐH - Không chuyên ngành Lý luận chính trị)
152
5738
1368
Ebook Chào con ba mẹ đã sẵn sàng
112
3767
1231
Ebook Tuyển tập đề bài và bài văn nghị luận xã hội: Phần 1
62
5321
1136
Ebook Facts and Figures – Basic reading practice: Phần 1 – Đặng Tuấn Anh (Dịch)
249
8283
1125
Giáo trình Văn hóa kinh doanh - PGS.TS. Dương Thị Liễu
561
3500
643
Tiểu luận: Tư tưởng Hồ Chí Minh về xây dựng nhà nước trong sạch vững mạnh
13
10893
529
Giáo trình Sinh lí học trẻ em: Phần 1 - TS Lê Thanh Vân
122
3685
525
Giáo trình Pháp luật đại cương: Phần 1 - NXB ĐH Sư Phạm
274
4052
516
Bài tập nhóm quản lý dự án: Dự án xây dựng quán cafe
35
4129
480
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.