TAILIEUCHUNG - So sánh văn bản dựa trên mô hình véc-tơ

Trong bài báo này, chúng tôi trình bày các kết quả nghiên cứu liên quan đến việc so sánh mức độ giống nhau của hai văn bản. Việc so sánh này phục vụ mục đích xác định mức độ giống nhau của một văn bản này với một văn bản khác. Phương pháp nghiên cứu nhằm đề xuất là chuyển các văn bản thành các véc-tơ. Mỗi phần tử của véc-tơ là trọng số tương ứng với từ chỉ mục xuất hiện trong văn bản. Việc so sánh mức độ giống nhau của hai văn bản được chuyển về tính góc tạo bởi hai véc-tơ. Góc này đặc trưng cho mức độ giống/khác nhau giữa hai văn bản. | ISSN 1859-1531 - TẠP CHÍ KHOA HỌC VÀ CÔNG NGHỆ ĐẠI HỌC ĐÀ NẴNG, SỐ 3(112).2017-Quyển 1 105 SO SÁNH VĂN BẢN DỰA TRÊN MÔ HÌNH VÉC-TƠ COMPARISON OF THE DOCUMENTS BASED ON VECTOR MODEL Võ Trung Hùng1, Nguyễn Thị Ngọc Anh1, Hồ Phan Hiếu1, Nguyễn Ngọc Huyền Trân2, Võ Duy Thanh2 1 Đại học Đà Nẵng; vthung@, ntnanh@, hophanhieu@ 2 Trường Cao đẳng CNTT Hữu nghị Việt - Hàn; nguyenngochuyentran84@, thanhvd59@ Tóm tắt - Trong bài báo này, chúng tôi trình bày các kết quả nghiên cứu liên quan đến việc so sánh mức độ giống nhau của hai văn bản. Việc so sánh này phục vụ mục đích xác định mức độ giống nhau của một văn bản này với một văn bản khác. Phương pháp của chúng tôi đề xuất là chuyển các văn bản thành các véc-tơ. Mỗi phần tử của véc-tơ là trọng số tương ứng với từ chỉ mục xuất hiện trong văn bản. Việc so sánh mức độ giống nhau của hai văn bản được chuyển về tính góc tạo bởi hai véc-tơ. Góc này đặc trưng cho mức độ giống/khác nhau giữa hai văn bản. Chúng tôi đã phát triển công cụ phục vụ so sánh hai văn bản hoặc một văn bản với một tập n văn bản cho trước. Kết quả đạt được phản ánh đúng mức độ giống/khác nhau và đáp ứng mục tiêu đặt ra. Abstract - In this paper, we present the result of the study related to the comparability of two documents. This comparison aims to determine the similarity of a text/document with an other one. Our method is converting a document into a vector. Each element of vector is a weight corresponding to the index term that appears in the text. The similarity comparison of the two texts are transformed into angles created by two vectors. This angle represents the similarity/difference between the two documents. We have developed a tool that compares a document with two or a set of documents. The results reflect exactly the similarity/difference and the achievement of the objectives. Từ khóa - mô hình véc-tơ; so sánh văn bản; phát hiện sao chép; độ đo; véc-tơ hóa Key words - vector model; document .

• Toán học
• So sánh văn bản
• Mô hình véc tơ
• Phát hiện sao chép
• Chuyển các văn bản thành các véc tơ
• Phần tử của véc tơ
• Góc tạo bởi hai véc tơ
• Đề tài nghiên cứu khoa học
• So sánh tu từ trong các văn bản
• So sánh tu từ trong văn học
• Dạy học so sánh tu từ
• So sánh tu từ
• Quy phạm pháp luật hành chính
• So sánh văn bản hành chính
• Văn bản hành chính thông thường
• Văn bản hành chính
• Văn bản quy phạm
• văn bản văn học
• tác phẩm văn học
• văn bản học
• sự so sánh trong văn học
• định nghĩa văn bản học
• định nghĩa tác phẩm văn học
• Luận án tiến sĩ khoa học giáo dục
• Vấn đề đọc hiểu văn bản
• Chương trình môn Ngữ văn
• So sánh vấn đề đọc hiểu văn bản
• Đổi mới vấn đề đọc hiểu văn bản
• Nghiên cứu khoa học
• Đề tài nghiên cứu khoa học cấp trường
• Kĩ thuật đánh giá độ tương đồng văn bản
• So sánh văn bản Tiếng Việt
• Độ tương đồng văn bản
• Đặc điểm ngôn ngữ tiếng Việt
• Luận văn Thạc sĩ Văn học
• Thơ Thiền Việt Nam thời Lý Trần
• Thơ Thiền Nhật Bản
• So sánh thơ thiền Việt Nam Nhật Bản
• Văn học Việt Nam
• Đặc điểm thơ Thiền Việt Nam
• So sánh doanh nghiệp Việt Nam
• Doanh nghiệp Nhật Bản
• Cở sở văn hóa Nhật Bản
• Nét độc đáo của văn hóa doanh nghiệp Nhật Bản
• Nguyên tắc quản lý 5S
• Luận án tiến sĩ
• Luận án tiến sĩ ngữ văn
• Luận án tiến sĩ sư phạm
• Luận án lý luận ngôn ngữ
• Phương pháp so sánh trong văn bản luật tục Êđê
• Đề tài lý luận ngôn ngữ
• Luận văn sư phạm ngữ văn
• Sáng kiến kinh nghiệm
• Sáng kiến kinh nghiệm THPT
• Sáng kiến kinh nghiệm môn Ngữ văn
• Thao tác lập luận so sánh
• Đọc hiểu văn bản văn học Việt Nam
• Tóm tắt Luận án Tiến sĩ
• Phương pháp dạy học bộ môn Văn
• Chương trình giáo dục phổ thông
• Phương pháp dạy học đọc hiểu
• Luận văn Thạc sĩ
• Luận văn Thạc sĩ Luật học
• Luật Kinh tế
• Công ty hợp danh
• So sánh pháp luật Việt Nam
• Pháp luật Nhật Bản
• ngữ văn lớp 12
• tài liệu văn lớp 12
• ngữ văn trung học
• giáo án ngư văn
• Văn bản pháp luật
• Văn bản quy phạm pháp luật
• Văn bản áp dụng pháp luật
• Kỹ thuật soạn thảo văn bản
• Văn bản luật
• Soạn thảo văn bản luật
• Luận án Tiến sĩ Ngôn ngữ học
• Ngôn ngữ học so sánh đối chiếu
• Văn bản hợp đồng kinh tế
• luận văn
• SO SÁNH NGHỆ THUẬT
• NGHỆ THUẬT TỰ SỰ
• TRUYỆN NGẮN CỦA NAM CAO
• Luật Kinh tế
• So sánh pháp luật
• Thuế thu nhập doanh nghiệp
• Quản lý nền kinh tế
• Giải quyết tranh chấp lao động
• ngôn ngữ học
• phương pháp dạy học
• so sánh văn hóa
• văn hóa Việt Nam
• văn hóa Nhật
• Biễu mẫu
• văn bản
• đơn từ
• tờ khai hành chính
• Đăng ký tổ chức trưng bày hàng giả
• hàng vi phạm quyền sở hữu trí tuệ để so sánh với hàng thật
• Phương thức danh hóa trong tiếng Anh
• Phương thức danh hóa trong tiếng Việt
• Phương thức danh hóa
• Ứng dụng thuật toán xâu con chung dài nhất
• Thuật toán xâu con chung dài nhất
• Xâu con chung dài nhất
• Danh sách kề
• Sắp xếp đếm phân phối
• So sánh đối chiếu
• Phong cách văn bản
• Đối chiếu các từ ngữ chỉ màu sắc
• Văn bản tiếng Việt
• Văn bản tiếng Anh
• Phương thích nối trong văn bản
• Quan hệ giữa phép nối
• Ngữ pháp của phép nối