TAILIEUCHUNG - Tăng tốc tìm kiếm tài nguyên học tập theo nội dung bằng kỹ thuật xử lý dữ liệu lớn

Bài viết này đề xuất giải pháp nhằm tăng tốc tìm kiếm tài nguyên học tập theo nội dung dựa trên các kỹ thuật xử lý dữ liệu lớn. Cụ thể, các kỹ thuật xử lý văn bản được sử dụng trên nền tảng Hadoop như tách từ tiếng Việt, loại bỏ từ dừng, tính trọng số TF-IDF (Term Frequency-Inverse Document Frequency), biểu diễn văn bản thành dạng không gian vectơ, tính độ tương đồng cosine để đo mức độ tương tự của các từ khóa trong tài liệu nhằm trả về tài liệu có độ tương đồng cao nhất. | Trần Thanh Điện Nguyễn Ngọc Tuấn Nguyễn Thanh Hải Nguyễn Thái Nghe 171 Tăng Tốc Tìm Kiếm Tài Nguyên Học Tập Theo Nội Dung Bằng Kỹ Thuật Xử Lý Dữ Liệu Lớn Trần Thanh Điện1 Nguyễn Ngọc Tuấn2 Nguyễn Thanh Hải1 Nguyễn Thái Nghe1 1 Khoa Công nghệ Thông tin và Truyền thông Trường Đại học Cần Thơ thanhdien ntnghe @ 2 Ban Phát triển Hệ thống Công nghệ Thông tin Trường Đại học Trà Vinh ngoctuan@ Tóm tắt. Học tập trực tuyến là một giải pháp khá hữu hiệu trong môi trường giáo dục đào tạo. Tuy nhiên người học còn gặp nhiều khó khăn trong tìm kiếm tài nguyên học tập do tên các tài nguyên khi được lưu trữ chưa phản ánh được từ khóa người dùng mong đợi. Vì vậy làm cách nào để tìm chính xác các từ khóa trong nội dung tài nguyên học tập thay vì tìm kiếm thông thường từ các meta-data là rất cần thiết để hỗ trợ người học tiết kiệm thời gian công sức. Hiện có nhiều nghiên cứu về tìm kiếm tài nguyên học tập theo nội dung đã cho kết quả khá chính xác tuy nhiên khi khối lượng tài nguyên ngày càng tăng thì việc tìm kiếm vận hành khá chậm. Bài viết này đề xuất giải pháp nhằm tăng tốc tìm kiếm tài nguyên học tập theo nội dung dựa trên các kỹ thuật xử lý dữ liệu lớn. Cụ thể các kỹ thuật xử lý văn bản được sử dụng trên nền tảng Hadoop như tách từ tiếng Việt loại bỏ từ dừng tính trọng số TF-IDF Term Frequency-Inverse Document Frequency biểu diễn văn bản thành dạng không gian vectơ tính độ tương đồng cosine để đo mức độ tương tự của các từ khóa trong tài liệu nhằm trả về tài liệu có độ tương đồng cao nhất. Thực nghiệm trên một số tài liệu tiếng Việt cho thấy việc xử lý song song rút ngắn thời gian tìm kiếm hơn rất nhiều so với tìm kiếm truyền thống trong khi độ chính xác không thay đổi. Từ khóa Tài nguyên học tập tìm kiếm dựa trên nội dung dữ liệu lớn Hadoop MapReduce độ tương đồng. Abstract. Online learning is a quite effective solution in education and training environment. Howev- er learners still face many difficulties in searching learning resources because .

• Cơ sở dữ liệu
• Tìm kiếm tài nguyên học tập
• Tìm kiếm dựa trên nội dung
• Học tập trực tuyến
• Kỹ thuật xử lý dữ liệu lớn
• Kỹ thuật xử lý văn bản
• Ứng dụng phần mềm mã nguồn mở
• Phần mềm mã nguồn mở Vufind
• Mô hình tìm kiếm tài nguyên
• Đại học vùng
• Tìm kiếm tài nguyên
• Bài giảng Tin học căn bản
• Tin học căn bản
• Quản lý tài nguyên
• Quy tắc đặt tên tập tin
• Windows Explorer
• Tìm kiếm tập tin thư mục
• Thuật toán thông dụng
• Tài liệu tin học
• Thuật toán tìm kiếm
• Thuật toán sắp xếp
• Nguyên lý tham
• Bài tập lý thuyết trò chơi
• Luận văn thạc sĩ
• Tóm tắt luận văn thạc sĩ kỹ thuật
• Chương trình tích hợp xử lý chữ viết tắt
• Chương trình xử lý gõ tắt
• Chương trình xử lý văn bản
• Luận văn thạc sĩ kỹ thuật
• Kỹ thuật sửa chữa máy tính
• Kỹ thuật lắp ráp máy tính
• Tin học văn phòng
• Giáo trình Tin học văn phòng
• Kỹ thuật xử lý bảng tính
• Kỹ thuật soạn thảo văn bản
• Xử lý bảng biểu
• Bài giảng Kỹ thuật đồ họa và xử lý ảnh
• Kỹ thuật đồ họa
• Xử lý ảnh
• Photoshop CS
• Xử lý văn bản
• Giao diện màn hình
• Giáo trình thực hành Kỹ năng tin học
• Kỹ năng tin học
• Kỹ năng xử lý văn bản chuyên nghiệp
• Kỹ năng xử lý bảng tính nâng cao
• Kỹ năng trình chiếu ấn tượng
• Kỹ năng xử lý file PDF
• Đề cương môn Kỹ thuật lập trình
• Kỹ thuật lập trình
• Kỹ thuật xử lý mảng 2 chiều
• Kỹ thuật xử lý file văn bản
• Kỹ thuật viết hàm
• Soạn thảo văn bản
• Kỹ thuật sửa chữa lắp ráp máy tính
• Phần mềm xử lý văn bản
• Định dạng văn bản
• Xử lý văn bản tiếng Việt
• Kiểm tra đề tài tốt nghiệp
• Khoa học máy tính
• Luận văn công nghệ thông tin
• Ngôn ngữ tự nhiên
• Xử lý ngôn ngữ tự nhiên
• Luận văn khoa học máy tính
• Đồ họa trên Windows
• Xử lý đồ họa
• Lập trình Windows
• Kỹ thuật lập trình Windows
• Phương pháp lập trình Windows
• Ngôn ngữ lập trình Windows
• Bài giảng Xử lý ngôn ngữ tự nhiên
• Tóm tắt văn bản
• Trích xuất văn bản
• Cơ sở lập trình
• Giáo trình cơ sở lập trình
• Tài liệu cơ sở lập trình
• Kỹ thuật xử lý mảng
• Kỹ thuật sửa chữa
• Lắp ráp máy tính
• Phần mềm Microsoft Office 2003
• Sao chép văn bản
• Kỹ năng soạn thảo văn bản
• Truy vấn dữ liệu
• Nhập nhằng trong tiếng Việt
• Xử lý tiếng Việt
• Luận văn khoa học máy tínhĩ
• Phân lớp văn bản
• Biểu diễn nhị phân
• Ma trận từ văn bản
• Wolfram Alpha
• kỹ năng văn phòng
• kỹ năng soạn thảo
• trình bày văn bản
• soạn thỏa văn bản
• thủ thuật máy tính
• Bài giảng Kỹ thuật lập trình
• Tệp văn bản
• Tệp nhị phân
• Khai báo tệp văn bản
• Truy cập ngẫu nhiên
• Hàm xử lý tệp
• Bài giảng Lập trình nâng cao
• File operations
• Thao tác với tệp
• Kỹ thuật xử lý lỗi đơn giản
• Nhập liệu từ tệp văn bản
• Xử lý lỗi với tệp
• Bài toán khai thác dữ liệu
• Khai thác dữ liệu tiếng dân tộc
• Kỹ thuật phân lớp dữ liệu
• Bài toán phân lớp văn bản
• Luận văn Thạc sĩ Khoa học máy tính
• Kỹ thuật tóm tắt đa văn bản
• Mô hình đồ thị
• Xử lý ngôn ngữ tự nhiên tiếng Việt
• Công nghệ thông tin
• quản trị mạng
• tin học máy tính
• Xử lý văn bản và Font chữ
• lập trình macro