TAILIEUCHUNG - Tối ưu dữ liệu lớn hàng hải gom cụm K nhóm theo trung bình dựa vào mô hình mapreuce

Bài nghiên cứu này cho biết một thuật toán gom cụm được gọi là K-means dựa trên mô hình MapReduce để xử lý dữ liệu hàng hải tàu biển tại khu vực miền Nam, Việt Nam. Với kết quả thu được, chúng tôi đưa ra suy luận hoặc dự đoán về dữ liệu gom cụm mà chúng được thu thập và sau đó là hiển thị dữ liệu của các hàng hải tàu biển, bao gồm quy mô, hướng và phân bố không gian. | TẠP CHÍ ISSN 1859-316X KHOA HỌC CÔNG NGHỆ HÀNG HẢI KHOA HỌC - CÔNG NGHỆ JOURNAL OF MARINE SCIENCE AND TECHNOLOGY TỐI ƯU DỮ LIỆU LỚN HÀNG HẢI GOM CỤM K NHÓM THEO TRUNG BÌNH DỰA VÀO MÔ HÌNH MAPREUCE OPTIMIZED THE MARITIME BIG DATA K-MEANS CLUSTERING BASED ON THE MAPREDUCE MODEL PHẠM TUẤN ANH1 2 ĐẶNG XUÂN KIÊN1 PHẠM TÂM THÀNH3 1 Trường Đại học Giao thông vận tải Thành phố Hồ Chí Minh 2 Tổng Công ty Bảo đảm an toàn Hàng hải Miền Nam 3 Trường Đại học Hàng hải Việt Nam Email liên hệ phamtamthanh@ Tóm tắt applications to process big data on large clusters Với sự phát triển của công nghệ thông tin dữ liệu of commodity machines. This study a standard hàng hải lớn đang là xu hướng ngày càng tăng clustering algorithm called K-means is based on của các ứng dụng nhằm xử lý mà không đủ bộ nhớ the MapReduce model to be processed the marine chính của việc phân tích dữ liệu lớn đang là bài traffic data in southern region Viet Nam. toán thách thức hiện nay. Đối với ứng dụng According to the main results obtained we chuyên sâu dữ liệu hàng hải lớn thuật ngữ concerned with making inference or prediction the MapReduce gần đây đã thu hút sự chú ý đáng clustering data which were collected and were kể và bắt đầu được nghiên cứu để phân tích mà có shown the dashboard of maritime vessels traffic thể xử lý hàng petabyte dữ liệu AIS cho hàng triệu including the scale the trend of change and the tàu thuyền. MapReduce là một mô hình lập trình spatial distribution situation. cho phép dễ dàng phát triển các ứng dụng song Keywords MapReduce K-means AIS data data song có thể mở rộng để xử lý dữ liệu lớn trên các mining. cụm máy tính 1 . Trong bài nghiên cứu này một thuật toán gom cụm được gọi là K-means dựa trên mô hình MapReduce để xử lý dữ liệu hàng hải tàu 1. Đặt vấn đề biển tại khu vực miền Nam Việt Nam. Với kết quả Với sự phát triển mạnh mẽ của kinh tế biển với thu được chúng tôi đưa ra suy luận hoặc dự đoán mật độ tàu thuyền dày đặc đặc biệt là tập trung các về dữ liệu gom cụm .

• Cơ khí - Chế tạo máy
• Mô hình mapreuce
• Dữ liệu AIS
• Khai phá dữ liệu
• Thuật toán K means
• Kiến trúc Hadoop
• Gom cụm K mean