TAILIEUCHUNG - Phân tích hiệu năng của kiến trúc tính toán song song trên nền Hadoop Framework

Bài viết sẽ đề xuất giải pháp sử dụng kiến trúc tính toán song song Hive trên nền Hadoop cho bài toán xử lý luồng gói tin trong mạng nhằm phát hiện sự có mặt của Virus đồng thời phân tích và đưa ra một số biện pháp cải tiến hiệu năng cho hệ thống tính toán. | ISSN 2354-0575 PHÂN TÍCH HIỆU NĂNG CỦA KIẾN TRÚC TÍNH TOÁN SONG SONG TRÊN NỀN HADOOP FRAMEWORK Nguyễn Minh Quý Hồ Khánh Lâm Nguyễn Xuân Trường Nguyễn Đình Hân Nguyễn Văn Hậu Đỗ Anh Tuấn Phạm Quốc Hùng Trường Đại học Sư phạm Kỹ thuật Hưng Yên Ngày tòa soạn nhận được bài báo 08 04 2019 Ngày phản biện đánh giá và sửa chữa 07 05 2019 Ngày bài báo được duyệt đăng 16 05 2019 Tóm tắt Kiến trúc tính toán song song dựa trên hệ thống cụm máy tính sử dụng Hadoop framework trong vài năm trở lại đây nhận được sự quan tâm rất lớn vì khả năng tính toán và mở rộng của hệ thống khá thuận lợi và dễ dàng đặc biệt là trong xử lý dữ liệu cực lớn lên tới hàng Tera-byte hay thậm chí là Peta-byte. Tuy nhiên hiệu năng của kiến trúc này phụ thuộc vào nhiều yếu tố như cài đặt thuật toán tối ưu hóa câu lệnh HiveQL kiến trúc cluster Bài báo này sẽ đề xuất giải pháp sử dụng kiến trúc tính toán song song Hive trên nền Hadoop cho bài toán xử lý luồng gói tin trong mạng nhằm phát hiện sự có mặt của Virus đồng thời phân tích và đưa ra một số biện pháp cải tiến hiệu năng cho hệ thống tính toán. Từ khóa Hadoop big data parallel processing performance analysis tính toán song song. I. GIỚI THIỆU Hadoop đã về nhất khi sắp xếp TB mất Trong lĩnh vực phân tích các thông tin di với 2100 nodes 5 . chuyển trong mạng Network Traffic phương pháp Trong bài báo này chúng tôi sẽ đưa ra mô giám sát dựa trên các luồng Flow là một trong hình xử lý luồng gói tin trên nền tảng Hadoop những phương pháp được sử dụng rất rộng rãi. Việc Framework ở phần II. Phần III sẽ đề cập một nền phân tích luồng có thể giúp chúng ta phát hiện được tảng khác là Hive Framework 6 được phát triển sự có mặt của Virus tấn công DDoS phát hiện mất trên nền Hadoop để làm đơn giản hóa tương tác cân bằng tải mức độ sử dụng Lý do người ta giữa nhà phát triển và Hadoop sử dụng các câu lệnh sử dụng phương pháp này đó là bởi vì nó không đi tương tác giống như truy vấn SQL quen thuộc. Phần vào phân tích nội dung của gói tin .

TỪ KHÓA LIÊN QUAN
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.