TAILIEUCHUNG - Bài giảng Nhập môn khai phá dữ liệu: Chương 1 - PGS. TS. Hà Quang Thụy

Bài giảng Nhập môn khai phá dữ liệu - Chương 1: Giới thiệu chung về khai phá dữ liệu. Những nội dung chính trong chương này gồm có: Tại sao khai phá dữ liệu? Khái niệm khai phá dữ liệu và phát hiện tri thức trong cơ sở dữ liệu, khai phá dữ liệu và xử lý cơ sở dữ liệu truyền thống, kiểu dữ liệu trong khai phá dữ liệu, kiểu mẫu được khai phá, công nghệ khai phá dữ liệu điển hình, một số ứng dụng điển hình, các vấn đề chính trong khai phá dữ liệu. | BÀI GIẢNG NHẬP MÔN KHAI PHÁ DỮ LIỆU CHƯƠNG 1. GIỚI THIỆU CHUNG VỀ KHAI PHÁ DỮ LIỆU PGS. TS. Hà Quang Thụy HÀ NỘI 09-2020 TRƯỜNG ĐẠI HỌC CÔNG NGHỆ ĐẠI HỌC QUỐC GIA HÀ NỘI http thuyhq 1 Nội dung 1. Tại sao khai phá dữ liệu KPDL 2. Khái niệm KPDL và phát hiện tri thức trong CSDL 3. KPDL và xử lý CSDL truyền thống 4. Kiểu dữ liệu trong KPDL 5. Kiểu mẫu được khai phá 6. Công nghệ KPDL điển hình 7. Một số ứng dụng điển hình 8. Các vấn đề chính trong KPDL 2 1. Tại sao khai phá dữ liệu Một ví dụ Donal Trump Thắng cử Tổng thống Mỹ Bùng nổ dữ liệu và dữ liệu lớn Big Data Lý do công nghệ Lý do xã hội Thể hiện Ngành kinh tế tri thức dữ liệu và thông tin Infonomics Kinh tế tri thức Phát hiện tri thức từ dữ liệu Nhu cầu khai phá dữ liệu tại Việt Nam Trường hè KHDL 2016 3 Ví dụ Tại sao khai phá dữ liệu Phân tích dữ liệu giúp ứng viên Tổng thống Mỹ 1. Đào Trung Thành. Big Data đã giúp Trump chiến thắng trong cuộc Bầu cử Mỹ. http vn cong-nghe ung-dung big-data-giup-donald-trump-chien-thang- . 13 12 2016 15 02 GMT 7 . Big Data nguy hiểm tới mức nào http vn cong- nghe ung-dung big-data-da-giup-trump-chien-thang-trong-cuoc-bau-cu-my-the-nao- 10 02 2017 21 55 30 GMT 7 TÍNH MỚI LẠ TỪ DỮ LIỆU LỚN 2. TRẦN THẮNG kỹ sư hàng không ở Mỹ . Mạng xã hội giúp ông Trump đắc cử tổng thống Mỹ như thế nào http tin the-gioi bau-cu-tong-thong-my- 2016 20161110 it-phieu-hon-vi-sao-ong-trum-dac-cu-tong-thong-my 10 11 2016 19 15 GMT 7 TÍNH KHÁC BIỆT TWITER TRUYỀN THÔNG TT 3. Von Hannes Grassegger und Mikael Krogerus. Ich habe nur gezeigt dass es die Bombe gibt. Das Magazin N 48 3. Dezember 2016. https 2016 12 03 ich-habe-nur-gezeigt-dass-es-die-bombe-gibt . Nhà tâm lý học Michal Kosinski phát triển một phương pháp phân tích tinh tế mọi người dựa trên hành vi của họ trên Facebook. Và như thế giúp Donald Trump chiến thắng. PHƯƠNG PHÁP KỸ THUẬT MIỀN

• Cơ sở dữ liệu
• Nhập môn khai phá dữ liệu
• Khai phá dữ liệu
• Bài giảng Nhập môn khai phá dữ liệu
• Cơ sở dữ liệu
• Phát hiện tri thức
• Xử lý cơ sở dữ liệu truyền thống
• Bài giảng Nhập môn Học máy và Khai phá dữ liệu
• Nhập môn Học máy và Khai phá dữ liệu
• Học máy và khai phá dữ liệu
• Kiểu dữ liệu có cấu trúc
• Kiểu dữ liệu phi cấu trúc
• Tài nguyên khai phá dữ liệu
• Khai phá quy trình
• Học máy suốt đời
• Kiểu mẫu được khai phá
• Công nghệ khai phá dữ liệu
• Machine learning
• Data mining
• Xử lý cơ sở dữ liệu
• Kiểu dữ liệu
• Khai phá luật kết hợp
• Association rule
• Khai phá tập mục thường xuyên
• Mô hình luật kết hợp
• Giải thuật Apriori
• Hiểu dữ liệu
• Tiền xử lý dữ liệu
• Phân cụm dữ liệu
• Hệ thống tư vấn
• Kỹ thuật tư vấn
• Các bài toán điển hình phân lớp
• Đặc trưng khai phá dữ liệu
• Các thuật toán Bayes
• Phương pháp học máy
• Thư viện Scikit learn
• Học dựa trên xác suất
• Thu thập dữ liệu
• Lựa chọn dữ liệu
• Chuyển đổi dữ liệu
• Công nghệ tri thức
• Kinh tế tri thức
• Công nghệ thông tin
• Phân lớp học giám sát
• Phân lớp học bán giám sát
• Học máy giám sát
• Tập dữ liệu
• Dữ liệu chuỗi di truyền
• Biểu đồ histogram
• Quá trình học máy
• Phương pháp học hồi quy
• Phương pháp học quy nạp luật
• Phương pháp học cây quyết định
• Đánh giá hiệu năng hệ thống
• Tiêu chí đánh giá hiệu năng hệ thống
• Nguyên lý Occam’s razor
• Đánh giá hiệu năng hệ thống học máy
• Bài toán hồi quy
• Hồi quy tuyến tính
• Hàm đánh giá lỗi
• Giải thuật hồi quy tuyến tính
• Bài toán phân lớp
• Học dựa trên các láng giềng gần nhất
• Nearest neighbors learning
• Giải thuật phân lớp k NN
• Phương pháp học dựa trên xác suất
• Probabilistic learning
• Biến ngẫu nhiên đa trị
• Biểu diễn xác suất
• Cây quyết định
• Decision tree
• Biểu diễn cây quyết định
• Học cây quyết định
• Mạng nơron nhân tạo
• Artificial neural network
• Mạng nơ ron học sâu
• Quy tắc học trọng số tổng quát
• Máy vectơ hỗ trợ
• Support vector machine
• Mặt siêu phẳng phân tách
• Lý thuyết tối ưu có ràng buộc
• Bài toán phân cụm
• Phân cụm dựa trên phân tách k Means
• Phân cụm phân cấp HAC
• Học có giám sát