TAILIEUCHUNG - DATA MINING AND APPLICATION: QUI TRÌNH CHUẨN BỊ DỮ LIỆU

Tại sao cần chuẩn bị dữ liệu?. Làm sạch dữ liệu ( data cleaning) . Chọn lọc dữ liệu (data selection) . Rút gọn dữ liệu ( data reduction) . Mã hoá dữ liệu3CÁC KIỂU DỮ LIỆUDữ liệu dạng thuộc tính giá trị (Attribute-value data) Các kiểu dữ liệu số (numeric), phi số (categorical) Tĩnh, động (thời gian) Các dạng dữ liệu khác. | KHAI THÁC DỮ LIỆU ỨNG DỤNG DATA MINING GV ThS. NGUYỄN HOÀNG TÚ ANH BÀI 2 QUI TRÌNH CHUẨN BỊ DỮ LIỆU 2 1 NỘI DUNG 0 -------------------------------- 1. Tại sao cần chuẩn bị dữ liệu 2. Làm sạch dữ liệu data cleaning 3. Chọn lọc dữ liệu data selection 4. Rút gọn dữ liệu data reduction 5. Mã hoá dữ liệu 3 CÁC KIỀU DỮ LIÊU 4 Dữ liệu dạng thuộc tính -giá trị Attribute-value data Các kiểu dữ liệu số numeric phi số categorical Tĩnh động thời gian Các dạng dữ liệu khác DL phân tán DL văn bản DL web siêu DL Hình ảnh audio video 2 CHUAN BỊ DỮ LIỆU Dữ liệu trong thực tế có chất lượng xấu DL thiếu không đầy đủ thiếu giá trị của thuộc tính thiếu các thuộc tính quan tâm hoặc chỉ chứa DL tích hợp o VD tuổi cân nặng f DL bị tạp nhiễu noise chứa lỗi hoặc các sai biệt o VD Lương -100 000 f DL mâu thuẫn có sự không thống nhất trong mã hoặc trong tên o VD Tuổi 42 Ngày sinh 03 07 1997 US USA Tại sao DL có chất lượng xấu --------------- --------------------- Bài tập theo nhóm số 3 f Tình huống Bạn đi phỏng vấn xin việc làm tại phòng quản lý thông tin của công ty ĐiẸN TỬ X gồm rất nhiều chi nhánh trên toàn quốc . Người phỏng vấn đặt ra vấn đề Bạn cần thu thập DL bán hàng của tất cả các chi nhánh trong quí 1 2009 để phân tích kết quả kinh doanh. Những vấn đề gì cần đối mặt và hướng giải quyết. Dựa trển nội dung phỏng vấn để xác định xem người xin tuyển dụng có đáp ứng được yêu cầu của công ty không Nội dung của cuộc phỏng vấn tập trung vào bài toán thu thập chuẩn bị dữ liệu và chất lượng dữ liệu. Không phỏng vấn về việc sử dung dữ liệu để phân tích kết quả kinh doanh như thế nào. 6

• Cơ sở dữ liệu
• dữ liệu và ứng dụng
• giáo trình bài giảng
• giáo án thực hành
• bài tập thực hành
• đồ án cuối kỳ
• mã hóa dữ liệu
• Bài giảng Kho dữ liệu và khai phá dữ liệu
• Kho dữ liệu
• Khai phá dữ liệu
• Đặc tính kho dữ liệu
• Ứng dụng kho dữ liệu
• Ứng dụng khai phá dữ liệu
• Bài giảng Khai phá dữ liệu
• Mật mã và ứng dụng
• Bài giảng Mật mã và ứng dụng
• An toàn cơ sở dữ liệu
• Mục tiêu an toàn cơ sở dữ liệu
• Cập nhật cơ sở dữ liệu
• Sự cố hệ thống
• database
• lập trình dữ liệu
• thủ thuật máy tính
• hệ quản trị
• dữ liệu máy tính
• quản trị dữ liệu
• cơ sở dữ liệu quan hệ
• tài liệu cơ sở dữ liệu
• đặc tả cơ sở dữ liệu
• ứng dụng cơ sở dữ liệu
• lý thuyết cơ sở dữ liệu
• tự học cơ sở dữ liệu
• Luận văn Thạc sĩ ngành Công nghệ thông tin
• Công nghệ thông tin
• Ứng dụng kho dữ liệu và webservice
• Tích hợp dữ liệu
• Hệ thống báo cáo thống kê
• Trường cao đẳng nghề số 3 BQP
• Dữ liệu Data Warehouse
• Quản trị Cơ sở dữ liệu
• Phần mềm ứng dụng
• Thiết kế cơ sở dữ liệu quan hệ
• Thiết kế cơ sở dữ liệu
• Cơ sở dữ liệu
• luận văn
• phân cụm dữ liệu
• ứng dụng dữ liệu
• khai phá tri thức
• khai phá dữ liệu; qui trình khai phá tri thức
• Khóa luận tốt nghiệp
• Ứng dụng phần mềm khai phá dữ liệu
• Phần mềm khai phá dữ liệu
• Phần mềm khai phá dữ liệu RapidMiner
• Quản lý khách hàng vay vốn
• An toàn ứng dụng web
• Cơ chế bảo mật cơ sở dữ liệu
• Giám sát hoạt động cơ sở dữ liệu
• Bài giảng Cấu trúc dữ liệu và thuật toán
• Cấu trúc dữ liệu và thuật toán
• Cấu trúc dữ liệu
• Ứng dụng cây gia phả
• Ứng dụng cây thư mục
• Đẩy mạnh ứng dụng dữ liệu lớn
• Dữ liệu lớn
• giáo dục và đào tạo
• Dữ liệu lớn trong giáo dục và đào tạo
• Chương trình giảng dạy tùy chỉnh
• Giáo dục đại học
• Kỷ yếu hội thảo khoa học
• Hội thảo Phân tích quản trị dữ liệu thông minh
• Phân tích dữ liệu
• Phân tích dữ liệu doanh nghiệp
• Kỹ sư phân tích dữ liệu
• Công cụ phân tích dữ liệu
• Chuỗi dữ liệu thời gian
• Quản trị dữ liệu thông tin
• Phân tích dữ liệu thông tin
• Bài toán khai phá dữ liệu chuỗi thời gian
• Thống kê ứng dụng
• Ứng dụng thống kê trong kinh doanh
• Ứng dụng thống kê trong quản lý
• Thu thập dữ liệu thống kê
• Mô tả dữ liệu
• Lập trình cơ sở dữ liệu
• Câu lệnh SQL
• Cơ sở dữ liệu Web và XML
• Bài giảng cơ sở dữ liệu Web
• Ứng dụng web
• Lập trình web
• Bài giảng Thống kê và phân tích dữ liệu
• Thống kê dữ liệu
• Thống kê mô tả
• Thống kê suy luận
• Cấu trúc dữ liệu và giải thuật
• Bài giảng Cấu trúc dữ liệu
• Ngăn xếp và hàng đợi
• Cài đặt ngăn xếp
• Ứng dụng của ngăn xếp
• Định giá biểu thức hậu tố
• ứng dụng phân cụm dữ liệu
• thiết kế hệ thống
• hệ thống thông tin
• kỹ thuật lập trình
• lập trình ứng dụng
• Tin học ứng dụng
• Giáo trình nghề Tin học ứng dụng
• Giáo trình Cấu trúc dữ liệu
• Cấu trúc mảng
• Cấu trúc cây
• Bài giảng Thuật toán ứng dụng
• Thuật toán ứng dụng
• Danh sách tuyến tính
• Quan hệ tuyến tính
• Ngăn xếp dữ liệu
• Đồ án tốt nghiệp
• sử dụng vật tư
• cung ứng vật tư
• dữ trữ vật tư
• nâng cao dữ trữ vật tư
• nâng cao sử dụng vật tư
• Nguyên lý thống kê
• Kinh tế lượng
• Tóm tắt dữ liệu
• Bài giảng thống kê ứng dụng
• Tài liệu thống kê ứng dụng
• Bài giảng Thống kê ứng dụng trong kinh doanh
• Thống kê ứng dụng trong kinh doanh
• Đại lượng đo lường độ tập trung
• Khám phá dữ liệu
• Biểu đồ hộp và râu
• Trực quan hóa dữ liệu
• Quản lí số liệu nuôi trồng thủy sản
• Nuôi trồng thủy sản
• Tỉnh Trà Vinh