TAILIEUCHUNG - Bài giảng Khai phá dữ liệu (Data mining): Chương 2 - Lê Tiến

Chương 2 đề cập đến các vấn đề tiền xử lý dữ liệu. Các nội dung chính trình bày trong chương gồm có: Tổng quan về giai đoạn tiền xử lý dữ liệu, tóm tắt mô tả về dữ liệu, làm sạch dữ liệu, tích hợp dữ liệu, biến đổi dữ liệu, thu giảm dữ liệu,. . | Chương 2: Các vấn đề tiền xử lý dữ liệu Khai phá dữ liệu (Data mining) Nội dung . Tổng quan về giai đoạn tiền xử lý dữ liệu . Tóm tắt mô tả về dữ liệu . Làm sạch dữ liệu . Tích hợp dữ liệu . Biến đổi dữ liệu . Thu giảm dữ liệu . Rời rạc hóa dữ liệu . Tạo cây phân cấp ý niệm . Tóm tắt . Tổng quan về giai đoạn tiền xử lý dữ liệu Giai đoạn tiền xử lý dữ liệu Quá trình xử lý dữ liệu thô/gốc (raw/original data) nhằm cải thiện chất lượng dữ liệu (quality of the data) và do đó, cải thiện chất lượng của kết quả khai phá. Dữ liệu thô/gốc Có cấu trúc, bán cấu trúc, phi cấu trúc Được đưa vào từ các nguồn dữ liệu trong các hệ thống xử lý tập tin (file processing systems) và/hay các hệ thống cơ sở dữ liệu (database systems) Chất lượng dữ liệu (data quality): tính chính xác, tính hiện hành, tính toàn vẹn, tính nhất quán Redman (1996), Data Quality in the Information Age, Artech House . Tổng quan về giai đoạn tiền xử lý dữ liệu Chất lượng dữ liệu (data quality) tính chính xác (accuracy): giá trị được ghi nhận đúng với giá trị thực. tính hiện hành (currency/timeliness): giá trị được ghi nhận không bị lỗi thời. tính toàn vẹn (completeness): tất cả các giá trị dành cho một biến/thuộc tính đều được ghi nhận. tính nhất quán (consistency): tất cả giá trị dữ liệu đều được biểu diễn như nhau trong tất cả các trường hợp. Redman (1996), Data Quality in the Information Age, Artech House Richard Y. Wang, Veda C. Storey, Christopher P. Firth (1995), A framework for analysis of data quality research, IEEE Transactions on knowledge and data engineering, 7(4), pp. 623-640. Accuracy which occurs when the recorded value is in conformity with the actual value Timeliness which occurs when the recorded value is not out of date Completeness which occurs when all values for a certain variable are recorded Consistency which occurs when the representation of the data value is the same in all cases . Tổng quan về giai đoạn tiền xử lý

TỪ KHÓA LIÊN QUAN
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.