Tổng quan khai phá dữ liệu và ứng dụng
➤ Gửi thông báo lỗi ⚠️ Báo cáo tài liệu vi phạmNội dung chi tiết: Tổng quan khai phá dữ liệu và ứng dụng
Tổng quan khai phá dữ liệu và ứng dụng
FLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING) Tổng quan khai phá dữ liệu và ứng dụng ) 1À KDDỉ.1.1. Tại sao lại cần khai phá dữ liệu (dataniining)Khoảng hơn một thập kỷ trở lại đây, lượng thông tin được lưu trừ trên các thiết bl điện tữ (đìa cứng. CD-ROM. bảng từ. .v.v.) không ngừng tăng lên. Sự tích lũy dừ liệu này xây ra với một tốc độ bùng nồ. Người ta ước đoán răng lượng thòng t Tổng quan khai phá dữ liệu và ứng dụng in tiên toán cầu tảng gấp đòi sau khoang hai năm và theo đó số lượng cùng như kích cờ của các cơ sở dừ liệu (CSDL) cùng tâng lẻn một cách nhanh chóng.Tổng quan khai phá dữ liệu và ứng dụng
NÓI một cách hình anh là chủng ta đang “ngập” trong dữ liệu nhưng Lại “đói” tri thức. Câu hòi đật ra Là liệu chúng ta có thề khai thác được gì từ nhữFLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING) Tổng quan khai phá dữ liệu và ứng dụng câu hỏi vừa đật ra ớ trên (]. Khá nhiều định nghĩa về Data Mining và sè đtrợc đề cập ờ phần sau. tuy nhiên có thề tạm hiểu lổng Data Mining như là một công nghệ tri thức giúp khai tlrác những thòng tin hữu ích từ nhưng kho dử liêu được tích trfr trong suốt quá trinh hoạt động của một công ty. tỏ chứ Tổng quan khai phá dữ liệu và ứng dụng c nào đó.1.1.2.Khai phá dử liệu là gì?Khai phá dừ liệu (datamining) được đinh nghía như lã một quá trinh chat lọc hay khai phá tri thức từ một lượng lTổng quan khai phá dữ liệu và ứng dụng
ớn dừ liệu. Một vi dụ hay đirợc sir dụng lã Là việc khai thác vàng từ đá và cát. Dataming được ví như còng việc "Đãi cát tim vàng" trong một tập hợp lFLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING) Tổng quan khai phá dữ liệu và ứng dụng ện được dũng cùng có nghĩa tương tự VỚI tữ Datamimng như Knowledge Mining (khai phá tri thức), knowledge extraction(chat lọc tri thức), data patem anaỉysis(phân tích dừ liệu/mẫu). data aichaeoloogy (kháo cổ dử liệu), datadredgingỌiạo vét dử liệu),...Định nghĩa: Khai phá dừ hệu là một tập hợp các kỳ Tổng quan khai phá dữ liệu và ứng dụng thuật dược sứ dụng đẻ tự động khai thác và tim ra các mồi quan hệ lần nhau cùa dừ liệu trong một tập họp dừ liệu không lồ và phức tạp. dồng thời cùngTổng quan khai phá dữ liệu và ứng dụng
tìm ra các mầu tiếm ân trong lập dừ liệu đõ.Khai phá dừ liệu là một bước trong bây bước cùa quá trinh KDD (Knowleadge Discovery 111 Database) vã KDD đFLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING) Tổng quan khai phá dữ liệu và ứng dụng 2.Tích hợp dữ liệu: (data integration): quá trinh hợp nhất dữ liệu thành những kho dũ liệu (data warehouses & data marts) sau khi dã làm sạch và tiên xứ lý (data cleaning & preprocessing).3.Trích chọn dữ liệu (data selection): trích chọn dử liệu tù nhũng kho dứ liệu và sau dó chuyên dôi vê dạng thíc Tổng quan khai phá dữ liệu và ứng dụng h hợp cho quá trình khai thác tri thúc. Quá trinh này bao gom ca việc xứ lý với dừ liệu nhiêu (noisy data), dìr liệu kliõng đay đù (incomplete data).Tổng quan khai phá dữ liệu và ứng dụng
-V.V.4.Chuyển dồi dữ liệu: Các dữ liệu dược chuyên dồi sang các dạng phù hợp cho quá trinh xử lý5.Khai phá dừ liệu(data mining): Lã một trong các bướcFLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING) Tổng quan khai phá dữ liệu và ứng dụng giã cãc kết quả tim được thòng qua các độ đo não đó.7.Biểu diễn tri thức (knowledge presentation): Quá trình này sử dụng các kỳ thuật đê biêu diều và thể hiện trực quan cho người dùng.lỉiub 1 - Các bước trong Data Mining & KDD1.1.3.Các chức nảng chinh cùa khai phá dử liệuData Mining được chia nhỏ t Tổng quan khai phá dữ liệu và ứng dụng hành một số hướng chính như san:•Mó tã khái niệm (concept description): thiên về mó tã. tỏng hợp và tóm nít khái niệm. Ví dụ: tóm tắt văn ban.•Lưật kếTổng quan khai phá dữ liệu và ứng dụng
t họp (association rules): là dạng luật biêu diều tri thử ở dạng khá đơn giãn. Vi dụ: ‘60 % nam giới vào siêu tin nếu mua bia thì có tới 80° 0 trong sFLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING) Tổng quan khai phá dữ liệu và ứng dụng hân lớp vã dự đoán (classification & prediction): xếp một đoi tượng vào một trong nhùng lớp đã biết trước. Vi dụ: phân lớp vũng địa lý theo dữ liệu thời tiết. Hướng tiếp cận nãy thường sir dụng một số kỳ thuật cùa machine learning như cây quyết đinh (decision tree), mạng nơ ron nhân tạo (neuial netw Tổng quan khai phá dữ liệu và ứng dụng ork), .v.v. Người ta còn gọi phán lóp là học có giám sãt (học có thay).•Phân cụm (clustering) xếp các đối tương theo từng cụm (số lương cùng như tên cTổng quan khai phá dữ liệu và ứng dụng
ùa cụm chưa dược biết trước. Người ta còn gọi phân cụm là học không giám sát (học không thây).•Khai phá chuỗi (sequential temporal patterns) tương tự FLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING) Tổng quan khai phá dữ liệu và ứng dụng ứng khoán vì nó có tính dự báo cao.1.1.4.I ng dụng cùa khai phá dữ liệuData Mining tuy là một hướng tiếp cận mới nhung thu hút được rất nhiều sự quan tâm của các nhà nghiên cứu và phát triển nhờ vào những ứng dụng thực tiền của nó. Chúng ta có thê liệt kẽ ra dày một số ứng dụng điên hình•Phân tích d Tổng quan khai phá dữ liệu và ứng dụng ừ liệu và hố trợ ra quyết định (data analysis & decision support)•Điều trị y học (medical treatment)•Text mining & Web milling•Tin-sinh (bio-informatiTổng quan khai phá dữ liệu và ứng dụng
cs)•Tài chinh và thi trường chứng khoán (finance & stock market)FLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING)FLuận văn tôt nghiệpTống quan khai phá dữ liệu và ứng dụngChương 1. TONG Ql AN VÊ KHAI PHÁ DỬ LIỆU WEB1.1.GIỚI TIỈIẸl • IẺ KHAI PHÁ DỪUỆl■ (DA TAMING)Gọi ngay
Chat zalo
Facebook