Kết hợp r và hadoop trong khai phá dữ liệu
➤ Gửi thông báo lỗi ⚠️ Báo cáo tài liệu vi phạmNội dung chi tiết: Kết hợp r và hadoop trong khai phá dữ liệu
Kết hợp r và hadoop trong khai phá dữ liệu
BỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01 Kết hợp r và hadoop trong khai phá dữ liệu 1.01NgơỊỜi hoịớng đẫn : TS. Trần Thiên ThànhLỜI CÁM ƠNTrơỊỚc tiên em xin chân thành cảm ơn Thây TS.Trần Thiên Thành đã tận tình hơỊỚng dần, chỉ bảo em trong thời gian qua.Em xin bày tỏ lòng biết ơn tới các Thây Cô giáo trong khoa Công nghệ thông tin nói riêng và TrơỊỜng Đại học Quy Nhơn nói chung đà Kết hợp r và hadoop trong khai phá dữ liệu dạy bào, cung cấp nhừng kiến thức quý báu cho em trong suôt quá trình học tập và nghiên cún tại trơỊỜng.Em cũng gửi lời càm ơn tới gia đình, bạn bè,Kết hợp r và hadoop trong khai phá dữ liệu
nhùng ngơỊỜi luôn cõ vũ, quan tâm và giúp đờ em trong suốt thời gian học tập cũng nhơỊ làm luận văn.Do thời gian và kiến thức có hạn nên luận văn châcBỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01 Kết hợp r và hadoop trong khai phá dữ liệu trong luận văn là sản phẩm của riêng cá nhân tôi. Trong loàn bộ nội dung của luận vãn, nhưng điêu đo]Ợc trình bày hoặc là của cá nhân hoặc là đơỊỢc tống hợp tù’ nhiều nguồn tài liệu. Tất cả các tài liệu tham khảo đều có xuất xứ’ rõ ràng và đqỢc trích dân hợp pháp. Tôi xin hoàn toàn chịu trách nhiệm Kết hợp r và hadoop trong khai phá dữ liệu theo quy định cho lời cam đoan của mình.Quy nhơn, ngày 30 tháng 7 năm 2019NgơỊỜi cam đoanCao Minh ThoỊỚng1MỚ ĐÀU1.LÝ DO CHỌN ĐÊ TÀINgày nay lqọ'ng dữKết hợp r và hadoop trong khai phá dữ liệu
liệu ngày càng nhiều và trở thành thách thức trong khai phá dừ liệu. Khai phá dữ liệu mang lại nhiêu lợi ích về kinh tẽ, xã hội và đặt biệt là đqọ'c BỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01 Kết hợp r và hadoop trong khai phá dữ liệu trong việc lơỊU trừ, xử lý và phân tích dừ' liệu.R là một công cụ mã nguồn mở đqỢc dùng phố biến hiện nay trong việc phân tích và xử lý dừ' liệu. Tuy nhiên công cụ R gặp nhiều khó khăn khi xử lý những dừ liệu lớn.Hadoop là nên tảng mâ nguồn mở đqợc xây dựng đẽ tố chức Iqu trừ và xử lý dừ liệu lớn. T Kết hợp r và hadoop trong khai phá dữ liệu rong Hadoop bao gồm HDFS (Hadoop Distributed File System) dùng để quản lý file phân tán, MapReduce dùng đẽ lập trình và xù’ lý song song trên dừ liệuKết hợp r và hadoop trong khai phá dữ liệu
phân tán, co' sở dừ liệu Hbase dùng đê Ioịu trừ đqực dừ liệu lớn trên hệ thống phân tán HDFS,...Với mong muốn tăng cqờng khả năng phân tích và xử lý dBỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01 Kết hợp r và hadoop trong khai phá dữ liệu ông tin và việc ứng dụng công nghệ thông tin trong nhiều lình vực của đời sông, kinh tẽ xã hội trong nhiêu năm qua cùng đồng nghía với IqỢng dù’ liệu đà đqọ'c các co' quan thu thấp và Iqu trừ ngày một tích lũy nhiêu lên. Họ lơỊU trừ các dử liệu này vì cho rang trong nó ân chứa nhừng giá trị nhất địn Kết hợp r và hadoop trong khai phá dữ liệu h nào đó. Tuy nhiên, theo thông kê thì chỉ có một IqỢng nhò của nhừng dừ liệu này (khoảng từ 5% đến 10%) là luôn đqợc phân tích, sổ còn lại họ không bKết hợp r và hadoop trong khai phá dữ liệu
iêt sè phải làm gì hoặc có thế làm gì với chúng nhqng họ vân2tiếp tục thu thập IqỢng dừ* liệu này với ý nghi lo sợ rằng sè có cái gì đó quan trọng đẵ BỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01 Kết hợp r và hadoop trong khai phá dữ liệu iệc ra quyết định và ngày càng có nhiêu câu hôi mang tính chất định tính cần phải trả lời dựa trên một khối Iqợng dữ liệu khống lồ đà có. Với nhừng lý do nhq vậy, các phqơng pháp quản trị và khai thác cơ sở dừ liệu truyền thõng ngày càng không đáp úììg đqợc cân phải thay thê một kỳ thuật mới đó là K Kết hợp r và hadoop trong khai phá dữ liệu hai phá dừ liệu (Data Mining - KPDL).Khai phá dù’ liệu đà và đang đqọ’c nghiên cứu, úìig dụng trong nhiêu lình vực khác nhau ở các nqớc trên thế giứi,Kết hợp r và hadoop trong khai phá dữ liệu
tại Việt Nam kỳ thuật này cũng đang đqợc nghiên cứu và đqa vào ứng dụng trong nhiêu lĩnh vực từ kinh doanh đến tài chính, nghiên cứu khoa học,... KhaBỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01 Kết hợp r và hadoop trong khai phá dữ liệu nhiêu doanh nghiệp và lố chức trên thế giới đâ ứng dụng kỳ thuật khai phá dừ liệu vào hoạt động sàn xuất kinh doanh của mình và đà thu đqợc nhưng lợi ích to lớn.Năm 1996, hai nhà thống kê học Ross Ihaka và Robert Gentian phác họa một ngôn ngừ'cho phân tích thông kê đqọ'c đặt tên là R. Theo [31 “Vê b Kết hợp r và hadoop trong khai phá dữ liệu àn chất, R là ngôn ngừ lập trình, sứ dụng cho nhiêu mục đích, từ tính toán đơn gián, toán học giãi trí (recreational mathematics), tính toán ma trận (Kết hợp r và hadoop trong khai phá dữ liệu
matrix), đến các phân tích thõng kê phức tạp”. Việc hqớng đến mà nguồn mờ, miên phí R nhanh chóng phát triển vqợt qua các phân mêm thông kê xuất hiện BỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01 Kết hợp r và hadoop trong khai phá dữ liệu ], hiện nay đà có bộ thq viện đẽ tích họp Hadoop MapReduce trên R và đây là co' sở đế phát triển các kỳ thuật khai phá dù’ liệu lớn trên R.33.MỤC TIÊU VÀ NHIỆM vụ NGHIÊN cứuMục tiêu tống quát của đê tài “Kết hợp R và Hadoop trong Khai phá dừ liệu” là tìm hiểu vê khai phá dừ liệu, cài đặt và so sánh Kết hợp r và hadoop trong khai phá dữ liệu một số thuật toán khai phá dừ liệu trên R khi sù’ dụng và không sử dụng mô hình MapReduce. Mục tiêu của đê tài:BỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01BỘ GIÁO DỤC VÀ ĐÀO TẠO TROỊỜNG ĐAI HOC QUY NHƠNCAO MINH THƠỊỚNGKẾT HỢP R VÀ HADOOP TRONG KHAI PHÁ DỮ LIỆUChuyên ngành: Khoa học máy tínhMã sô: 8.48.01Gọi ngay
Chat zalo
Facebook