Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
➤ Gửi thông báo lỗi ⚠️ Báo cáo tài liệu vi phạmNội dung chi tiết: Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec ng nghệ thông tin trong nhiều lĩnh xực dà làm cho kho dừ liệu ấy tăng lên nhanh chóng. Sự bùng nô này đà dẫn tới một yêu cau cap thiết là can có những kỳ thuật và công cụ mới đê tự động chuyên đôi lượng dừ liệu không lồ kia thành các tri thức có ích. Mặt khác, trong mói trường cạnh tranh thi người t Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec a ngày càng can có thông tin với tốc độ nhanh chóng đẻ giúp cho việc ra quyết định và ngày càng có nhiêu câu hói mang tính chất định tinh can phái tráLuận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
lời dựa trên khối lượng dừ liệu không lồ đã có. Tiến hành các công việc như vậy chính là quá trinh phát hiện tri thức trong cơ sở dừ liệu, trong đó k1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec tô chức và công ty lớn trên the giới đà áp dụng kỳ thuật khai phá dừ liệu vào các hoạt động sân xuất kinh doanh của mình và thu được nhũng lợi ích to lớn.Hiện nay mạng xã hội như Facebook, Twitter, Zalo,... ngày càng phát triên và có anh hưởng lớn den đời song xà hội. Trong lĩnh vực thương mại điện Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec tư, nhiêu công ty vào mạng xà hội đè quãng cáo. tư vấn. phân tích về san phẩm và công ty cua minh. Chính vì vậy nếu biết được giới tính người dùng làLuận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
nam hay nữ thi việc tư van và quáng cáo hướng đến người dùng sè cụ thê và hiệu quả hơn.Do đó van đề phân loại tự động giới tính của người dùng sư dụng1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec ưng kiêu truyền thống như trong mô hình tan suất từ. n-gram.... Word2Vec vã mò hình chuyên từ thành vector được phát triển và ứng dụng rộng rài trong thời gian gan đây. Chinh vi vậy mà chúng tôi sừ dụng thêm Word2Vec làm đặc trưng đê cãi tiến kết quà bài toán này.Từ nhừng vấn đe nêu trên, chúng tôi Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec chọn đề tài: “Phăn loại giới tinh người dùng mạng xã hội dựa trên tin nhãn vàn hãn và Word2Vec” dê làm luận văn tot nghiệp.2Đe tái này nhàm mục đích nLuận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
ghiên cứu phương pháp biêu diễn các từ dưới dạng vector sau dó dũng làm đặc trưng de cái thiện kết quà của việc phân loại giới tinh người dùng mạng xà1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec bày lý dơ của dề tài. mục tiêu cúa dề tãi và cấu trúc của luận vãn.Chirơng 1 giới thiệu tong quan về khai phá dừ liệu và quá trình khai phá dừ liệu. Bèn cạnh dó côn giới thiệu một so chức năng chinh cúa khai phá dừ liệu cũng như một so kỳ thuật khai phá dừ liệu. Ngoài ra chirơng này còn giới thiệu Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec về mạng xà hội, các lợi ích và bắt lọi của mạng xã hội cũng như một so mạng xà hội phò biên trên the giới hiện nay.Chương 2 giới thiệu khái niệm về veLuận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
ctor từ cũng như các lập luận liên quan den vector từ. Chương này còn giới thiệu về các mô hình cũng như cách xây dựng một Word2Vec như mô hình Contin1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec iái pháp thực hiện và các kết qua đạt được sau khi thực nghiệm.Cuối củng lã phan kết luận, định hướng nghiên cứu phát triển đề tài và nhừng tải liệu tham kháo của luận văn.3CHƯƠNG 1: TONG QUAN KHAI PHÁ DỬ LIỆU VÀ MẠNG XÃ HỘIỉ.l. Khai phá dù* liệu1.1.1.Khai phá dữ liệu là gì?Khai phá dừ liệu (datamin Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec ing) được định nghía như là một quá trinh chắt lọc hay khai phá tri thức tữ một lượng lớn dừ liệu. Một ví dụ hay được sứ dụng là việc khai thác x àngLuận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
từ đá và cát. Dataming được vi như công việc "Đài cát tim vàng" trong một tập hợp lớn các dừ liệu cho trước. Thuật ngừ Datamining ám chi việc tim kiêm1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec dge Mining (khai phá tri thức), knowledge extraction (chắt lọc tri thức), data/patem analysis (phân tích dữ liệuinẫu), data arehaeoloogy (khảo cô dừ liệu), datadredging (nạo vét dừ liệu),... [1].Sau đây là một số định nghĩa mang tính mò tã của nhiều tác giã về khai phá dừ liệu:Định nghía cua Ferruzz Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec a: “Khai phá dữ liệu là tập hợp các phương pháp được dùng trong tiến trinh khám phá tri thức dê chì ra sự khác biệt các moi quan hệ và các mầu chưa biLuận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
ết bên trong dừ liệu'’.Định nghĩa của Parsaye: “Khai phá dừ liệu là quá trình trợ giúp quyết định, trong đó ta tim kiêm các mẫu thòng tin chưa biết và1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec h, tiềm năng và có thè hiểu được”.1.1.2.Quá trình khai phá dữ liệuKhai phá dừ liệu là một bước trong báy bước của quá trinh KDD (Knowleadge Discovery’ in Database) và KDD được xem như 7 quá trinh khác nhau theo thử tự sau [1]:1.Làm sạch dừ liệu (data cleaning & preprocessing): Loại bó nhiễu và các d Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec ữ liệu không can thiết.42.Tích hợp dừ liệu: (data integration): quá trinh hợp nhất dừ liệu thành nhừng kho dừ liệu (data warehouses & data marts) sauLuận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
khi dà lãm sạch và tiên xử lý (data cleaning & preprocessing).3.Trích chọn dừ liệu (data selection): trích chọn dử liệu lù nhùng kho dừ liệu và sau đó1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec đu (incomplete data), ...4.('huyền doi dừ liệu: Các dừ liệu dược chuyên dôi sang các dạng phù họp cho quá trình xứ lý.5.Khai phá dừ liệu (data mining): I.à một trong các bước quan trọng nhất, trong dỏ sứ dụng nhũng phương pháp thòng minh de chất lọc ra nhưng mầu dừ liệu.6.Ước lượng mẫu (knowledge ev Luận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec aluation): Quá trinh đánh giá các kết qua tim được thông qua các độ đo nào đó.7.Biêu diền tri thức (knowledge presentation): Quá trinh này sư dụng cácLuận văn phân loại giới tính người dùng mạng xã hội dựa vào tin nhắn văn bản và word2vec
kỳ thuật dể biêu diễn và thế hiện trực quan cho người dùng.1.1.3.Các chức nâng chính cùa khai phá dử liệuData Mining được chia nho thành một so hướng1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng côn1MỞ ĐẢƯNgày nay. con người đang sờ hừu kho dữ liệu phong phú, đa dạng và không lo. Đặc biệt sự phát trièn cùa công nghệ thông tin và việc ứng dụng cônGọi ngay
Chat zalo
Facebook