Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
➤ Gửi thông báo lỗi ⚠️ Báo cáo tài liệu vi phạmNội dung chi tiết: Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
ĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh THÔNG MINHLUẬN ÁN TIÉN SĨ KHOA HỌC MÁY TÍNHTP. HỎ CHÍ MINH - 2019ĐẠI HỌC QUÓC GIA TP.HCMTRƯỚNG ĐẠI HỌC CÓNG NGHẸ THÔNG TINNGUYÊN VINH TIẸPTRUY VÁN HIỆU QUẢ THÒNG TIN THỊ GIÁC TỪDỬLIẸU LỚN ĐẼ PHÁT TRĨÉNMỎI TRUÔNG THÔNG MINHChuyên ngành: Khoa hoc Máy tính Mà số: 62.48.01.01LUẬN ẤN TIÊN SĨ KHOA HỌC’ M Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh ẤY TÍNHNGƯỜI HƯỚNG DÀN KHOA HỌCPGS.TS. TRẤN MIMI TRIETPGS.TS. DƯƠNG -VNII ĐỨCPHÁN BIỆN 1: PGS. I S. NGUYÊN PHANH BÌNH PHAN BIẸN 2: PGS.TS. TRẦN THỊ THTruy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
ANH HAITP.HÒCHÍ MINH-2019TÓM TẮTHiện nay. khối lượng dư liệu anh tĩnh và video từ rất. nhiều nguồn khác nhau dang gia lãng ngày một nhanh chóng. Diêu ĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh n nhằm cung cáp thõng tin. dịch vụ. tiện ích lót hơn phục vụ cuộc sống con người mọi lúc và mọi nơi. tạo ra và tích hợp các tính nang thõng minh vào mõi trường sống hằng ngày. Trong dó truy vấn trẽn kho dư liệu lớn là một trong những bài toán cơ bản nhằm quân lý, khai thác và tạo ra các úrng dụng vớ Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh i các tính năng thõng minh. Luận án này tập trung dề xuất một số phương pháp truy vần hiệu quà vói các thể thức truy van khác nhau từ kho dử liệu lớnTruy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
các ảnh tĩnh hoặc video theo những nhu cần tìm kiếm khác nhau cùa người dùng. Người sit dụng có thẻ sừ dụng ánh mau của đối tượng hoặc câu mõ tă dưới ĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh Ngoài ra, trong nhiều tình huống người sử dụng có the quan tàm đến một nhóm dối t ượng như tìm người tại một dịa diem cho trước. Khi truy vấn bẵng càu mô tã. người sữ dụng dùng vãn nói de diên dạt các dối tượng chính cũng như quan hệ giữa các dối tượng này trong tổng the bức ảnh cằn tìm. ứng với từ Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh ng the thức và dối tượng truy vấn ke trẽn, chúng tỏi dã có những dóng góp chính như san.Truy vắn dựa trẽn anh mẫu. Đối vói the thức truy vấn dựa trẽnTruy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
ãnh mâu. người sử dụng có the quan lam dến (i) cành vặt chửa trong toàn bộ ảnh man. (ii) một dối tượng duy nhất chứa trong ảnh man hoặc (iii) nhiều dốĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh nh rói tỉr (Bag-of-Visual-Word, viết rat là BOW) kết họp vói kỹ thuật cài tiên như kiêm tra ràng buộc hình học ở bước hậu xử lý giúp tang dộ chính xác một cách dáng ke. 'lìiy nhiên, các kỹ thuật này thường tốn thời gian xử lý hơn và tốn bộ nhớ dồ hm các thõng rin liên quan dến vị trí cùa dặc trưng. Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh Do dó dối với loại dối tượng có nhiêu dặc trưng này.chúng tôi đề xuất phương pháp kết hợp file chĩ mục ngược vói cấu trúc kim tự tháp không gian (spatTruy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
ial pyramid) để vừa tãng tốc độ và giám thời gian truy vấn. Phương pháp này dược cõng bố trong cõng trình [0*1'1]-Mặt khác, khi tìm kiếm vói một dối tĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh ư kiểm tra ràng buộc hình học, mỏ rộng truy vắn thì van không giãi quyết dược vắn dề trẽn. Do đó, chúng tôi dề xuất một phương phốp kiểm tra ràng buộc mới trong dó dung hợp mô hình BOW (tiếp cận từ dưới đi lẽn hay còn gọi là "bottomlip") và phương pháp phát lũện dối tượng (tiếp cận từ trên xuống hay Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh còn gọi là "top-down"). Dóng góp chính cùa chúng tôi trong dề xuất này là khai thác hiệu quả mối quan hệ về vị trí của các từ thị giác (visual word)Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
với vị tri đề xuất đối tượng (object instance proposal) dược ước lượng bởi bộ phát hiện dối tượng. Phương pháp này được cõng bố trong cõng trình |CT3|ĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh hốc nhau: tìm một người cho trước tại một địa diem cho trước. Hiện nay chưa có nhiều công bố nào liên quan đến việc tìm kiem ket hợp cốc nhóm dối tượng khác nhan. Khi ghi nhận hỉnh ành, thông thường camera không tập trung vào cá hai dối tượng cùng một lúc. Do đó các dặc trưng thị giác hỗ trợ cho việ Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh c nhận biết hai loại dối tượng này sẽ không có cùng phân bố xốc suất về mặt thời gian. Do dó việc áp dụng các phương pháp kết hợp một cách máy móc nhưTruy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
lấy trung bình giá tri tương đồng ở bước hậu xừ lý cho từng đối tượng đều cho kết quà rầt thấp. Luận án đề xuất phương pháp khai thác thõng tin ngữ cĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh ra. chúng tôi còn dề xuất phương pháp theo vết dịa diem (scene tracking) de tăng độ phủ của kết quả truy vấn. Phương pháp này đưực công bố trong các công trình [CT2], [CT5].Truy vấn băng câu mõ tả. Dãy là một bài toán thú vị dang dược quan tâm trong thơi gian gàn dãy. Hương tiếp cận truyền thống mà Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh các cõng cụ tìm kiếm thương mại hóa như Google Images, Bing Images sừ dụng là dựa vào tư khóa trẽn vãn bàn di kèm với ảnh. Trong nhiều trương hợp, nộiTruy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
dung di kèm do người dăng bài cung cấp không dằy dù hoặc không thing với những gì mà hình ảnh thể hiện. Mặt khác, câu truy vấn mô tà cùaiingười (lùngĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh tượng chính, quan hệ vồ ngữ cảnh giữa các đối tượng, các thuộc tính vê (lịa diem cùa ànli và (lữ liệu metadata cung cap bôi người dừng. Hộ thống này được cõng bố trong cõng trình [CT4].Trong quá trình phát triển các thuạl toán phục vụ cho bài toán truy vấn đối tượng dựa vào thõng tin thị giác, chứn Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh g tôi xây dựng các hệ thống đố minh họa cho ý lường lương lác và tiềm năng ứng dụng thực té. Cụ thể là. vói hài toán truy vấn sit dựng ảnh man, chúngTruy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh
rỏi xây dựng hộ thống khuyến nghị gợi nhú hình ành có lien quan Iren mạng xã hội. Với bài toán truy vắn sứ (lụng câu inõ tã, chúng lõi xảy dựng hẹ ihóĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNG Truy vấn hiệu quả thông tin thị giác từ dữ liệu lớn để phát triển môi trường thông minh 1.1 Mờ đầu ................................................................ 1ĐẠI HỌC QUÓC GIA TP.HCMTRƯỜNG ĐẠI HỌC CÔNG NGHỆ THÔNG TINNGl YÉN VINH TIẸPTRUY VÁN HIỆU QUẢ THÔNG TIN THỊ GIÁC TỪ Dữ LIỆU LỚN DẺ PHÁT TRIẼNMÔI TRƯỜNGGọi ngay
Chat zalo
Facebook