Chương 1: Các khái niệm Nguyễn Thị Oanh Bộ môn HTTT – Viện CNTT & TT oanhnt@soict.hut.edu.vn Giới thiệu chung DL lớn Khả tính tốn/lưu trữ lớn Nhu cầu chia sẻ/khai thác Nội dung Khái niệm Dữ liệu đa phương tiện MIRS & MM - DBMS Một ví dụ ứng dụng đa phương tiện Ứng dụng đa phương tiện Khái niệm Kiểu Media  Các kiểu thông tin biểu diễn thông tin: văn bản, hình ảnh, đồ họa, vidéo, … tất thơng tin biểu diễn, lưu trữ, truyền, xử lý dạng số Text Animation Still image Audio Video footage Interactivity Kiểu Media  Phân loại: – Theo định dạng vật lý – Theo mối liên hệ với thời gian:  Media tĩnh (static media): nội dung ý nghĩa không phụ thuộc vào biểu diễn thời gian: văn bản, ảnh tĩnh, đồ họa  Media động (dynamic media, continuous media ou isochronous media): liệu có chiều thời gian: hoạt hình, âm thanh, video) Multimedia  Multimedia: – tập hợp kiểu media sử dụng nhau, có kiểu liệu DL dạng văn bản: hoạt hình, âm thanh, video – Có thể coi tổ hợp văn bản, âm thanh, ảnh tĩnh, ảnh động, video hình thức tương tác nội dung Multimedia Digital environment USER Elements of Multimedia Multimedia  Multimedia Data: – biểu diễn kiểu liệu media khác mà máy tính đọc  Multimedia Database (CSDL đa phương tiện): – tập có cấu trúc định liệu đa phương tiện  Multimedia System: – hệ đa phương tiện hệ thống có khả xử lý liệu đa phương tiện ứng dụng Dữ liệu đa phương tiện 10 Truy vấn thư viện ảnh  Ngữ cảnh 2: – Kiểm tra ảnh JP – Q2: Tìm tất ảnh thư viện có hình JP 45 Truy vấn thư viện ảnh  Truy vấn = ảnh: – Similarity: Độ tương tự ảnh ? – Ranking: xếp loại ?  Truy vấn = từ khóa: – ? Đối tượng ảnh liên kết với giá trị thuộc tính – ? Đánh mục tìm kiếm hiệu thuộc tính 46 Truy vấn DL âm  Ngữ cảnh 1: – Đoạn băng ghi âm chứa đoạn hội thoại người A & B A Denis Dopeman – Q: Xác định tên người B  Ngữ cảnh 2: – Xem tất đoạn băng có Denis Dopeman khoảng thời gian – Q2: Tìm tất băng ghi âm mà Denis Dopeman có tham dự 47 Truy vấn DL âm 48 Truy vấn DL văn  Ngữ cảnh: – Tra cứu tài liệu để điều tra vụ việc chưa giải – Q1: Tìm tất tài liệu có giao dịch tài cơng ty X & cơng ty Y 49 Truy vấn DL Video  Ngữ cảnh: – Cảnh sát xem đoạn băng theo dõi vụ công, mặt kẻ công (B) bị che khuất phần  giải thuật nhận dạng không cho kết tốt – Phỏng đốn: người bị cơng (A) quen biết thủ phạm Q: Tìm tất đoạn video mà có mặt người bị công 50 Truy vấn hỗn tạp  Truy vấn phức tạp: liên quan đến nhiều nguồn đa phương tiện khác Khó, chí trường hợp có DL văn 51 Truy vấn hỗn tạp – VD1  Ví dụ truy vấn DL văn (HQ1): Tìm tất kẻ – bị kết án vụ cơng Nam Phi – có chuyển khoản vào tài khoản họ từ công ty ABC  Vấn đề: – Việc tìm kiếm tất kẻ bị kết án tội khác có cần truy cập đến nhiều CSDL đa dạng thuộc vào phán xử, tòa án khác – Cty ABC có nhiều tài khoản hàng trăm ngân hàng giới (định dạng khác nhau, hệ csdl khác nhau) 52 Truy vấn không – VD1 53 Truy vấn hỗn tạp – VD2  Ví dụ truy vấn (HQ2): Tìm tất kẻ – bị kết án vụ công Nam Phi – có chuyển khoản vào tài khoản họ từ cơng ty ABC – có chụp chung hình với Jose  Thực truy vấn: – Giống HQ1 – Truy nhập DL ảnh có gán nhãn để tìm ảnh người thỏa HQ1 với tên biết – Tìm CSDL ảnh tĩnh, video đối tượng xuất Jose – Xác định đối tượng ảnh, video nhờ vào giải thuật xử lý ảnh 54 Truy vấn không – VD2 55 Ứng dụng đa phương tiện 56 Ứng dụng – World Wide Web – Digital Library – News-On-Demand Demo: http://67.214.99.203/MediaLibraryKCVideo/ – Video-On-Demand – Music Database – Telemedicine – Geographic Information System – Interactive TV – Computer Games – Virtual reality – Digital video editing and production systems 57 –… Ứng dụng – IBM’s MARVEL (Multimedia Analysis and Retrieval): Searching service thử nghiệm: (automatic and semi-automatic description generation) http://www.alphaworks.ibm.com/tech/marvels – Discovir: Distributed Retrieval System Content-based Visual Information http://appsrv.cse.cuhk.edu.hk/~miplab/discovir/ 58 59 ... Nội dung Khái niệm Dữ liệu đa phương tiện MIRS & MM - DBMS Một ví dụ ứng dụng đa phương tiện Ứng dụng đa phương tiện Khái niệm Kiểu Media  Các kiểu thông tin biểu diễn thông tin: văn bản, hình... kiểu liệu media khác mà máy tính đọc  Multimedia Database (CSDL đa phương tiện) : – tập có cấu trúc định liệu đa phương tiện  Multimedia System: – hệ đa phương tiện hệ thống có khả xử lý liệu đa. .. khung màu) : 1. 2 x 25 = 30Mb/giây (chưa nén)  High Definition DVD (14 40 x1080 = 1. 5 Megapixels/frame) : 4.5 x 25 = 11 2.5Mb /giây (chưa nén) 19 – Dữ liệu phải nén Đặc điểm DL đa phương tiện  Kích