DỮ LIỆU ĐA PHƯƠNG TIỆN Part 1: Thu nhận, biểu diễn xử lý GV: TS Đinh Đồng Lưỡng Nội dung  Giới thiệu  Dữ liệu văn  Dữ liệu ảnh  Dữ liệu âm  Dữ liệu video Thu nhận biểu diễn liệu Quá trình thu nhận, xử lý, biểu diễn Minh họa: Audio Minh họa: hệ thống ĐPT Thiết bị mã hóa: ADC  Thiết bị mã hóa gồm có lọc khử cưa AAF (AntiAliasing Filter) and thiết bị số hóa (ADC)  Bộ lọc AAF loại bỏ thành phần tần số cao từ tín hiệu  Sample and Hold lấy mẫu tín hiệu sau lọc giữ giá trị biên độ mẫu thời gian lấy mẫu  Quá trình lượng tử chuyển mẫu lấy dạng nhị phân Lượng tử hóa ( Quantization)  Lượng tử hóa q trình biến đổi giá trị tương tự sang dạng nhị phân Lấy mẫu Lượng tử Thiết bị giải mã: DAC  Thiết bị giải mã dùng để chuyển đổi liệu số thành tín hiệu tương tự thơng qua việc sử dụng thiết bị số hóa ngược lọc thơng thấp Q trình số hóa Biểu diễn ảnh Ảnh tương tự cảm biến Ảnh sau lấy mẫu lượng tử hóa Độ phân giải khơng gian ảnh Độ phân giải theo mức xám Độ phân giải kích thước ảnh Lưu trữ Biểu diển ảnh khơng gian RGB DỮ LIỆU ÂM THANH-TIẾNG NÓI Tạo – Lưu trữ - Hiển thị Đặc tính âm  Âm (sound, audio) giới tự nhiên chất sóng âm tạo từ dao động vật thể truyền môi trường truyền âm định  Âm tiếng nói (speech), tương tự, sóng âm tạo từ dao động phận máy phát âm truyền môi trường truyền âm Đặc trưng vật lý  Ðộ cao (pitch): tần số dao động dây và/hoặc phận khác máy phát âm định Ðơn vị để đo độ cao âm Hertz (viết tắt Hz)  Ðộ mạnh (intensity): biên độ dao động vật thể định Biên độ dao động trị số lớn mà dao động đạt tới nửa chu kì Biên độ dao động lớn, âm vang to ngược lại Ðơn vị đo độ mạnh âm décibel (viết tắt dB)  Ðộ dài (length): thời gian dao động vật thể định  Âm sắc (timbre): phụ thuộc vào độ cao, độ dài độ mạnh tham gia bổ sung vào thành phần kết cấu âm Hệ thống phát người Cơ chế tạo âm thanh:  Ðể phát âm, điều khiển hệ thần kinh, nói chung khơng khí từ phổi đẩy qua khí quản, vào hầu qua cộng minh trường phía hầu để ngồi Có thể thấy hai trường hợp  Trường hợp 1: Khơng khí làm rung dây với tần số để tạo nên âm với điệu định Ta có âm hữu (voiced sounds)  Trường hợp 2: Khơng khí khơng làm rung dây gọi âm vô (voiceless sounds) Bộ máy phát âm người 10 11 12 13 14 15 Hốc mũi Vòm miệng Ổ Vòm miệng mềm Đầu lưỡi Thân lưỡi Lưỡi gà Cơ miệng Yết hầu Nắp đóng quản Dây giả Dây Thanh quản Thực quản Khí quản  Các quan tạo lượng cho hoạt động phát âm phổi, khí quản  Các quan tạo lập, khuếch đại phát âm phận hầu, khoang hầu, khoang miệng khoang mũi Hệ thống thu người Cơ chế hoạt động  Âm tập trung vành tai, vào ống tai đập vào màng nhĩ, làm màng nhĩ rung lên Âm màng nhĩ chuyển đổi thành rung động truyền tới chuỗi xương nằm tai Chuỗi xương chuyển động tác động lên ốc tai Chất dịch ốc tai chuyển động, kích thích tế bào lông chuyển động tạo xung điện, truyền tới dây thần kinh thính giác đưa lên não  Các tế bào lông vị trí khác chịu trách nhiệm cho âm tần số khác Mô tả hệ thống tai người  Dải nghe người thông thường từ 20Hz đến 20kHz, độ nhạy âm lớn từ 1kHz đến 4kHz  Khả xác định hướng nguồn âm tốt xác định khoảng cách đến nguồn âm ... (pitch): tần số dao động dây và/hoặc phận khác máy phát âm định Ðơn vị để đo độ cao âm Hertz (viết tắt Hz)  Ðộ mạnh (intensity): biên độ dao động vật thể định Biên độ dao động trị số lớn mà dao động... (sound, audio) giới tự nhiên chất sóng âm tạo từ dao động vật thể truyền môi trường truyền âm định  Âm tiếng nói (speech), tương tự, sóng âm tạo từ dao động phận máy phát âm truyền môi trường truyền... giải mã: DAC  Thiết bị giải mã dùng để chuyển đổi liệu số thành tín hiệu tương tự thơng qua việc sử dụng thiết bị số hóa ngược lọc thơng thấp Q trình số hóa DỮ LIỆU VĂN BẢN ( TEXT DATA) Tạo