... kê nhanh 24 Sửdụng cấu hình Interpolation: qua thử nghiệm với ngữ liệu có cho kết tốt Backoff Gióng hàng từ Dùng GIZA++: Phổ biến Mô hình gióng hàng: IBM Model 1-5 mô hình HMM (thay ... 23 Xây dựng mô hình ngôn ngữ Các công cụ xây dựng: SRILM, IRSTLM, RandLM Lựa chọn SRILM: Mô hình n-gram Cấu hình làm mịn hỗ trợ: Interpolation Backoff Ưu điểm: Cấu hình đơn giản ... câu tiếng Anh đầu vào e, tìm câu tiếng Việt v* cho xác suất điều kiện P(v|e) lớn Công thức Bayes: v* = argmaxvP(e|v)P(v) P(e|v): Mô hình dịch P(v) : Mô hình ngôn ngữ Mô hình dịch máy thống...
... luyện WSD, mô hìnhsửdụng tập ngữ liệu huấn luyện để đưa mô hình cho cụm từ tương ứng Mỗi từ, cụm từ có mô hình riêng 4.6.2 Các thuộc tính WSD Chúng sửdụng thuộc tính thường hay sửdụng nghiên ... WSD sửdụng MEM khoảng 70%, điểm BLEU hệ dịch máy tích hợp WSD tăng lên từ 36.57 (không sửdụng WSD) lên 37.45 (sử dụng tất thuộc tính WSD) Ngoài ra, thực nghiệm cho thấy thuộc tính WSD sửdụng ... tiếp mô hình dịch sửdụng mô hình log-linear đề xuất Och Ney [4] Mô hình log-linear mô hình công thức tổng quát sau: h (x) i i Với trọng số λ hàm đặc trưng h(x) Trong mô hình log-linear áp dụng...
... luận văn đƣợc đồng ý sửdụng thông tin để xây dựng luận văn không sửdụng tùy ý nội dung luận văn vào mục đích khác; Bên cạnh nội dung luận văn hoàn toàn thực dƣới hƣớng dẫn tận tình TS Nguyễn Văn ... đầu vào Error! Bookmark not defined DANH MỤC CÁC HÌNH VẼ Hình 1.1: Lịch sử dịch máy Error! Bookmark not defined Hình 1.2 Sơ đồ tổng quát hệ dịch máy Error! Bookmark not defined Hình ... THIỆU Trong bối cảnh pháttriển giới ngày nay, nhu cầu trao đổi thông tin ngày nhiều, số lƣợng ngôn ngữ sửdụng lớn Tuy nhiên, vấn đề khó khăn gặp phải số lƣợng ngôn ngữ sửdụng lớn cần phải có...
... ⎩ ⎭ (3.4) Và mô hình dịch thống kê mô hình hóa hình 3.1 Hình 3.1: Kiến trúc SMT sửdụng mô hình log-linear Trong mô hình log-linear áp dụng cho dịch máy thống kê, mô hình ngôn ngữ mô hình dịch ... Europarl corpus [24], Koehn pháttriển - Bộ tách từ: sửdụng công cụ JvnSegmenter [39] cung cấp dạng mã nguồn mở nhóm Phan Xuân Hiếu, Nguyễn Cẩm Tú pháttriểnsửdụng kĩ thuật Conditional Random ... Europarl corpus, Koehn pháttriển - Bộ gán nhãn từ loại (POS tagger): sửdụng công cụ CRFTagger [14] cung cấp dạng mã nguồn mở nhóm Phan Xuân Hiếu, Nguyễn Cẩm Tú pháttriểnsửdụng kĩ thuật Conditional...
... (tự sao) + Đặt vào hàng đợi khởi động hệ thống + Đăng ký kiểm soát hành động bàn phím Kết thực nghiệm cho thấy việc nắm bắt, kiểm soát theo hành vi thích hợp tối đa mẫu virus chưa phát hiện, đồng ... theo hành vi thích hợp tối đa mẫu virus chưa phát hiện, đồng thời giúp người dùng kiểm soát việc sửdụng thiết bị, giảm bớt nỗi lo ngại lây nhiễm virus isVirus k–n k k–n+1 k+1 b) Xác định virus ... sánh kiểm tra xác thực virus Khi chương trình ứng dụng virus thực hành động nhạy cảm với tần số lớn tần số cho phép Mỗi lần, chương trình ứng dụng thực thi hành động nguy hiểm, tần số trung bình...
... nội dung Chính pháttriển công cụ giúp thêm dấu tiếng Việt vào văn không dấu việc cần thiết thú vị : VietPad chƣơng trình text editor Việt Unicode pháttriển Quân Nguyễn nhóm pháttriển http://vietpad.sourceforge.net ... dịch máy dựa vào thống kê có tính khả chuyển cao, có khả áp dụng đƣợc cho cặp ngôn ngữ Hệ thống SMT đƣợc đề xuất lần Brown năm 1990 sửdụng mô hình kênh nhiễu (noisy channel model) pháttriển áp ... Windows, Linux/Unix, Mac OS X, hay Solaris VietPad đƣợc pháttriển Quân Nguyễn nhóm pháttriển http://vietpad.sourceforge.net Ngƣời sửdụng đánh chữ Việt tƣơng thích với tiêu chuẩn Unicode dùng...
... chương trình sửdụng -lm file: đọc mô hình ngôn ngữ từ tệp file Tham số tham số bắt buộc, trừ tham số -null chọn -null: không sửdụng mô hình ngôn ngữ đọc từ tệp, mà sửdụng mô hình ngôn ngữ ... SMT Sau xây dựng mô hình Ngram với phương pháp làm mịn khác nhau, sửdụng mô hình Ngram vào mô hình dịch máy thống kê dịch từ tiếng Anh sang tiếng Việt Bằng cách sửdụng mô hình dịch máy thống ... dựa vào cụm sửdụng mô hình kênh nhiễu, áp dụng công thức Bayes ta có: Do P(f) không đổi e, vấn đề trở thành việc tìm câu e nhằm tối đa hóa P(f\e)P(e) Việc xây dựng mô hình ngôn ngữ cần sử dụng...
... động từ phụ thuộc vào chủ từ tân từ - Tận dụng mô hình ngôn ngữ cú pháp (syntactic language models) Câu dịch tốt câu dịch có cú pháp “đúng” dựa vào mô hình ngôn ngữ cú pháp, mô hình cho phép kiểm ... or the man (a) Hình 2.6 Sơ đồ cú pháp a is small - 11 - ? S VP NP the VP house is the man is small (b) Hình 2.7 Sơ đồ cú pháp b Bằng cách sửdụng mô hình ngôn ngữ cú pháp, cú pháp hình (a) chọn ... nhanh chóng hết Cùng với pháttriển lĩnh vực trí tuệ nhân tạo, dịch máy trải qua giai đoạn thăng trầm Có lúc rơi vào hoàn cảnh bế tắc, tưởng chừng phải dừng bước hướng pháttriển Tuy nhiên, việc...
... nội dung Chính pháttriển công cụ giúp thêm dấu tiếng Việt vào văn không dấu việc cần thiết thú vị : VietPad chƣơng trình text editor Việt Unicode pháttriển Quân Nguyễn nhóm pháttriển http://vietpad.sourceforge.net ... dịch máy dựa vào thống kê có tính khả chuyển cao, có khả áp dụng đƣợc cho cặp ngôn ngữ Hệ thống SMT đƣợc đề xuất lần Brown năm 1990 sửdụng mô hình kênh nhiễu (noisy channel model) pháttriển áp ... Windows, Linux/Unix, Mac OS X, hay Solaris VietPad đƣợc pháttriển Quân Nguyễn nhóm pháttriển http://vietpad.sourceforge.net Ngƣời sửdụng đánh chữ Việt tƣơng thích với tiêu chuẩn Unicode dùng...
... động từ phụ thuộc vào chủ từ tân từ - Tận dụng mô hình ngôn ngữ cú pháp (syntactic language models) Câu dịch tốt câu dịch có cú pháp “đúng” dựa vào mô hình ngôn ngữ cú pháp, mô hình cho phép kiểm ... or the man (a) Hình 2.6 Sơ đồ cú pháp a is small - 11 - ? S VP NP the VP house is the man is small (b) Hình 2.7 Sơ đồ cú pháp b Bằng cách sửdụng mô hình ngôn ngữ cú pháp, cú pháp hình (a) chọn ... nhanh chóng hết Cùng với pháttriển lĩnh vực trí tuệ nhân tạo, dịch máy trải qua giai đoạn thăng trầm Có lúc rơi vào hoàn cảnh bế tắc, tưởng chừng phải dừng bước hướng pháttriển Tuy nhiên, việc...
... 20 Hình 2.5 Mô hình dịch factored SMT 27 Hình 4.1 Mô hình chung luận văn 43 Hình 4.2 Mô hình ngôn ngữ từ vựng 49 Hình 4.3 Mô hình ngôn ngữ từ loại 49 Hình ... điểm mà mô hình dịch máy thống kê có tiềm lớn ứng dụng dịch máy Rất nhiều nhóm nghiên cứu tập trung khai thác pháttriển hệ dịch máy mô hình Do đó, hƣớng đến pháttriển hệ dịch sửdụng đồng thời ... từ 3.2.3 Tích hợp vào mô hình ngôn ngữ Nhóm nghiên cứu [9] đƣa phƣơng pháp sửdụng thông tin cú pháp cho dịch máy thống kê Họ sửdụng mô hình phân tích cú pháp thống kê nhƣ mô hình ngôn ngữ SMT...
... dịch Post-generation (phát sinh từ chức kết dịch): mô hình SMT phát sinh từ chức kết dịch Hệ thống TFWIM: mô hìnhphát sinh từ chức đượctích hợp lúc giải mã Trong báo này, sửdụng ngữ liệu song ... giảthiếti|PPgo|VBschool|NN | Mô hình TFWIM tìm vị trí chèn Hình 2: Hình Quá trình tìm vị trí chèn phát sinh giả thiết giải mã sau áp dụng công thức (3) Kết sau tìm từ thích hợp để chèn là: Hình Kết giải mã ... 24 23.5 Mô hìnhHình So sánh điểm BLEU mô hình dịch Sau vài so sánh giữakết dịch mô hình sở mô hình TFWIM Trường hợp 1: kết dịch mô hình đề tài tốt mô hình sở họcó_thểtựnhìnthấy Câu tiếng gấu...
... gióng hàng chéo để phân lớp cho câu đầu vào, thứ hai dịch câu đầu vào với tất trọng số sửdụng mô hình xếp hạng để chọn câu đầu tốt Phân lớp cho câu đầu vào theo đặc trƣng Phân lớp dựa TF-IDF ... công trình Lü cộng (2007) Liu cộng (2012) sửdụng tf-idf để đo tương tự câu đầu vào với phân nhóm Sau phân nhóm cho câu đầu vào dựa vào độ đo này, câu phân vào nhóm dịch trọng số nhóm Phân lớp dựa ... THỰC NGHIỆM VÀ ĐÁNH GIÁ Chương mô tả chi tiết thí nghiệm thực để đánh giá hiệu hướng tiếp cận chúng tôi, đồng thời so sánh hiệu dịch mô hình với mô hình Och (2003) Ngữ liệu Ngữ liệu sửdụng để huấn...
... điểm mà mô hình dịch máy thống kê có tiềm lớn ứng dụng dịch máy Rất nhiều nhóm nghiên cứu tập trung khai thác pháttriển hệ dịch máy mô hình Do đó, hướng đến pháttriển hệ dịch sửdụng đồng thời ... xuất mô hình dịch factored (đại diện) tích hợp trực tiếp tri thức ngôn ngữ vào mô hình dịch Mô hìnhpháttriển dựa cách tiếp cận dịch máy dựa ngữ Cải tiến mô hình thông tin tri thức tích hợp vào ... từ 3.2.3 Tích hợp vào mô hình ngôn ngữ Nhóm nghiên cứu [9] đưa phương pháp sửdụng thông tin cú pháp cho dịch máy thống kê Họ sửdụng mô hình phân tích cú pháp thống kê mô hình ngôn ngữ SMT Kết...
... trình tự phương pháp dựa sở từ, mà sửdụng khuôn dạng ghi tuyến tính Các thành phần mô hình ngôn ngữ, mô hình dịch cụm từ, mô hình dịch từ vựng mô hình đảo cụm sửdụng cách thích hợp Khuôn dạng cho ... cách rõ ràng đại diện sửdụng rộng rãi nhiều mô hình dịch PB-SMT 14 Phương pháp sửdụng việc thực tối ưu bảng cụm từ (JunczysDowmunt, 2012a, b) cho Moses (Koehn 2007) [4] sửdụng để thay cho bảng ... quát mô hình dịch thống kê thể hình 1.1 Câu nguồn Tiền xử lý Bộ giải mã (tìm kiếm): V1J arg max p(v1J | e1I ) Mô hình ngôn ngữ Mô hình gióng hàng Mô hình từ vựng Hậu xử lý … Câu đích Hình 1.1:...
... hợp tri thức vào hệ thống dịch máy 39 3.2.1 Tích hợp thông tin hình thái vào mô hình dịch 39 3.2.2 Tích hợp thông tin cú pháp vào mô hình dịch 40 3.2.3 Tích hợp vào mô hình ngôn ngữ ... dịch Và khảo sát khác biệt cặp ngôn ngữ, đặc biệt cặp khác nhiều trở ngại đem mô hình áp dụng cho cặp ngôn ngữ khác trật tự từ 3.1.2 Sửdụng thông tin từ loại 3.1.3 Sửdụng luật biến đổi hình ... 63 Hình 2.5 Mô hình dịch factored SMT 27 Bảng 5.4 Kết dịch hệ tích hợp thông tin hình thái từ vào câu tiếng Việt Hình 4.1 Mô hình chung luận văn 43 64 Hình...
... xây dựng đưa vào sửdụng Châu Âu tiêu chuẩn, đặc tính GSM công bố lần vào năm 1990 Vào cuối năm 1993 có triệu thuê bao sửdụng mạng GSM 70 nhà cung cấp dịch vụ 48 quốc gia Đến GSM sửdụng tỷ người ... (Personal Identity Number) để bảo vệ quyền sửdụng người sửdụng hợp pháp SIM cho 15 phép người sửdụngsửdụng nhiều dịch vụ cho phép người dùng truy nhập vào PLMN (Public Land Mobile Network) khác ... GPS, nhanh GPS Sửdụng dịch vụ Muốn sửdụng My Location điện thoại di động, cần download điện thoại, cài đặt sửdụng cách dễ dàng Đặc điểm Đây công nghệ sửdụng thông tin từ trạm phát sóng BTS...
... (Personal Identity Number) để bảo vệ quyền sửdụng người sửdụng hợp pháp SIM cho phép người sửdụngsửdụng nhiều dịch vụ cho phép người dùng truy nhập vào PLMN (Public Land Mobile Network) khác ... GPS, nhanh GPS Sửdụng dịch vụ Muốn sửdụng My Location điện thoại di động, cần download điện thoại, cài đặt sửdụng cách dễ dàng Đặc điểm: Đây công nghệ sửdụng thông tin từ trạm phát sóng BTS ... Location (beta)" sửdụng Google Maps cho điện thoại di động cho phép xác định tọa độ người sửdụng không cần GPS Khi sửdụng dịch vụ khách hàng biết xác tọa độ người dùng dựa vào trạm phát sóng gần...