sentence maximum entropy language model
CUSTOMER SATISFACTION MEASUREMENT MODELS: GENERALISED MAXIMUM ENTROPY APPROACH
Ngày tải lên :
19/10/2013, 07:15
... model
Generalized Maximum Entropy Algorithm
Customer satisfaction measurement models 214
developed by Jöreskog (1973), which estimates the parameters of the model by the
maximum likelihood ... Golan, A., Judge, G. & Karp, L.1996. A maximum entropy approach to estimation
and inference in dynamic models or counting fish in the sea using maximum
entropy. J. of Economic Dynamics and Control ... methodology of the Generalised Maximum Entropy (GME)
approach for estimating linear models that contain latent variables such as customer
satisfaction measurement models. The GME approach is a...
- 14
- 549
- 0
Tài liệu Báo cáo khoa học: "Refined Lexicon Models for Statistical Machine Translation using a Maximum Entropy Approach" pptx
Ngày tải lên :
20/02/2014, 18:20
... 1997. Maximum entropy modelling
toolkit. Technical report, Princeton Univesity.
R. Rosenfeld. 1996. A maximum entropy approach to
adaptive statistical language modeling. Computer,
Speech and Language, ... of
direct translation models. In Proc. Int. Conf. on
Acoustics, Speech, and Signal Processing, pages
189–192.
Jochen Peters and Dietrich Klakow. 1999. Compact
maximum entropy language models. In Proceed-
ings ... maximum entropy translation model.
Other authors have applied this approach to lan-
guage modeling (Rosenfeld, 1996; Martin et al.,
1999; Peters and Klakow, 1999). A short review
of the maximum entropy...
- 8
- 427
- 0
Báo cáo khoa học: "Maximum Entropy Based Phrase Reordering Model for Statistical Machine Translation" docx
Ngày tải lên :
08/03/2014, 02:21
... flexible. It makes our model reorder any
blocks, observed in training or not. The whole
maximum entropy based reordering model is em-
bedded inside a log-linear phrase-based model of
translation. ... to
translate a sentence of average length 28.3 words
on a 2GHz Linux system with 4G RAM memory.
3 Maximum Entropy Based Reordering
Model
In this section, we discuss how to create a max-
imum entropy ... reordering model for
phrase-based statistical machine transla-
tion (SMT) that uses a maximum entropy
(MaxEnt) model to predicate reorderings
of neighbor blocks (phrase pairs). The
model provides...
- 8
- 390
- 0
Mô hình maximum entropy và ứng dụng
Ngày tải lên :
23/11/2012, 15:03
... cực đại entropy 12
3.1 Tổng quát mô hình cực đại entropy 12
3.2 Mô hình cực đại entropy 15
3.2.1 Dữ liệu huấn luyện 15
3.2.2 Thống kê, đặc trưng và ràng buộc 16
3.2.3 Nguyên lý cực đại entropy ... ứng với dữ liệu
36
Hình 3.1: Lựa chọn đặc trưng
(trích dẫn: trang 12 quyển A Maximum Entropy Approach to Natural Language
Processing)
3.3.2 Cơ sở lựa chọn đặc trưng
Cơ sở của thủ tục tăng dần ...
nghiên cứu trong luận văn là mô hình cực đại entropy [Berger, 1996 và Della Pietra,
1997].
1.2 Giới thiệu mô hình cực đại entropy
Mô hình cực đại entropy là phương pháp phân loại văn bản được...
- 61
- 1.3K
- 15
MÔ HÌNH MAXIMUM ENTROPY
Ngày tải lên :
25/04/2013, 11:56
... Quang Dũng
MÔ HÌNH MAXIMUM ENTROPY
VÀ ỨNG DỤNG
KHOÁ LUẬN TỐT NGHIỆP ĐẠI HỌC HỆ CHÍNH QUY
Ngành: Công Nghệ Thông Tin
Cán bộ hướng dẫn: Lê Anh Cường
HÀ NỘI - 2010
Mô hình cực đại entropy có được tối ... log-likelihood được biểu diễn như hàm lồi 2 tham số
(trích dẫn: trang 15 quyển A Maximum Entropy Approach to Natural Language
Processing)
26
Để chọn được tham số k tốt nhất, thuật toán phải được ... thể giúp cải thiện hiệu quả của
phương pháp NB.
7
Chương 3: Mô hình cực đại entropy
Dựa trên tài liệu mô hình cực đại entropy của [Adam L. Berger & Stephen A. Della
Pietra & Vincent J....
- 36
- 473
- 0
041_Sử dụng mô hình Maximum Entropy nhận dạng màu da ảnh màu
Ngày tải lên :
06/10/2013, 19:20
... phối bất biến p(y|x).
Sau đó tính trung bình, p(ys|x) được tính bằng
- 50 -
SỬ DỤNG MÔ HÌNH MAXIMUM ENTROPY NHẬN DẠNG MÀU DA ẢNH MÀU
Nguyễn Tuấn Nghĩa
MSV: 0122006
Email: nghiak46cb@yahoo.com
... màu x
s
và
skinness y
s
, trong tập dữ liệu học.
Theo công thức nhân Larange khi mô hình
đạt entropy cực đại, ta có:
p(y|x) = ∏
s∈S
q(y
s
|x
s
) (1)
trong đó: q(y
s
|x
s
) =
ss
1
(|y)(y)
()
s
s
qx ... hình nhận dạng màu da
ảnh màu với ràng buộc lấy từ tập cơ sở dữ liệu
Compaq. Mỗi mô hình sử dụng entropy cực
đại, mô hình đầu tiên là mô hình Baseline, xem
các pixel là độc lập với nhau. Mô hình...
- 4
- 528
- 1
Tài liệu Báo cáo khoa học: "Large-Scale Syntactic Language Modeling with Treelets" docx
Ngày tải lên :
19/02/2014, 19:20
... that the n-gram language model used by the MT
system was much smaller than the 5-GRAM model, as they were
only trained on the English sides of their parallel data.
fect language model might not ... United
States were asked to compare translations using our
TREELET language model as the language model
feature to those using the 5-GRAM model.
12
We had
1000 such translation pairs rated by 4 separate ... TREELET model, we also
show results for the following baselines:
5-GRAM A 5-gram interpolated Kneser-Ney model.
PCFG-LA The Berkeley Parser in language model mode.
HEADLEX A head-lexicalized model...
- 10
- 463
- 0
Tài liệu Báo cáo khoa học: "A Large Scale Distributed Syntactic, Semantic and Lexical Language Model for Machine Translation" doc
Ngày tải lên :
20/02/2014, 04:20
... 5-gram/2-SLM+2-gram/4-SLM+5-
gram/PLSA language model improves both signif-
icantly. Bear in mind that Charniak et al. (2003) in-
tegrated Charniak’s language model with the syntax-
based translation model Yamada and ... Large language models in ma-
chine translation. The 2007 Conference on Empirical
Methods in Natural Language Processing (EMNLP),
858-867.
E. Charniak. 2001. Immediate-head parsing for language
models. ... Human Language Technology
Conference (HLT), 48-54.
S. Khudanpur and J. Wu. 2000. Maximum entropy tech-
niques for exploiting syntactic, semantic and colloca-
tional dependencies in language modeling....
- 10
- 567
- 0
Tài liệu Báo cáo khoa học: "Incremental Syntactic Language Models for Phrase-based Translation" pptx
Ngày tải lên :
20/02/2014, 04:20
... incorporate large-
scale n-gram language models in conjunction with
incremental syntactic language models.
The added decoding time cost of our syntactic
language model is very high. By increasing ... parsing for language modeling, but do not
use this language model in a translation system. Our
work, in contrast to the above approaches, explores
the use of incremental syntactic language models ... trans-
lation has effectively used n-gram word sequence
models as language models.
Modern phrase-based translation using large scale
n-gram language models generally performs well
in terms of lexical...
- 12
- 510
- 0
Tài liệu Báo cáo khoa học: "The impact of language models and loss functions on repair disfluency detection" pptx
Ngày tải lên :
20/02/2014, 04:20
... f-score outperform state-of-the-art models re-
709
mary corpus for our model. The language model
part of the noisy channel model already uses a bi-
gram language model based on Switchboard, but in
the ... detail.
5.2 Language Model
Informally, the task of language model component
of the noisy channel model is to assess fluency of
the sentence with disfluency removed. Ideally we
would like to have a model ... 19 other folds to construct a language model
and then score the utterance in this fold with that
language model.
The largest widely-available corpus for language
modelling is the Web 1T 5-gram...
- 9
- 609
- 0