2011年12月29日星期四

language model and cyk

考虑划分短语的问题 是否可以通过使用语言模型的信息,然后通过进行cyk parse 来寻找短语呢? xiangyu 做过这方面的工作,不过他使用的是另外的统计信息。今天本来是想给 自己的模型加语言模型方面的特征来,忽然想到了这个问题。 如果能够parse 的比较好的话 双语同时做parse,那么是否可以获取对齐信息呢 这样做的一个很大优点就是速度快。parse的速度是O(n^3) 而ITG这种同步句法分析则需要O(n^6) 速度真是个问题啊。

没有评论: