Comments on: open-gram项目简介 http://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/?utm_source=rss&utm_medium=rss&utm_campaign=open-gram%25e9%25a1%25b9%25e7%259b%25ae%25e7%25ae%2580%25e4%25bb%258b Yong Sun's Blog Wed, 16 May 2012 04:13:59 +0000 hourly 1 http://wordpress.org/?v=3.3.2 By: yongsunhttp://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/comment-page-1/#comment-2335 yongsun Wed, 09 Jun 2010 00:45:26 +0000 http://yongsun.me/?p=1056#comment-2335 @jiapu, 我们的确需要有篇文档来说明一下， 人文社会科学：n-gram（本例中是unigram） 0.000000004155：p(w|h)，如果n-gram是A/B/C，这个概率值是p(C|AB) 1.000000000000：bow(h)，如果n-gram是A/B/C，这个值是bow(AB) (0, 0)：回退到低阶n-gram的索引（不一定总是n-1），本例中，第一个0表示是回退到平均分布的0-gram，第二个0表示是0-gram上的index @jiapu, 我们的确需要有篇文档来说明一下，

人文社会科学：n-gram（本例中是unigram）
0.000000004155：p(w|h)，如果n-gram是A/B/C，这个概率值是p(C|AB)
1.000000000000：bow(h)，如果n-gram是A/B/C，这个值是bow(AB)
(0, 0)：回退到低阶n-gram的索引（不一定总是n-1），本例中，第一个0表示是回退到平均分布的0-gram，第二个0表示是0-gram上的index

]]> By: jia puhttp://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/comment-page-1/#comment-2333 jia pu Wed, 09 Jun 2010 00:20:45 +0000 http://yongsun.me/?p=1056#comment-2333 Hello, I'm curious how I should interpret each column in the lm_sc.t3g.arpa, for instance: 人文社会学科 0.000000004155 1.000000000000 (0,0) Thanks. Hello,

I'm curious how I should interpret each column in the lm_sc.t3g.arpa, for instance:

人文社会学科 0.000000004155 1.000000000000 (0,0)

Thanks.

]]> By: tchaikovhttp://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/comment-page-1/#comment-1896 tchaikov Fri, 05 Mar 2010 07:37:32 +0000 http://yongsun.me/?p=1056#comment-1896 错了，我用的是 cconv 不是 pyzh。:P 错了，我用的是 cconv 不是 pyzh。:P

]]> By: tchaikovhttp://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/comment-page-1/#comment-1895 tchaikov Fri, 05 Mar 2010 04:36:09 +0000 http://yongsun.me/?p=1056#comment-1895 对了，ibus-pinyin-data 现在叫 ibus-pinyin-db-open-phrase，已经进入了 ubuntu 和 debian。license 是 GPLv2。 对了，ibus-pinyin-data 现在叫 ibus-pinyin-db-open-phrase，已经进入了 ubuntu 和 debian。license 是 GPLv2。

]]> By: tchaikovhttp://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/comment-page-1/#comment-1894 tchaikov Fri, 05 Mar 2010 04:12:12 +0000 http://yongsun.me/?p=1056#comment-1894 不是的，那样根本就是不是繁简转换嘛。我目前是用 http://code.google.com/p/pyzh/ 提供的工具。接下来，我准备用 wikipedia 提供的对照表来转换。 不是的，那样根本就是不是繁简转换嘛。我目前是用 http://code.google.com/p/pyzh/ 提供的工具。接下来，我准备用 wikipedia 提供的对照表来转换。

]]> By: yongsunhttp://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/comment-page-1/#comment-1893 yongsun Fri, 05 Mar 2010 04:09:43 +0000 http://yongsun.me/?p=1056#comment-1893 btw, 你是如何将其转换为简体的呢？by iconv? btw, 你是如何将其转换为简体的呢？by iconv?

]]> By: yongsunhttp://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/comment-page-1/#comment-1892 yongsun Fri, 05 Mar 2010 04:08:46 +0000 http://yongsun.me/?p=1056#comment-1892 @tchaikov, cool! :) @tchaikov, cool! :)

]]> By: tchaikovhttp://yongsun.me/2010/03/open-gram%e9%a1%b9%e7%9b%ae%e7%ae%80%e4%bb%8b/comment-page-1/#comment-1891 tchaikov Fri, 05 Mar 2010 03:47:50 +0000 http://yongsun.me/?p=1056#comment-1891 刚改正了一个 bug。原来的 zh.wikipedia 下载得到的语料用的是繁体。里面的”於“在转换的时候没有变成”于“，同时因为它是多音字，有个读音是”wu“，导致 "wu" 第一个就是它。新的版本已经上传了。 刚改正了一个 bug。原来的 zh.wikipedia 下载得到的语料用的是繁体。里面的”於“在转换的时候没有变成”于“，同时因为它是多音字，有个读音是”wu“，导致 "wu" 第一个就是它。新的版本已经上传了。

]]>