生活随笔
收集整理的這篇文章主要介紹了
统计机器翻译中翻译模型的构建
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
因為課程的緣故,需要和同學一起折騰一個統計機器翻譯工具出來。我的工作就是翻譯模型構建這一步。根據網絡上的說法,我使用了GIZA++這個工具。以下內容參考了如下資源:
翻譯系統搭建,這個資料算是比較全面的,但是在沒有說明應該使用哪個版本的GIZA++和mkclsGIZA++實驗報告,比上面文檔更加詳細(翻譯模型這一塊),也給出GIZA++的版本和一些解決方案,但是我沒有使用,但是命令都是采用這些這個實驗報告里面提供的命令ti.final等文件未生成的解決方法,Issue 29,解決方案就是采用1.0.3的giza++舊的版本的giza++運行時buffer overflow,Issue 11,解決方案是修改giza++的file_spec.h
*** file_spec.h 2009/07/10 21:38:39 1.1
--- file_spec.h 2009/07/13 11:37:21
***************
*** 37,49 ****struct tm *local;time_t t;char *user;
! char time_stmp[17];char *file_spec = 0;t = time(NULL);local = localtime(&t);! sprintf(time_stmp, "%02d-%02d-%02d.%02d%02d%02d.", local->tm_year, (local->tm_mon + 1), local->tm_mday, local->tm_hour, local->tm_min, local->tm_sec);user = getenv("USER");
--- 37,49 ----struct tm *local;time_t t;char *user;
! char time_stmp[19];char *file_spec = 0;t = time(NULL);local = localtime(&t);! sprintf(time_stmp, "%04d-%02d-%02d.%02d%02d%02d.", 1900 + local->tm_year, (local->tm_mon + 1), local->tm_mday, local->tm_hour, local->tm_min, local->tm_sec);user = getenv("USER");NOTE:
上面的步驟中漏掉了中英文的分詞,這一部分的工作是后面工作的基礎!!!
總結
以上是生活随笔為你收集整理的统计机器翻译中翻译模型的构建的全部內容,希望文章能夠幫你解決所遇到的問題。
如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。