rpms
/
libkkc-data
7
0
Fork 0
Code Issues Pull Requests Releases Activity

import libkkc-data-0.2.7-12.el8

This commit is contained in:
CentOS Sources 2019-08-05 11:04:14 -04:00 committed by Stepan Oksanichenko
commit 30da443743
5 changed files with 933 additions and 0 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

1
.gitignore vendored Normal file
View File

@ -0,0 +1 @@
SOURCES/libkkc-data-0.2.7.tar.xz

1
.libkkc-data.metadata Normal file
View File

@ -0,0 +1 @@
6e5d833744f8311908f12168dcf697633efc2795 SOURCES/libkkc-data-0.2.7.tar.xz

715
SOURCES/libkkc-data-1720044-reiwa.patch Normal file
View File

@ -0,0 +1,715 @@
--- libkkc-data-0.2.7/data/models/text3/data.arpa.orig 2013-07-29 09:53:44.000000000 +0900
+++ libkkc-data-0.2.7/data/models/text3/data.arpa 2019-06-14 19:40:12.243954762 +0900
@@ -113032,6 +113032,8 @@ ngram 3=1777469
-5.793264 れいる/レイル -0.118066
-5.793264 れいれんぽう/嶺連峰 -0.118066
-5.793264 れいれーだー/レイレーダー -0.118066
+-4.144828 れいわ/令和 -0.424945
+-5.793264 れいわし/令和史 -0.118066
-4.957430 れいん/レイン -0.200946
-5.793264 れいん/レ印 -0.118066
-5.145029 れいんぼー/レインボー -0.154591
@@ -144907,6 +144909,7 @@ ngram 3=1777469
-5.098032 <s> れいや/礼弥 -0.072304
-5.044164 <s> れいりょう/冷涼 -0.072304
-4.972710 <s> れいりょく/霊力 -0.236942
+-4.392173 <s> れいわ/令和 -0.313940
-4.940956 <s> れいんぼー/レインボー -0.072304
-5.069764 <s> れいヴ/レイヴ -0.072304
-5.098032 <s> れう/レウ -0.072304
@@ -146556,6 +146559,7 @@ ngram 3=1777469
-2.982255 ”/“ りか/リカ -0.072304
-2.984747 ”/“ りっぷす/リップス -0.072304
-2.984747 ”/“ りゅどべっく/リュドベック -0.072304
+-2.401531 ”/“ れいわ/令和 -0.072304
-2.967813 ”/“ ろしあ/ロシア -0.072304
-2.984747 ”/“ ろろ/ロロ -0.072304
-2.978004 ”/“ ろんぐ/ロング -0.072304
@@ -179284,6 +179288,7 @@ ngram 3=1777469
-5.474002 、/、 れいゆう/霊友 -0.072304
-5.513696 、/、 れいら/澪ら -0.072304
-5.474002 、/、 れいらく/零落 -0.072304
+-3.626458 、/、 れいわ/令和 -0.214269
-5.201475 、/、 れいん/レイン -0.072304
-5.304164 、/、 れいんぼー/レインボー -0.072304
-5.474002 、/、 れいヴ/レイヴ -0.072304
@@ -193052,6 +193057,7 @@ ngram 3=1777469
-4.874282 「/「 れいぷれい/レイプレイ -0.072304
-4.802581 「/「 れいめい/黎明 -0.072304
-4.858884 「/「 れいらく/零落 -0.072304
+-3.563377 「/「 れいわ/令和 -0.072304
-4.270722 「/「 れいん/レイン -0.072304
-4.288723 「/「 れいんぼー/レインボー -0.174867
-4.712579 「/「 れお/レオ -0.072304
@@ -194481,6 +194487,7 @@ ngram 3=1777469
-4.779356 」/」 るびー/ルビー -0.072304
-4.801566 」/」 るーにー/ルーニー -0.072304
-4.801566 」/」 れいき/霊亀 -0.072304
+-4.716716 」/」 れいわ/令和 -0.072304
-4.753206 」/」 れっど/レッド -0.072304
-4.797707 」/」 れつでん/列伝 -0.072304
-4.148340 」/」 れべる/レベル -0.072304
@@ -284130,6 +284137,7 @@ ngram 3=1777469
-4.663808 から/から れいさい/零細 -0.072304
-4.654098 から/から れいすい/冷水 -0.072304
-4.687050 から/から れいほん/零本 -0.072304
+-4.016318 から/から れいわ/令和 -0.072304
-3.924932 から/から れきし/歴史 -0.072304
-3.486731 から/から れぎゅらー/レギュラー -0.120565
-4.321704 から/から れこーど/レコード -0.072304
@@ -303384,6 +303392,7 @@ ngram 3=1777469
-5.074968 が/が れいぼう/冷房 -0.072304
-5.183461 が/が れいめい/黎明 -0.072304
-5.226618 が/が れいりー/レイリー -0.072304
+-4.488603 が/が れいわ/令和 -0.072304
-5.163391 が/が れいんぼー/レインボー -0.072304
-5.257272 が/が れかい/レカイ -0.072304
-5.163391 が/が れき/礫 -0.072304
@@ -304886,6 +304895,7 @@ ngram 3=1777469
-1.964672 がいよう/概要 へいせい/平成 -0.072304
-1.858453 がいよう/概要 や/や -0.072304
-1.965177 がいよう/概要 らん/欄 -0.072304
+-1.964672 がいよう/概要 れいわ/令和 -0.072304
-0.751328 がいよう/概要 を/を -0.072304
-1.822462 がいよう/概要 ）/） -0.072304
-0.602046 がいようせつ/概要節 で/で -0.072304
@@ -309841,6 +309851,7 @@ ngram 3=1777469
-3.690753 き/き るい/ルイ -0.072304
-3.498056 き/き れ/れ -0.072304
-3.701199 き/き れい/零 -0.072304
+-3.662051 き/き れいわ/令和 -0.072304
-3.606577 き/き れっしゃ/列車 -0.072304
-3.686900 き/き れぽーと/レポート -0.072304
-3.117674 き/き ろーま/ローマ -0.072304
@@ -326202,6 +326213,7 @@ ngram 3=1777469
-2.370931 きんねん/近年 より/より -0.072304
-2.448658 きんねん/近年 らくろす/ラクロス -0.072304
-2.448093 きんねん/近年 りにゅーある/リニューアル -0.072304
+-2.446084 きんねん/近年 れいわ/令和 -0.072304
-2.093394 きんねん/近年 （/（ -0.072304
-1.099908 きんのう/勤王 せいさく/政策 -0.072304
-1.099661 きんのう/勤王 とう/党 -0.072304
@@ -326960,6 +326972,7 @@ ngram 3=1777469
-2.933797 ぎかい/議会 ぼうえい/防衛 -0.072304
-2.603043 ぎかい/議会 も/も -0.072304
-2.586084 ぎかい/議会 や/や -0.072304
+-2.940518 ぎかい/議会 れいわ/令和 -0.146868
-1.489269 ぎかい/議会 を/を -0.072304
-1.708817 ぎかい/議会 （/（ -0.113334
-2.498957 ぎかい/議会 ）/） -0.072304
@@ -332104,6 +332117,7 @@ ngram 3=1777469
-3.732900 く/く れいせい/冷静 -0.072304
-4.244735 く/く れいぞう/冷蔵 -0.072304
-4.210069 く/く れいはい/礼拝 -0.072304
+-4.159045 く/く れいわ/令和 -0.072304
-3.653226 く/く れきし/歴史 -0.072304
-4.159045 く/く れぎゅらー/レギュラー -0.072304
-4.007426 く/く れっしゃ/列車 -0.072304
@@ -333620,6 +333634,7 @@ ngram 3=1777469
-3.477315 くうはく/　 れいぎ/礼儀 -0.072304
-3.480483 くうはく/　 れいて/レイテ -0.072304
-3.459790 くうはく/　 れいはい/礼拝 -0.072304
+-2.642860 くうはく/　 れいわ/令和 -0.146868
-3.488293 くうはく/　 れんば/レンバ -0.072304
-3.423929 くうはく/　 ろしあ/ロシア -0.072304
-3.483673 くうはく/　 わか/分 -0.072304
@@ -382948,6 +382963,7 @@ ngram 3=1777469
-1.024375 さいはん/再版 は/は -0.072304
-0.593435 さいはん/再犯 を/を -0.072304
-0.623280 さいはん/最判 へいせい/平成 -0.072304
+-0.623280 さいはん/最判 れいわ/令和 -0.072304
-0.623350 さいば/サイバ とろん/トロン -0.072304
-0.623226 さいば/西馬 おん/音 -0.072304
-1.990008 さいばい/栽培 、/、 -0.072304
@@ -389712,6 +389728,7 @@ ngram 3=1777469
-3.437459 さらに/さらに るーつ/ルーツ -0.072304
-3.365297 さらに/さらに るーと/ルート -0.072304
-3.421405 さらに/さらに れいぞう/冷蔵 -0.072304
+-3.399881 さらに/さらに れいわ/令和 -0.072304
-3.440742 さらに/さらに れヴぁーむ/レヴァーム -0.072304
-3.442178 さらに/さらに ろくぶくろ/六袋 -0.072304
-3.402891 さらに/さらに ろけっと/ロケット -0.072304
@@ -396222,6 +396239,7 @@ ngram 3=1777469
-4.708864 し/し るーかす/ルーカス -0.072304
-4.696211 し/し るーぷ/ループ -0.072304
-4.134352 し/し れい/礼 -0.072304
+-4.611507 し/し れいわ/令和 -0.072304
-4.674918 し/し れおん/レオン -0.072304
-4.611507 し/し れぎゅらー/レギュラー -0.072304
-4.663204 し/し れこーでぃんぐ/レコーディング -0.072304
@@ -404543,6 +404561,7 @@ ngram 3=1777469
-2.818904 してい/指定 よきん/預金 -0.072304
-2.678691 してい/指定 より/より -0.072304
-2.819696 してい/指定 りゅうろ/流路 -0.072304
+-2.239647 してい/指定 れいわ/令和 -0.072304
-1.486136 してい/指定 を/を -0.431651
-2.152732 してい/指定 ・/・ -0.072304
-2.277143 してい/指定 （/（ -0.072304
@@ -416169,6 +416188,7 @@ ngram 3=1777469
-2.939683 しょ/所 りじ/理事 -0.304917
-3.504375 しょ/所 れい/令 -0.072304
-3.526034 しょ/所 れいじょう/霊場 -0.072304
+-3.509690 しょ/所 れいわ/令和 -0.072304
-3.518694 しょ/所 れぽーと/レポート -0.072304
-3.528030 しょ/所 ろんしゅう/論集 -0.072304
-1.223515 しょ/所 を/を -0.201699
@@ -416253,6 +416273,7 @@ ngram 3=1777469
-3.173113 しょ/書 よん/四 -0.072304
-3.194419 しょ/書 らん/欄 -0.072304
-3.190975 しょ/書 りん/林 -0.072304
+-3.190975 しょ/書 れいわ/令和 -0.072304
-3.174502 しょ/書 れべる/レベル -0.072304
-3.184880 しょ/書 ろく/六 -0.072304
-0.839687 しょ/書 を/を -0.222420
@@ -493028,6 +493049,7 @@ ngram 3=1777469
-4.850080 た/た れいふ/レイフ -0.072304
-4.850080 た/た れいふぉーる/レイフォール -0.072304
-4.837677 た/た れいむ/霊夢 -0.072304
+-4.116720 た/た れいわ/令和 -0.072304
-4.250950 た/た れいん/レイン -0.072304
-4.715868 た/た れお/レオ -0.236942
-4.715868 た/た れおなるど/レオナルド -0.072304
@@ -510831,6 +510853,7 @@ ngram 3=1777469
-3.320679 だいがく/大学 りん/林 -0.072304
-3.871892 だいがく/大学 りんじ/臨時 -0.072304
-3.303866 だいがく/大学 りーぐ/リーグ -0.174867
+-3.873638 だいがく/大学 れいわ/令和 -0.072304
-3.835151 だいがく/大学 れきし/歴史 -0.072304
-3.325109 だいがく/大学 れきだい/歴代 -0.072304
-3.902577 だいがく/大学 れでぃ/レディ -0.072304
@@ -541838,6 +541861,7 @@ ngram 3=1777469
-4.734083 て/て れいてつ/冷徹 -0.236942
-4.839375 て/て れいでぃあんと/レイディアント -0.072304
-4.499282 て/て れいはい/礼拝 -0.072304
+-3.917384 て/て れいわ/令和 -0.236942
-4.764805 て/て れおぽるど/レオポルド -0.072304
-4.595579 て/て れおん/レオン -0.072304
-3.969517 て/て れきし/歴史 -0.146868
@@ -543040,6 +543064,7 @@ ngram 3=1777469
-1.041469 ていきょう/帝京 だい/大 -0.072304
-0.576441 ていきょう/帝京 だいがく/大学 -0.130896
-1.622860 ていきょう/帝京 へいせい/平成 -0.072304
+-1.622860 ていきょう/帝京 れいわ/令和 -0.072304
-1.518157 ていきょう/帝京 ・/・ -0.072304
-1.391371 ていきょう/提供 </s> -0.921243
-1.825565 ていきょう/提供 、/、 -0.072304
@@ -571695,6 +571720,7 @@ ngram 3=1777469
-5.125194 と/と れいどう/礼堂 -0.072304
-4.795774 と/と れいはい/礼拝 -0.072304
-5.125194 と/と れいめん/冷麺 -0.072304
+-4.697781 と/と れいわ/令和 -0.072304
-5.125194 と/と れおのふ/レオノフ -0.072304
-3.973298 と/と れきし/歴史 -0.072304
-4.840256 と/と れきだい/歴代 -0.072304
@@ -576725,6 +576751,7 @@ ngram 3=1777469
-1.482731 とうべん/答弁 に/に -0.072304
-1.768609 とうべん/答弁 へいせい/平成 -0.072304
-1.682559 とうべん/答弁 や/や -0.072304
+-1.768609 とうべん/答弁 れいわ/令和 -0.072304
-1.102516 とうべん/答弁 を/を -0.072304
-0.598217 とうほ/刀保 と/と -0.072304
-0.860182 とうほ/頭堡 に/に -0.072304
@@ -577333,6 +577360,7 @@ ngram 3=1777469
-2.806740 とうろく/登録 よう/用 -0.072304
-2.741191 とうろく/登録 より/より -0.072304
-2.873185 とうろく/登録 りょう/料 -0.236942
+-2.876906 とうろく/登録 れいわ/令和 -0.072304
-1.001313 とうろく/登録 を/を -0.440906
-2.798862 とうろく/登録 ４/４ -0.072304
-0.622515 とうろく/藤六 かい/会 -0.072304
@@ -596049,6 +596077,7 @@ ngram 3=1777469
-4.579494 な/な れいぼう/冷房 -0.072304
-4.628120 な/な れいりょく/霊力 -0.072304
-4.645619 な/な れいりー/レイリー -0.072304
+-4.389925 な/な れいわ/令和 -0.072304
-3.194401 な/な れきし/歴史 -0.137922
-4.657425 な/な れきせいずみ/歴青炭 -0.072304
-4.065382 な/な れくりえーしょん/レクリエーション -0.072304
@@ -621348,6 +621377,7 @@ ngram 3=1777469
-5.240575 に/に れいぼう/冷房 -0.072304
-5.378036 に/に れいりょく/霊力 -0.072304
-5.435587 に/に れいりー/レイリー -0.072304
+-4.860039 に/に れいわ/令和 -0.072304
-5.477705 に/に れいヴぇる/レイヴェル -0.072304
-4.890008 に/に れおぽるど/レオポルド -0.174867
-4.788866 に/に れおん/レオン -0.072304
@@ -627382,6 +627412,7 @@ ngram 3=1777469
-2.657697 にん/人 ら/ら -0.072304
-3.660473 にん/人 りょく/力 -0.072304
-3.743491 にん/人 りーち/リーチ -0.072304
+-3.736065 にん/人 れいわ/令和 -0.072304
-3.748333 にん/人 れおん/レオン -0.072304
-3.754873 にん/人 れんこう/連行 -0.072304
-3.718542 にん/人 れんぞく/連続 -0.072304
@@ -657526,6 +657557,8 @@ ngram 3=1777469
-5.595215 の/の れいら/レイラ -0.072304
-5.565410 の/の れいりあ/レイリア -0.072304
-5.483622 の/の れいりょく/霊力 -0.072304
+-4.227805 の/の れいわ/令和 -0.158647
+-5.628477 の/の れいわし/令和史 -0.072304
-5.355448 の/の れいん/レイン -0.072304
-5.447862 の/の れいんぼー/レインボー -0.072304
-5.628477 の/の れいんぼーのん/レインボーノン -0.072304
@@ -680802,6 +680835,7 @@ ngram 3=1777469
-5.327788 は/は れいら/レイラ -0.072304
-5.304503 は/は れいりあ/レイリア -0.072304
-5.238888 は/は れいりょく/霊力 -0.072304
+-3.715566 は/は れいわ/令和 -0.093914
-5.131526 は/は れいん/レイン -0.072304
-5.209459 は/は れいんぼー/レインボー -0.072304
-5.108373 は/は れお/レオ -0.236942
@@ -698659,6 +698693,7 @@ ngram 3=1777469
-2.824848 ばんど/バンド やく/約 -0.072304
-2.833662 ばんど/バンド ゆいいつ/唯一 -0.072304
-2.838512 ばんど/バンド らいにち/来日 -0.072304
+-2.835645 ばんど/バンド れいわ/令和 -0.072304
-0.898614 ばんど/バンド を/を -0.233035
-1.415625 ばんど/バンド ・/・ -0.113334
-2.367244 ばんど/バンド （/（ -0.072304
@@ -782377,6 +782416,7 @@ ngram 3=1777469
-4.593278 も/も れいぞう/冷蔵 -0.072304
-4.749871 も/も れいねん/例年 -0.072304
-4.774104 も/も れいりょう/冷涼 -0.072304
+-4.100094 も/も れいわ/令和 -0.072304
-4.610030 も/も れおん/レオン -0.072304
-4.749871 も/も れきし/れきし -0.072304
-3.550992 も/も れきし/歴史 -0.072304
@@ -808658,6 +808698,7 @@ ngram 3=1777469
-3.949347 より/より るーぷ/ループ -0.072304
-3.955998 より/より れある/レアル -0.072304
-3.967314 より/より れいしき/零式 -0.072304
+-3.887906 より/より れいわ/令和 -0.072304
-3.807900 より/より れきし/歴史 -0.072304
-3.739008 より/より れべる/レベル -0.072304
-3.739008 より/より れんごう/連合 -0.072304
@@ -815224,6 +815265,7 @@ ngram 3=1777469
-3.935261 り/り るーと/ルート -0.072304
-4.192419 り/り れいかん/零観 -0.072304
-4.107856 り/り れいがい/例外 -0.072304
+-4.038086 り/り れいわ/令和 -0.072304
-4.181950 り/り れきほう/歴訪 -0.072304
-4.038086 り/り れぎゅらー/レギュラー -0.072304
-3.992251 り/り れこーど/レコード -0.072304
@@ -829929,6 +829971,7 @@ ngram 3=1777469
-4.878610 る/る れいど/レイド -0.072304
-4.825490 る/る れいぶん/例文 -0.072304
-4.878610 る/る れいむ/霊夢 -0.072304
+-3.979033 る/る れいわ/令和 -0.146868
-4.786122 る/る れいん/レイン -0.072304
-4.878610 る/る れおみゅーる/レオミュール -0.072304
-4.675914 る/る れおん/レオン -0.072304
@@ -832784,6 +832827,61 @@ ngram 3=1777469
-0.623351 れいる/レイル うぇいず/ウェイズ -0.072304
-0.577210 れいれんぽう/嶺連峰 の/の -0.072304
-0.577210 れいれーだー/レイレーダー の/の -0.072304
+-2.227588 れいわ/令和 」/」 -0.072304
+-2.797031 れいわ/令和 いこう/以降 -0.072304
+-2.815492 れいわ/令和 いご/以後 -0.072304
+-2.822011 れいわ/令和 いしん/維新 -0.072304
+-2.813706 れいわ/令和 うまれ/生まれ -0.072304
+-2.810837 れいわ/令和 おんな/女 -0.072304
+-2.763406 れいわ/令和 かい/会 -0.072304
+-2.820059 れいわ/令和 かめん/仮面 -0.072304
+-1.981531 れいわ/令和 がんねん/元年 -0.669840
+-2.794269 れいわ/令和 き/期 -0.072304
+-2.779196 れいわ/令和 くうはく/　 -0.072304
+-2.773161 れいわ/令和 けんきゅう/研究 -0.072304
+-2.237433 れいわ/令和 こくさい/国際 -0.236942
+-2.812611 れいわ/令和 しょき/初期 -0.072304
+-2.773410 れいわ/令和 じだい/時代 -0.072304
+-2.804348 れいわ/令和 じゅう/十 -0.072304
+-2.749350 れいわ/令和 だいがく/大学 -0.072304
+-2.811109 れいわ/令和 なん/何 -0.072304
+-1.705106 れいわ/令和 に/に -0.174867
+-2.820059 れいわ/令和 にじゅう/二十 -0.072304
+-2.665933 れいわ/令和 ねん/年 -0.072304
+-1.312593 れいわ/令和 の/の -0.260451
+-2.812201 れいわ/令和 ばし/橋 -0.072304
+-2.234353 れいわ/令和 ばん/版 -0.072304
+-2.811791 れいわ/令和 ひゃく/百 -0.072304
+-2.822150 れいわ/令和 ふきょう/不況 -0.072304
+-2.603186 れいわ/令和 へ/へ -0.072304
+-2.005596 れいわ/令和 を/を -0.072304
+-1.636318 れいわ/令和 １０/１０ -1.006895
+-1.981269 れいわ/令和 １１/１１ -1.026201
+-1.980986 れいわ/令和 １２/１２ -0.743654
+-1.982076 れいわ/令和 １３/１３ -0.965503
+-1.776817 れいわ/令和 １４/１４ -0.876232
+-1.776717 れいわ/令和 １５/１５ -0.752075
+-1.638172 れいわ/令和 １６/１６ -1.311214
+-1.317435 れいわ/令和 １７/１７ -0.858503
+-1.317369 れいわ/令和 １８/１８ -0.965503
+-1.533521 れいわ/令和 １９/１９ -1.147022
+-1.963567 れいわ/令和 ２/２ -0.861219
+-1.532903 れいわ/令和 ２０/２０ -1.169885
+-1.448971 れいわ/令和 ２１/２１ -1.243245
+-1.449095 れいわ/令和 ２２/２２ -1.169885
+-1.777523 れいわ/令和 ２３/２３ -1.241578
+-1.378275 れいわ/令和 ２４/２４ -1.097334
+-2.812064 れいわ/令和 ２５/２５ -0.174867
+-2.241893 れいわ/令和 ２６/２６ -0.072304
+-1.768103 れいわ/令和 ３/３ -0.943226
+-2.819364 れいわ/令和 ３９/３９ -0.072304
+-1.972585 れいわ/令和 ４/４ -0.743654
+-1.530440 れいわ/令和 ５/５ -0.906977
+-1.773443 れいわ/令和 ６/６ -0.840564
+-1.977674 れいわ/令和 ７/７ -1.158604
+-1.977674 れいわ/令和 ８/８ -0.894922
+-1.978675 れいわ/令和 ９/９ -0.705865
+-0.611288 れいわし/令和史 （/（ -0.072304
-1.589717 れいん/レイン 」/」 -0.072304
-1.156480 れいん/レイン こーと/コート -0.072304
-1.736325 れいん/レイン だんす/ダンス -0.072304
@@ -865668,6 +865766,7 @@ ngram 3=1777469
-4.305606 ・/・ れいぷ/レイプ -0.072304
-4.860306 ・/・ れいりあ/レイリア -0.072304
-4.891397 ・/・ れいる/レイル -0.072304
+-3.787640 ・/・ れいわ/令和 -0.072304
-3.857118 ・/・ れいん/レイン -0.146868
-4.723359 ・/・ れお/レオ -0.072304
-4.723359 ・/・ れおなるど/レオナルド -0.072304
@@ -866528,6 +866627,7 @@ ngram 3=1777469
-3.119069 ・/／ るてん/流転 -0.072304
-3.118594 ・/／ るねっさんす/ルネッサンス -0.072304
-3.118120 ・/／ れいえん/霊園 -0.072304
+-3.100918 ・/／ れいわ/令和 -0.072304
-3.115755 ・/／ ろう/ろう -0.072304
-3.119690 ・/／ ろーぷ/ろーぷ -0.072304
-3.107810 ・/／ ろーぷ/ロープ -0.072304
@@ -876442,6 +876542,7 @@ ngram 3=1777469
-4.752700 （/（ れいだい/例題 -0.072304
-4.791409 （/（ れいひょう/零票 -0.072304
-4.721693 （/（ れいふく/礼服 -0.072304
+-2.774423 （/（ れいわ/令和 -1.133625
-4.791409 （/（ れおなーる/レオナール -0.072304
-4.791409 （/（ れおのーる/レオノール -0.072304
-3.936686 （/（ れきし/歴史 -0.072304
@@ -879044,6 +879145,7 @@ ngram 3=1777469
-4.531804 ）/） るーる/ルール -0.072304
-4.663731 ）/） れいど/レイド -0.072304
-4.654904 ）/） れいのるず/レイノルズ -0.072304
+-4.547025 ）/） れいわ/令和 -0.072304
-4.573641 ）/） れき/歴 -0.072304
-4.665981 ）/） れみ/れみ -0.072304
-4.060401 ）/） れんあい/恋愛 -0.072304
@@ -891991,6 +892093,7 @@ ngram 3=1777469
-3.643609 ：/： りー/リー -0.072304
-3.675989 ：/： るいすとん/ルイストン -0.072304
-3.607371 ：/： るーる/ルール -0.072304
+-3.615797 ：/： れいわ/令和 -0.072304
-3.642100 ：/： れっど/レッド -0.072304
-3.677072 ：/： れてぃ/レティ -0.072304
-3.628749 ：/： れーざー/レーザー -0.072304
@@ -920322,6 +920425,7 @@ ngram 3=1777469
-5.505719 <s> </s> れいや/礼弥
-5.473107 <s> </s> れいりょう/冷涼
-5.023787 <s> </s> れいりょく/霊力
+-3.418313 <s> </s> れいわ/令和
-5.406274 <s> </s> れいんぼー/レインボー
-5.046992 <s> </s> れいヴ/レイヴ
-5.505719 <s> </s> れう/レウ
@@ -924021,6 +924125,7 @@ ngram 3=1777469
-4.172010 <s> 「/「 れいげん/霊験
-4.179672 <s> 「/「 れいぞう/れいぞう
-4.036689 <s> 「/「 れいちぇる/レイチェル
+-3.298122 <s> 「/「 れいわ/令和
-4.024787 <s> 「/「 れいん/レイン
-4.125192 <s> 「/「 れおん/レオン
-3.692389 <s> 「/「 れきだい/歴代
@@ -969223,6 +969328,7 @@ ngram 3=1777469
-1.008358 <s> ばんど/バンド めい/名
-1.963870 <s> ばんど/バンド めんばー/メンバー
-2.214397 <s> ばんど/バンド ゆいいつ/唯一
+-2.214661 <s> ばんど/バンド れいわ/令和
-0.423096 <s> ばんなー/バンナー の/の
-0.977929 <s> ばんねん/晩年 、/、
-1.951219 <s> ばんねん/晩年 ちぇんと/チェント
@@ -983012,6 +983118,27 @@ ngram 3=1777469
-0.435055 <s> れいや/礼弥 が/が
-0.386229 <s> れいりょう/冷涼 な/な
-0.337473 <s> れいりょく/霊力 の/の
+-1.631774 <s> れいわ/令和 がんねん/元年
+-2.385788 <s> れいわ/令和 き/期
+-2.389205 <s> れいわ/令和 しょき/初期
+-1.889243 <s> れいわ/令和 に/に
+-1.220548 <s> れいわ/令和 の/の
+-2.389054 <s> れいわ/令和 ひゃく/百
+-2.076129 <s> れいわ/令和 １３/１３
+-1.350044 <s> れいわ/令和 １４/１４
+-1.941192 <s> れいわ/令和 １５/１５
+-1.838638 <s> れいわ/令和 １６/１６
+-1.380380 <s> れいわ/令和 １７/１７
+-1.488244 <s> れいわ/令和 １９/１９
+-1.487973 <s> れいわ/令和 ２０/２０
+-1.121761 <s> れいわ/令和 ２１/２１
+-1.011954 <s> れいわ/令和 ２２/２２
+-0.814327 <s> れいわ/令和 ２３/２３
+-1.413459 <s> れいわ/令和 ２４/２４
+-1.935069 <s> れいわ/令和 ３/３
+-1.486893 <s> れいわ/令和 ５/５
+-1.938869 <s> れいわ/令和 ６/６
+-1.630934 <s> れいわ/令和 ８/８
-0.567635 <s> れいんぼー/レインボー ・/・
-0.778711 <s> れいヴ/レイヴ の/の
-0.841983 <s> れいヴ/レイヴ みゅーじっく/ミュージック
@@ -984414,6 +984541,7 @@ ngram 3=1777469
-2.896014 <s> ・/・ やまだ/山田
-2.930190 <s> ・/・ ゆうじん/友人
-2.944364 <s> ・/・ りあ/リア
+-2.906587 <s> ・/・ れいわ/令和
-2.924855 <s> ・/・ れんじゃー/レンジャー
-2.924635 <s> ・/・ れんらく/連絡
-2.946224 <s> ・/・ ろてん/露天
@@ -987096,6 +987224,8 @@ ngram 3=1777469
-0.608174 ”/“ りか/リカ ちゃん/ちゃん
-0.449758 ”/“ りっぷす/リップス ”/“
-0.435446 ”/“ りゅどべっく/リュドベック と/と
+-0.930163 ”/“ れいわ/令和 １７/１７
+-0.950328 ”/“ れいわ/令和 ２４/２４
-0.773219 ”/“ ろしあ/ロシア ・/・
-0.423096 ”/“ ろろ/ロロ の/の
-0.807001 ”/“ ろんぐ/ロング ヴぁーじょん/ヴァージョン
@@ -1007476,6 +1007606,7 @@ ngram 3=1777469
-1.617003 、/、 きんねん/近年 まで/まで
-2.147120 、/、 きんねん/近年 も/も
-2.486017 、/、 きんねん/近年 らくろす/ラクロス
+-2.485168 、/、 きんねん/近年 れいわ/令和
-0.450937 、/、 きんぱく/金箔 が/が
-0.471633 、/、 きんぱつ/金髪 で/で
-0.757392 、/、 きんぱつ/金髪 に/に
@@ -1017385,6 +1017516,7 @@ ngram 3=1777469
-3.137793 、/、 さらに/さらに りようじ/領地
-3.141943 、/、 さらに/さらに るーつ/ルーツ
-3.136294 、/、 さらに/さらに れいぞう/冷蔵
+-3.128506 、/、 さらに/さらに れいわ/令和
-3.143082 、/、 さらに/さらに れヴぁーむ/レヴァーム
-3.143578 、/、 さらに/さらに ろくぶくろ/六袋
-3.135173 、/、 さらに/さらに わかやま/和歌山
@@ -1067127,6 +1067259,33 @@ ngram 3=1777469
-0.269784 、/、 れいゆう/霊友 かい/会
-0.435446 、/、 れいら/澪ら と/と
-0.587489 、/、 れいらく/零落 し/し
+-2.358283 、/、 れいわ/令和 いこう/以降
+-2.362320 、/、 れいわ/令和 いご/以後
+-2.009704 、/、 れいわ/令和 がんねん/元年
+-2.352861 、/、 れいわ/令和 けんきゅう/研究
+-2.158491 、/、 れいわ/令和 こくさい/国際
+-1.811125 、/、 れいわ/令和 に/に
+-1.479723 、/、 れいわ/令和 の/の
+-2.363743 、/、 れいわ/令和 ふきょう/不況
+-2.025230 、/、 れいわ/令和 を/を
+-2.009533 、/、 れいわ/令和 １１/１１
+-1.600889 、/、 れいわ/令和 １２/１２
+-1.601166 、/、 れいわ/令和 １３/１３
+-1.865891 、/、 れいわ/令和 １５/１５
+-1.484065 、/、 れいわ/令和 １７/１７
+-1.050683 、/、 れいわ/令和 １８/１８
+-1.257582 、/、 れいわ/令和 ２０/２０
+-1.089914 、/、 れいわ/令和 ２１/２１
+-1.228628 、/、 れいわ/令和 ２２/２２
+-1.322824 、/、 れいわ/令和 ２３/２３
+-1.538172 、/、 れいわ/令和 ２４/２４
+-1.320788 、/、 れいわ/令和 ３/３
+-1.598736 、/、 れいわ/令和 ４/４
+-1.669406 、/、 れいわ/令和 ５/５
+-1.863434 、/、 れいわ/令和 ６/６
+-2.007188 、/、 れいわ/令和 ７/７
+-2.007188 、/、 れいわ/令和 ８/８
+-2.007842 、/、 れいわ/令和 ９/９
-0.772449 、/、 れいん/レイン ぼーすねーく/ボースネーク
-0.713319 、/、 れいんぼー/レインボー が/が
-0.629087 、/、 れいヴ/レイヴ を/を
@@ -1089144,6 +1089303,11 @@ ngram 3=1777469
-0.440704 「/「 れいぷれい/レイプレイ 」/」
-0.712923 「/「 れいめい/黎明 えん/苑
-0.594935 「/「 れいらく/零落 びゃくや/白夜
+-1.569883 「/「 れいわ/令和 」/」
+-1.631355 「/「 れいわ/令和 かい/会
+-1.634686 「/「 れいわ/令和 にじゅう/二十
+-1.283898 「/「 れいわ/令和 ２２/２２
+-1.443210 「/「 れいわ/令和 ２３/２３
-0.867180 「/「 れいん/レイン めーかー/メーカー
-1.004129 「/「 れいん/レイン ・/・
-1.083155 「/「 れいんぼー/レインボー と/と
@@ -1090233,6 +1090397,7 @@ ngram 3=1777469
-2.937822 」/」 、/、 りゃく/略
-3.618769 」/」 、/、 りょかく/旅客
-3.679327 」/」 、/、 れいみ/レイミ
+-3.526590 」/」 、/、 れいわ/令和
-3.672356 」/」 、/、 ろいたー/ロイター
-3.678184 」/」 、/、 ろんぴょう/論評
-3.650236 」/」 、/、 わかはやし/若林
@@ -1091844,6 +1092009,7 @@ ngram 3=1777469
-3.506722 」/」 が/が りりーす/リリース
-3.528829 」/」 が/が りんせつ/隣接
-3.664991 」/」 が/が りーど/リード
+-3.725708 」/」 が/が れいわ/令和
-3.658417 」/」 が/が れぎゅらー/レギュラー
-3.608343 」/」 が/が れんごう/連合
-2.783667 」/」 が/が わか/わか
@@ -1095839,6 +1096005,7 @@ ngram 3=1777469
-4.069721 」/」 の/の れいじょう/令嬢
-3.441830 」/」 の/の れいぞう/冷蔵
-4.092454 」/」 の/の れいてき/霊的
+-4.025474 」/」 の/の れいわ/令和
-3.131025 」/」 の/の れきし/歴史
-4.037316 」/」 の/の れきだい/歴代
-3.341149 」/」 の/の れぎゅらー/レギュラー
@@ -1096790,6 +1096957,7 @@ ngram 3=1777469
-0.600158 」/」 るびー/ルビー が/が
-0.381029 」/」 るーにー/ルーニー ・/・
-0.269610 」/」 れいき/霊亀 ３/３
+-0.711896 」/」 れいわ/令和 １８/１８
-0.807349 」/」 れっど/レッド たーぼ/ターボ
-0.727936 」/」 れつでん/列伝 １２/１２
-1.003746 」/」 れべる/レベル </s>
@@ -1098326,6 +1098494,7 @@ ngram 3=1777469
-3.041535 」/」 （/（ る/る
-3.845684 」/」 （/（ るびーじゅ/ルビージュ
-3.761063 」/」 （/（ れい/零
+-2.472379 」/」 （/（ れいわ/令和
-3.688119 」/」 （/（ れきし/歴史
-3.846517 」/」 （/（ れんあい/れんあい
-3.843633 」/」 （/（ ろーたー/ローター
@@ -1117815,6 +1117984,7 @@ ngram 3=1777469
-3.003783 あと/後 の/の よしとよ/嘉豊
-3.003783 あと/後 の/の りゅうきゃく/竜脚
-3.003656 あと/後 の/の りんろう/琳琅
+-2.984466 あと/後 の/の れいわ/令和
-2.814098 あと/後 の/の １０/１０
-3.003558 あと/後 の/の １６５１/１６５１
-3.003558 あと/後 の/の １７６３/１７６３
@@ -1124828,6 +1124998,7 @@ ngram 3=1777469
-3.048601 あらた/新た な/な りょうど/領土
-3.053679 あらた/新た な/な りんごく/隣国
-1.419367 あらた/新た な/な る/る
+-3.071442 あらた/新た な/な れいわ/令和
-3.075069 あらた/新た な/な れこーでぃんぐ/レコーディング
-3.033711 あらた/新た な/な ろせん/路線
-2.001811 あらた/新た に/に 、/、
@@ -1143165,6 +1143336,7 @@ ngram 3=1777469
-4.546438 い/い て/て るり/ルリ
-4.538127 い/い て/て るーかす/ルーカス
-4.551299 い/い て/て れいしょう/冷笑
+-4.289886 い/い て/て れいわ/令和
-4.236385 い/い て/て れっしゃ/列車
-4.536074 い/い て/て れっせい/劣勢
-4.551299 い/い て/て れんえい/聯営
@@ -1147985,6 +1148157,7 @@ ngram 3=1777469
-5.062222 い/い る/る れいじん/霊人
-5.061103 い/い る/る れいそく/令息
-5.055900 い/い る/る れいぶん/例文
+-4.301811 い/い る/る れいわ/令和
-3.919390 い/い る/る れきし/歴史
-5.057628 い/い る/る れせぷと/レセプト
-4.543427 い/い る/る れっしゃ/列車
@@ -1148429,6 +1148602,7 @@ ngram 3=1777469
-2.867723 い/い （/（ よう/要
-2.877440 い/い （/（ よん/四
-2.146162 い/い （/（ れい/例
+-2.598525 い/い （/（ れいわ/令和
-2.894149 い/い （/（ わか/分か
-2.316390 い/い （/（ （/（
-2.579567 い/い （/（ ２０１０/２０１０
@@ -1248353,6 +1248527,7 @@ ngram 3=1777469
-2.665006 かい/会 、/、 むらさき/むらさき
-2.569341 かい/会 、/、 もと/元
-2.645495 かい/会 、/、 りんじ/臨時
+-2.630198 かい/会 、/、 れいわ/令和
-2.585900 かい/会 、/、 １１/１１
-2.606999 かい/会 、/、 １４/１４
-2.655630 かい/会 、/、 １９１５/１９１５
@@ -1249436,6 +1249611,7 @@ ngram 3=1777469
-2.709124 かい/会 （/（ まじゅれせ/マジュレセ
-2.680569 かい/会 （/（ みやざき/宮崎
-2.699263 かい/会 （/（ ら/ラ
+-2.490194 かい/会 （/（ れいわ/令和
-1.329268 かい/会 （/（ ）/）
-2.671389 かい/会 （/（ １９３７/１９３７
-0.863875 かい/会 ）/） </s>
@@ -1294888,6 +1295064,8 @@ ngram 3=1777469
-0.690661 から/から れいさい/零細 きぎょう/企業
-0.692486 から/から れいすい/冷水 に/に
-0.448855 から/から れいほん/零本 まで/まで
+-1.103505 から/から れいわ/令和 へ/へ
+-1.067919 から/から れいわ/令和 １１/１１
-0.824296 から/から れきし/歴史 てき/的
-0.892140 から/から れきし/歴史 を/を
-1.492935 から/から れぎゅらー/レギュラー いり/入り
@@ -1318739,6 +1318917,7 @@ ngram 3=1777469
-4.745109 が/が 、/、 れいてき/霊的
-4.519393 が/が 、/、 れいはい/礼拝
-4.849608 が/が 、/、 れいめいろく/黎明録
+-3.128605 が/が 、/、 れいわ/令和
-4.483062 が/が 、/、 れおん/レオン
-3.360382 が/が 、/、 れきし/歴史
-4.256668 が/が 、/、 れぎゅらー/レギュラー
@@ -1340573,6 +1340752,8 @@ ngram 3=1777469
-0.220503 が/が れいめい/黎明 き/期
-0.656499 が/が れいりー/レイリー さんらん/散乱
-0.567635 が/が れいんぼー/レインボー ・/・
+-1.041737 が/が れいわ/令和 １４/１４
+-0.971453 が/が れいわ/令和 ２１/２１
-0.423096 が/が れかい/レカイ の/の
-0.400818 が/が れき/礫 を/を
-1.518366 が/が れきし/歴史 しょうせつ/小説
@@ -1351059,6 +1351240,7 @@ ngram 3=1777469
-3.788976 がつ/月 、/、 りヴぃう/リヴィウ
-3.774657 がつ/月 、/、 るす/留守
-3.565542 がつ/月 、/、 るーまにあ/ルーマニア
+-3.516297 がつ/月 、/、 れいわ/令和
-3.801495 がつ/月 、/、 れおーね/レオーネ
-3.782618 がつ/月 、/、 れじゃー/レジャー
-3.657551 がつ/月 、/、 れんたい/連隊
@@ -1353055,6 +1353237,7 @@ ngram 3=1777469
-2.037630 がつ/月 （/（ ばあい/場合
-1.985517 がつ/月 （/（ へいせい/平成
-2.042334 がつ/月 （/（ ゆりうす/ユリウス
+-1.985517 がつ/月 （/（ れいわ/令和
-1.996436 がつ/月 （/（ １０/１０
-2.040274 がつ/月 （/（ １１０/１１０
-2.044093 がつ/月 （/（ １１３２/１１３２
@@ -1392049,6 +1392232,7 @@ ngram 3=1777469
-2.311153 きんねん/近年 の/の りゅうこう/流行
-2.317571 きんねん/近年 の/の りょうこく/両国
-2.292577 きんねん/近年 の/の りよう/利用
+-2.315678 きんねん/近年 の/の れいわ/令和
-0.889973 きんねん/近年 は/は 、/、
-2.473947 きんねん/近年 は/は あらた/新た
-2.487164 きんねん/近年 は/は いりょう/医療
@@ -1392112,6 +1392296,7 @@ ngram 3=1777469
-0.813950 きんねん/近年 より/より かいがい/海外
-0.618407 きんねん/近年 らくろす/ラクロス に/に
-0.492904 きんねん/近年 りにゅーある/リニューアル し/し
+-0.711910 きんねん/近年 れいわ/令和 １７/１７
-0.809917 きんねん/近年 （/（ ２０１０/２０１０
-0.521725 きんのう/勤王 せいさく/政策 を/を
-0.685197 きんのう/勤王 とう/党 と/と
@@ -1393773,6 +1393958,9 @@ ngram 3=1777469
-1.115002 ぎかい/議会 も/も じこ/事故
-1.115178 ぎかい/議会 も/も りっち/立地
-0.814132 ぎかい/議会 や/や こくぼう/国防
+-1.399240 ぎかい/議会 れいわ/令和 ねん/年
+-1.261648 ぎかい/議会 れいわ/令和 １６/１６
+-0.636105 ぎかい/議会 れいわ/令和 ２０/２０
-1.656499 ぎかい/議会 を/を かいさん/解散
-1.656112 ぎかい/議会 を/を こうしき/公式
-1.659263 ぎかい/議会 を/を しょうしゅう/召集
@@ -1396710,6 +1396898,7 @@ ngram 3=1777469
-1.415491 ぎょうせい/行政 、/、 りっぽう/立法
-0.667107 ぎょうせい/行政 」/」 と/と
-1.115208 ぎょうせい/行政 」/」 へいせい/平成
+-1.115208 ぎょうせい/行政 」/」 れいわ/令和
-0.557954 ぎょうせい/行政 あんぜんべ/安全部 の/の
-0.091145 ぎょうせい/行政 いいん/委員 かい/会
-1.627023 ぎょうせい/行政 いん/院 いん/院
@@ -1407630,6 +1407819,9 @@ ngram 3=1777469
-0.556054 くうはく/　 れいぎ/礼儀 ただし/正し
-0.622242 くうはく/　 れいて/レイテ おき/沖
-0.278239 くうはく/　 れいはい/礼拝 どう/堂
+-1.404028 くうはく/　 れいわ/令和 なん/何
+-0.653319 くうはく/　 れいわ/令和 １４/１４
+-1.138593 くうはく/　 れいわ/令和 １８/１８
-0.449351 くうはく/　 れんば/レンバ けん/県
-0.811842 くうはく/　 ろしあ/ロシア １０/１０
-0.746805 くうはく/　 わか/分 っ/っ

128
SOURCES/libkkc-data-HEAD.patch Normal file
View File

@ -0,0 +1,128 @@
diff --git a/tools/genfilter.py b/tools/genfilter.py
index 5ffab32..0c5f75a 100644
--- a/tools/genfilter.py
+++ b/tools/genfilter.py
@@ -84,24 +84,24 @@ class FilterGenerator(object):
def generate(self):
size = os.fstat(self.infile.fileno()).st_size
- n = size / self.record_size
+ n = size // self.record_size
m = int(math.ceil(-n*math.log10(ERROR_RATE) /
math.pow(math.log10(2), 2)))
- m = (m/8 + 1)*8
+ m = (m//8 + 1)*8
inmem = mmap.mmap(self.infile.fileno(),
size,
access=mmap.ACCESS_READ)
- outmem = bytearray(m/8)
- for i in xrange(0, n):
+ outmem = bytearray(m//8)
+ for i in range(0, n):
offset = i*self.record_size
b0, b1 = struct.unpack("=LL", inmem[offset:offset+8])
- for k in xrange(0, 4):
+ for k in range(0, 4):
h = murmur_hash3_32(b0, b1, k)
h = int(h * (m / float(0xFFFFFFFF)))
- outmem[h/8] |= (1 << (h%8))
+ outmem[h//8] |= (1 << (h%8))
inmem.close()
- # Convert bytearray to str, for Python 2.6 compatibility.
- self.outfile.write(str(outmem))
+ # Convert bytearray to bytes, for Python 3 compatibility.
+ self.outfile.write(bytes(outmem))
if __name__ == '__main__':
import sys
@@ -110,7 +110,7 @@ if __name__ == '__main__':
parser = argparse.ArgumentParser(description='filter')
parser.add_argument('infile', type=argparse.FileType('r'),
help='input file')
- parser.add_argument('outfile', type=argparse.FileType('w'),
+ parser.add_argument('outfile', type=argparse.FileType('wb'),
help='output file')
parser.add_argument('record_size', type=int,
help='record size')
diff --git a/tools/sortlm.py b/tools/sortlm.py
index a0dd8fe..40f0837 100644
--- a/tools/sortlm.py
+++ b/tools/sortlm.py
@@ -40,10 +40,10 @@ class SortedGenerator(object):
self.__min_cost = 0.0
def read(self):
- print "reading N-grams"
+ print("reading N-grams")
self.__read_tries()
self.__read_ngrams()
- print "min cost = %lf" % self.__min_cost
+ print("min cost = %lf" % self.__min_cost)
def __read_tries(self):
while True:
@@ -58,7 +58,7 @@ class SortedGenerator(object):
line = self.__infile.readline()
if line == "":
break
- line = line.strip()
+ line = line.strip('\n')
if line == "":
break
match = self.__ngram_line_regex.match(line)
@@ -89,7 +89,7 @@ class SortedGenerator(object):
line = self.__infile.readline()
if line == "":
break
- line = line.strip()
+ line = line.strip('\n')
if line == "":
break
match = self.__ngram_line_regex.match(line)
@@ -125,14 +125,11 @@ class SortedGenerator(object):
def quantize(cost, min_cost):
return max(0, min(65535, int(cost * 65535 / min_cost)))
- def cmp_header(a, b):
- return cmp(a[0], b[0])
-
- print "writing 1-gram file"
+ print("writing 1-gram file")
unigram_offsets = {}
unigram_file = open("%s.1gram" % self.__output_prefix, "wb")
offset = 0
- for ids, value in sorted(self.__ngram_entries[0].iteritems()):
+ for ids, value in sorted(self.__ngram_entries[0].items()):
unigram_offsets[ids[0]] = offset
s = struct.pack("=HHH",
quantize(value[0], self.__min_cost),
@@ -143,13 +140,13 @@ class SortedGenerator(object):
offset += 1
unigram_file.close()
- print "writing 2-gram file"
+ print("writing 2-gram file")
bigram_offsets = {}
bigram_file = open("%s.2gram" % self.__output_prefix, "wb")
keys = self.__ngram_entries[1].keys()
items = [(struct.pack("=LL", ids[1], unigram_offsets[ids[0]]), ids) for ids in keys]
offset = 0
- for header, ids in sorted(items, cmp=cmp_header):
+ for header, ids in sorted(items, key=lambda x: x[0]):
value = self.__ngram_entries[1][ids]
bigram_offsets[ids] = offset
s = struct.pack("=HH",
@@ -160,11 +157,11 @@ class SortedGenerator(object):
bigram_file.close()
if len(self.__ngram_entries[2]) > 0:
- print "writing 3-gram file"
+ print("writing 3-gram file")
trigram_file = open("%s.3gram" % self.__output_prefix, "wb")
keys = self.__ngram_entries[2].keys()
items = [(struct.pack("=LL", ids[2], bigram_offsets[(ids[0], ids[1])]), ids) for ids in keys]
- for header, ids in sorted(items, cmp=cmp_header):
+ for header, ids in sorted(items, key=lambda x: x[0]):
value = self.__ngram_entries[2][ids]
s = struct.pack("=H",
quantize(value[0], self.__min_cost))

88
SPECS/libkkc-data.spec Normal file
View File

@ -0,0 +1,88 @@
%global debug_package %{nil}
Name: libkkc-data
Version: 0.2.7
Release: 12%{?dist}
Epoch: 1
Summary: Language model data for libkkc
License: GPLv3+
URL: https://bitbucket.org/libkkc
Source0: https://bitbucket.org/libkkc/libkkc-data/downloads/%{name}-%{version}.tar.xz
# Upstream commit https://github.com/ueno/libkkc/commit/ba1c1bd3eb86d887fc3689c3142732658071b5f7
Patch0: libkkc-data-HEAD.patch
# bug 1720044
Patch1: %{name}-1720044-reiwa.patch
BuildRequires: python3-devel
BuildRequires: python3-marisa
%description
The %{name} package contains the language model data that libkkc uses
at run time.
%prep
%setup -q
%patch0 -p1 -b .HEAD
%patch1 -p1 -b .reiwa
%build
%configure --disable-static PYTHON=python3
make %{?_smp_mflags}
%install
%make_install INSTALL="install -p"
%files
%doc COPYING
%{_libdir}/libkkc
%changelog
* Mon Jun 17 2019 Takao Fujiwara <tfujiwar@redhat.com> - 1:0.2.7-12
- Resolves: #1720044 - Include Reiwa/The new Japanese era
* Tue Aug 14 2018 Parag Nemade <pnemade AT redhat DOT com> - 1:0.2.7-11
- Resolves:rh#1615534: libkkc-data FTBFS for missing BuildRequires
- moved this package to use python3
* Wed Feb 07 2018 Fedora Release Engineering <releng@fedoraproject.org> - 1:0.2.7-10
- Rebuilt for https://fedoraproject.org/wiki/Fedora_28_Mass_Rebuild
* Thu Aug 03 2017 Fedora Release Engineering <releng@fedoraproject.org> - 1:0.2.7-9
- Rebuilt for https://fedoraproject.org/wiki/Fedora_27_Binutils_Mass_Rebuild
* Wed Jul 26 2017 Fedora Release Engineering <releng@fedoraproject.org> - 1:0.2.7-8
- Rebuilt for https://fedoraproject.org/wiki/Fedora_27_Mass_Rebuild
* Fri Feb 10 2017 Fedora Release Engineering <releng@fedoraproject.org> - 1:0.2.7-7
- Rebuilt for https://fedoraproject.org/wiki/Fedora_26_Mass_Rebuild
* Thu Feb 04 2016 Fedora Release Engineering <releng@fedoraproject.org> - 1:0.2.7-6
- Rebuilt for https://fedoraproject.org/wiki/Fedora_24_Mass_Rebuild
* Wed Jun 17 2015 Fedora Release Engineering <rel-eng@lists.fedoraproject.org> - 1:0.2.7-5
- Rebuilt for https://fedoraproject.org/wiki/Fedora_23_Mass_Rebuild
* Sun Aug 17 2014 Fedora Release Engineering <rel-eng@lists.fedoraproject.org> - 1:0.2.7-4
- Rebuilt for https://fedoraproject.org/wiki/Fedora_21_22_Mass_Rebuild
* Sat Jun 07 2014 Fedora Release Engineering <rel-eng@lists.fedoraproject.org> - 1:0.2.7-3
- Rebuilt for https://fedoraproject.org/wiki/Fedora_21_Mass_Rebuild
* Fri Sep 20 2013 Daiki Ueno <dueno@redhat.com> - 1:0.2.7-2
- bump release to avoid NVR conflict
* Fri Sep 20 2013 Daiki Ueno <dueno@redhat.com> - 1:0.2.7-1
- add COPYING to %%doc
- disable debuginfo
- add Epoch to avoid conflict with the libkkc package
* Tue Sep 17 2013 Daiki Ueno <dueno@redhat.com> - 0.2.7-1
- initial packaging for Fedora, splitting from libkkc