Merge remote-tracking branch 'origin/master' into fcitx

src/data/dictionary_manual/BUILD.bazel

@@ -30,4 +30,5 @@
 exports_files([
     "domain.txt",
     "era.txt",
+    "words.tsv",
 ])

src/data/dictionary_manual/words.tsv

@@ -0,0 +1,101 @@
+# key	value	pos
+あいしんかくら	愛新覚羅	姓
+あさごはん	朝ごはん	名詞
+あさごはん	朝ご飯	名詞
+あそうわん	浅海湾	固有名詞
+いっきょうたじゃく	一強他弱	名詞
+いとしの	愛し野	地名
+いりなか	杁中	地名
+うっぷんばらし	鬱憤晴らし	名詞サ変
+うとろ	宇登呂	地名
+うらしべつ	浦士別	地名
+うらめん	裏面	名詞
+えいえいじてん	英英辞典	名詞
+えとんびやま	江鳶山	地名
+おくぶたえ	奥二重	名詞
+おんねない	音根内	地名
+おんねべつ	遠音別	地名
+かいかい	回回	固有名詞
+かいごかんせい	下位互換性	名詞
+かいていこう	改訂稿	名詞
+かくしゃ	覚者	名詞
+かっくみ	活汲	地名
+かねのなるき	金のなる木	名詞
+からだき	空焚き	名詞サ変
+かんじょうば	勘定場	名詞
+かんりめいがら	監理銘柄	名詞
+ききん	木禽	地名
+きそう	寄贈	名詞サ変
+きんとれ	筋トレ	名詞サ変
+くうしゅうごう	空集合	名詞
+くわたけいすけ	桑田佳祐	人名
+けっていこう	決定稿	名詞
+こういしつ	更衣室	名詞
+こうじょ	扣除	名詞サ変
+こうばいりょくへいか	購買力平価	名詞
+こきゅう	枯朽	名詞
+こんせ	今世	名詞
+こんぜ	今世	名詞
+こんせい	今世	名詞
+さいしゅうこう	最終稿	名詞
+さかもとりゅういち	坂本龍一	人名
+さきむい	崎無異	地名
+さぶすく	サブスク	名詞サ変
+さんこうにんしょうち	参考人招致	名詞サ変
+じきしょうそう	時期尚早	名詞形動
+ししゅう	歯周	名詞
+しっちゃく	失着	名詞サ変
+じってんぽ	実店舗	名詞
+しゅうせいこう	修正稿	名詞
+じょういごかんせい	上位互換性	名詞
+しんしょかいふうざい	信書開封罪	名詞
+しんせん	深圳	地名
+せいりめいがら	整理銘柄	名詞
+ぜんざいさん	全財産	名詞
+そうけつ	倉頡	人名
+そうけつ	蒼頡	人名
+そっかん	速乾	名詞サ変
+たいしょうがい	対象外	名詞
+たいしょうない	対象内	名詞
+たいせつ	堆雪	名詞サ変
+たごうら	田子浦	固有名詞
+たちあらい	太刀洗	姓
+たちあらい	太刀洗	地名
+たようそにんしょう	多要素認証	名詞サ変
+たんろくでんち	単6電池	名詞
+たんろくでんち	単六電池	名詞
+ちえんべつ	知円別	地名
+でびあん	デビアン	固有名詞
+とうよ	党与	名詞サ変
+とっくつ	突厥	固有名詞
+とっけつ	突厥	固有名詞
+とっぷし	富武士	地名
+にだんかいうせつ	二段階右折	名詞サ変
+にだんかいにんしょう	二段階認証	名詞サ変
+にっぽんじゅう	日本中	名詞
+にほんじゅう	日本中	名詞
+にようそにんしょう	二要素認証	名詞サ変
+はいたしょり	排他処理	名詞サ変
+ばうんしゃ	馬運車	名詞
+ひかりの	ひかり野	地名
+ひともうけ	一儲け	名詞サ変
+ひゃっきん	百均	名詞
+ひらぶん	平文	名詞
+ふいふい	回回	固有名詞
+ふたつ	不達	名詞サ変
+ふもうご	不妄語	名詞
+ほじょう	圃場	名詞
+ほっけ	𩸽	名詞
+ほんじ	翻字	名詞サ変
+みどり	美禽	地名
+むえき	無益	名詞形動
+むびゅう	無謬	名詞
+むびゅうせい	無謬性	名詞
+むやく	無役	名詞形動
+もどりち	戻り値	名詞
+やくたたず	役立たず	名詞形動
+らのべ	ラノベ	名詞
+りねーむ	リネーム	名詞サ変
+りまいんど	リマインド	名詞サ変
+りゅうこうごたいしょう	流行語大賞	名詞
+れいわ	令和	固有名詞

src/data/dictionary_oss/BUILD.bazel

@@ -99,13 +99,17 @@ filegroup(
 genrule(
     name = "aux_dictionary",
     srcs = [
+        ":aux_dictionary.tsv",
         ":base_dictionary_data",
-        "//data/oss:aux_dictionary.tsv",
+        ":id.def",
+        "//data/dictionary_manual:words.tsv",
     ],
     outs = ["aux_dictionary.txt"],
     cmd = ("$(location //dictionary:gen_aux_dictionary) " +
            "--strict --output $@ " +
-           "--aux_tsv $(location //data/oss:aux_dictionary.tsv) " +
+           "--aux_tsv $(location :aux_dictionary.tsv) " +
+           "--id_def $(location :id.def) " +
+           "--words_tsv $(location //data/dictionary_manual:words.tsv) " +
            "--dictionary_txts $(locations :base_dictionary_data)"),
     tools = ["//dictionary:gen_aux_dictionary"],
 )
@@ -114,11 +118,11 @@ genrule(
     name = "filtered_dictionary",
     srcs = [
         ":base_dictionary_data",
-        "//data/oss:dictionary_filter.tsv",
+        ":dictionary_filter.tsv",
     ],
     outs = ["dictionary.txt"],
     cmd = ("$(location //dictionary:gen_filtered_dictionary) --output $@ " +
-           "--filter_tsv $(location //data/oss:dictionary_filter.tsv) " +
+           "--filter_tsv $(location :dictionary_filter.tsv) " +
            "--dictionary_txts $(locations :base_dictionary_data)"),
     tools = ["//dictionary:gen_filtered_dictionary"],
 )

src/data/oss/README.md → src/data/dictionary_oss/README.md

@@ -1,4 +1,4 @@
-# data/oss
+# data/dictionary_oss
 
 ## aux_dictionary.tsv
 

src/data/dictionary_oss/aux_dictionary.tsv

@@ -0,0 +1,8 @@
+# key	value	base_key	base_value	cost_offset
+みにおぼえ	身に覚え	みにおぼえ	見に覚え	-1
+たちあらい	太刀洗	たちあらい	大刀洗	-1
+よろしくおねがいします	よろしくお願いします	よろしくおねがいします	よろしくおねがいします	-1
+あさごはん	朝ごはん	あさごはん	朝ゴハン	-2
+こんせ	今世	こんき	今期	0
+いっきょう	一強	いちきょう	一強	0
+いりなか	杁中	しおがまぐち	塩釜口	0

src/data/dictionary_oss/evaluation.tsv

@@ -185,7 +185,7 @@ FAILED:	あらいながらもこんごにきたい	洗いながらも今後に
 OK:	かうかちがあるとおもうなら	買う価値があると思うなら	Conversion Expected	買う価値があると思うなら	2.26.4596
 OK:	みにおぼえのない	身に覚えのない	Conversion Expected	身に覚えのない	2.26.4596
 OK:	まめまめしい	まめまめしい	Conversion Expected 2	忠実忠実しい	2.26.4596
-FAILED:	さかもとりゅういち	坂本竜一	Conversion Expected	坂本龍一	2.30.5432
+OK:	さかもとりゅういち	坂本龍一	Conversion Expected	坂本龍一	2.30.5490
 OK:	あさごはん	朝ごはん	Conversion Expected 2	朝ごはん	2.26.4610
 OK:	ひるごはん	昼ご飯	Conversion Expected 2	昼ごはん	2.30.5432
 OK:	とっけつ	突厥	Conversion Expected	突厥	2.26.4596
@@ -202,7 +202,7 @@ OK:	しんせん	新鮮	Conversion Expected 9	深圳	2.28.4702
 OK:	ふたつ	２つ	Conversion Expected 9	不達	2.28.4730
 OK:	からだき	空焚き	Conversion Expected 2	空焚き	2.28.4730
 OK:	ししゅう	刺繍	Conversion Expected 9	歯周	2.28.4750
-OK:	そうけつ	倉頡	Conversion Expected 9	倉頡	2.30.5432
+OK:	そうけつ	総穴	Conversion Expected 9	倉頡	2.30.5490
 OK:	あかつきにふねをいだす	暁に船を出だす	Conversion Expected	暁に船を出だす	2.28.4770
 OK:	さいのうをみいだす	才能を見出す	Conversion Expected 2	才能を見出だす	2.30.5432
 FAILED:	いっぴょう	一瓢	Conversion Expected 2	一票	2.28.4880
@@ -249,7 +249,7 @@ OK:	らのべ	ラノベ	Conversion Expected	ラノベ	2.28.5000
 FAILED:	なごやとばし	名古屋鳥羽市	Conversion Expected	名古屋飛ばし	2.30.5490
 OK:	こんせ	今世	Conversion Expected 9	今世	2.28.5000
 OK:	こんぜ	今世	Conversion Expected 9	今世	2.28.5000
-OK:	こんせい	今世	Conversion Expected 9	今世	2.28.5000
+OK:	こんせい	混成	Conversion Expected 9	今世	2.30.5490
 OK:	ふくじょし	副助詞	Conversion Expected 2	副助詞	2.28.5050
 FAILED:	らっぷ	ラップ	Conversion Expected 9	乱舞	2.28.4990
 OK:	こきゅう	呼吸	Conversion Expected 9	枯朽	2.28.5000

src/data/rules/boundary.def

@@ -69,6 +69,8 @@ PREFIX 助詞,(格助詞|連体化)          3000
 # Suppress し|なし
 PREFIX 動詞,自立,*,*,サ変・スル,連用形 3000
 PREFIX 動詞,自立,*,*,サ変・スル,*    1000
+# Suppress あるXX pattern  (ラ変動詞)
+PREFIX 動詞,自立,*,*,ラ変,           5000
 
 # general noun might be buried in personal names
 # especially we have a lot of first name variants