yasuokaの日記： 旧字旧仮名係り受け解析のための「舞姬/雪國/荒野より-Benchmarks」

元日の日記で公開した「荒野より-Benchmark」だが、オリジナル(『群像』第21卷第10號(1966年10月)pp.6-17)に合わせて、旧字旧仮名に戻すことにした。「舞姬/雪國/荒野より-Benchmarks」として、まとめることにしたので、ぜひ試してみてほしい。ちなみに、私(安岡孝一)の手元で試したベンチマーク結果(LAS/MLAS/BLEX)は、以下の通り。

• UniDic-COMBO 0.8.0 + 旧仮名口語UniDic : 舞姬=81.13/74.07/81.48 雪國=87.50/82.35/78.43 荒野より=77.49/56.00/64.00
• UniDic2UD 2.6.5 + 旧仮名口語UniDic : 舞姬=77.36/66.67/74.07 雪國=94.64/88.00/84.00 荒野より=60.73/50.00/47.50
• spaCy-SynCha 0.7.9 + 旧仮名口語UniDic : 舞姬=81.13/66.67/70.37 雪國=87.50/81.63/77.55 荒野より=63.87/32.88/43.84
• spaCy-ChaPAS 0.6.8 + 旧仮名口語UniDic : 舞姬=77.36/59.26/62.96 雪國=87.50/81.63/77.55 荒野より=64.92/35.14/45.95
• GiNZA 4.0.5 : 舞姬=45.44/25.40/12.70 雪國=51.28/39.29/25.00 荒野より=46.94/22.47/8.99
• Stanza 1.1.1 jaモジュール : 舞姬=26.17/10.71/7.14 雪國=78.18/64.00/40.00 荒野より=57.45/31.58/15.79
• spaCy-jPTDP 0.3.0 ja_gsdモジュール : 舞姬=42.20/23.33/10.00 雪國=47.46/37.04/29.63 荒野より=45.69/18.60/11.63
• spaCy-COMBO 0.7.1 ja_gsdモジュール : 舞姬=40.37/19.35/9.68 雪國=54.24/42.86/32.14 荒野より=31.47/6.90/2.30
• spaCy-UDPipe 0.3.2 jaモジュール : 舞姬=30.19/14.55/7.27 雪國=58.93/45.28/33.96 荒野より=28.12/9.64/2.41