ryoryoryoさんのトモダチの日記。 アナウンス:スラドとOSDNは受け入れ先を募集中です。
yasuokaの日記: NDL古典籍OCR用RoBERTa-small ver.2は「いと小さく[MASK]ゆるはいとをかし」の[MASK]に何を埋めてくるのか
2021年12月23日の日記の読者から、NDL古典籍OCR用RoBERTa-small ver.2という単文字日本語モデルをお教えいただいた。以前、私(安岡孝一)が作ったroberta-small-japanese-aozora-charを再トレーニングして、TrOCRのデコーダーに使っているらしい。とりあえず、当該モデルをGoogle Colaboratoryで動かしてみよう。
!pip install transformers
!test -f model-ver2.zip || curl -LO https://lab.ndl.go.jp/dataset/ndlkotensekiocr/trocr/model-ver2.zip
!test -d model-ver2 || unzip model-ver2.zip
from transformers import pipeline
fmp=pipeline("fill-mask","model-ver2/decoder-roberta-v3")
print(fmp("いと小さく[MASK]ゆるはいとをかし"))
「いと小さく[MASK]ゆるはいとをかし」を穴埋めさせてみたところ、私の手元では以下の結果になった。
[{'score': 0.16102387011051178, 'token': 95, 'token_str': 'み', 'sequence': 'いと小さくみゆるはいとをかし'}, {'score': 0.05442138388752937, 'token': 51, 'token_str': 'こ', 'sequence': 'いと小さくこゆるはいとをかし'}, {'score': 0.050991836935281754, 'token': 45, 'token_str': 'き', 'sequence': 'いと小さくきゆるはいとをかし'}, {'score': 0.04673411697149277, 'token': 75, 'token_str': 'に', 'sequence': 'いと小さくにゆるはいとをかし'}, {'score': 0.0423908531665802, 'token': 108, 'token_str': 'れ', 'sequence': 'いと小さくれゆるはいとをかし'}]
漢字の「見」ではなく、ひらがなの「み」を埋めてきているが、それでも素晴らしい。だとすると、たとえば拓本文字データベースと絡めて再トレーニングすれば、さて、何かできるかなぁ。
KAMUIの日記: 今日はサムニンでした。
今年はのぼう様に「琵琶湖を獲る気があるのか」聞いてみたかったのに。
KAMUIの日記: 完結編(後編) 1
・・・だがNHK、テメーは少々やり過ぎだ。「100カメ」はまだしも「プロフェッショナル仕事の流儀」の件は流石にな。
#海外のリアクター、男性と女性で結構反応が分かれるのが興味深い。あと海外勢は終わってからの語りが長い傾向。視聴含めて約4時間半の動画あげてるリアクターも居たしな。
yasuokaの日記: アイヌ語の「イワイサルㇱペ」は「虎」なのか「オオカミ」なのか「六尾獣」なのか
一昨昨日の日記に関連して、アイヌ語の「イワイサルㇱペ」を調べていたところ、B・ピウスツキ『樺太アイヌの言語と民話についての研究資料<26>病弱な者でも有能な憑き神によって開運する由来話』(創造の世界, 第77号 (1991年2月), pp.138-145)に、以下の文章を見つけた(p.140)。
ネヤイケヘ そうしたら(ちょうど、そこへ)
アンポニウネ ぼくの年下の
ホㇱキラムフ 兄さんが
キラアニエㇸマヌ 逃げてやってきた。
オーポニ (よく見ると)その後を
イワイサルㇱカムイ 六尾をもつ神(という魔性のオオカミ)が
アンホㇱキラムフ ぼくの兄さんを
ノㇱパ 追いかけていた。
アノㇱキラムフ ぼくの兄さんを
アネソㇹキ ぼくは(わきに手早く)よけ(てやり過ごし)た。(夢中に兄さんを追いかける性悪のオオカミにぼくは目をすえて)
アヌッソロマレペ ぼくが(かねて)内ふところにしのばせていたものを
アヌイナマヌ ぼくは取り出した。
トイキエムシアニ (鞘を払い)トイキ(という名)刀で
イワイサルㇱペ 六尾をもつ(というオオカミの)奴を
アンタウケ ぼくはたたき斬った。
アルパㇵノㇱキケタ (みごと)ちょうど、ど真中を
アントゥイテㇸテ ぼくは斬(ってしま)った。
「虎」ではなく「オオカミ」らしい。Bronisław Piłsudski『Materials for the Study of the Ainu Language and Folklore』(Cracow: Imperical Academy of Sciences, 1912)の原文にあたってみよう(pp.239-240 [in Nr.27. Dictated (December 1903) by Nita aged 28 of village of Aj.])。
Nejàjḱehé am-ponínue hóśki rámhu kira ani éx manu, opóni ivaj-saruś kamúi an-hóśki rámhu nośpa. Anóśki rámhu anesóxki. An-usòmarepé anújna manu. Tóiki emuś-ani ivaj-saruśpe antáwḱe, arúpax nóśḱe-ḱeta antújtexte.
Meanwhile the younger of my elder brothers came running; following (and) pursuing my brother, (there came) a beast with six tails. I made way for my elder brother. I seized the thing in my bosom: with (my) earthen sword, I struck the six-tailed beast; just in the middle did I cut it in two.
原文は「虎」とも「オオカミ」とも書いていないようだ。日本語訳をおこなった藤村久和は「H・Y媼によれば、この動物はオオカミであって」としているものの、それを裏付ける他の文献が引用されているわけでもない。また、Piłsudski自身は、アイヌ語の「horoḱéu」を「wolf」と訳している(『Materials for the Study of the Ainu Language and Folklore』pp.199-213)。さて、どうしたものかな。
KAMUIの日記: また表示がおかしくなってる? 2
yasuokaの日記: Universal Dependencies 2.13がリリース
Universal Dependencies 2.13がリリースされた、との連絡をもらった。半年前のUniversal Dependencies 2.12と較べて、Classical Armenian、Georgian、Haitian Creole、Highland Puebla Nahuatl、Macedonian、Middle French、Vepsが増えており、148の言語にまたがるツリーバンクとなっている。私(安岡孝一)個人としては、deplacyでМакедонскиを扱う際に精度が上がらず苦労したので、UD_Macedonian-MTBによるマケドニア語サポートはうれしい限りである。また、現代中国語(簡化字)はUD_Chinese-BeginnerとUD_Chinese-PatentCharが、イタリア語はUD_Italian-Oldが追加されるなど、どんどん拡大が続いている。とりあえず、先月時点での係り受け解析ツールの状況を『Universal DependenciesとBERT/RoBERTa/DeBERTaモデルによる多言語情報処理』(2023年10月版)にざっとまとめておいたので、参考にしてほしい。
KAMUIの日記: そりゃ、付いてるからだろう。 5
「心は女」と言いながら「男性器を持つ素っ裸の人物が女風呂に入ってくること」に対する女性の恐怖感などが理解できないのは何故ですか?と。
やっぱ女風呂ってのは女性にとって「男性について気にせず安心できる場所」のひとつだと思う訳で。そういうところに「生物学的男性」が入り込んでくると「安心できる場所」が無くなることになる。
今年に入ってからでもカナダの女性用シェルターでトランスジェンダーによる女性への性暴行事件が起きてたりするし、分けるべきところは分けないと「トランスジェンダーへの反感」が増すだけだと思うのよね。
けど、先日の最高裁判決もあるので今後この手のトラブルは増えるだろうね。
yasuokaの日記: アイヌ語に「虎」は無いのか
思うところあって、アイヌ語で「虎」をどう言うのか調べていたところ、Михаил Михайлович Добротворский『Аинско-русскій словарь』(Казань: Университецкая типография, 1875)の語彙番号1519に「虎」を見つけた。
Ивайсаруспѐ. С. тигръ (въ древности были на Сахалинѣ).
この記述を信じるなら、昔、樺太(サハリン)には「虎」がいたらしい。ただ、これ「イワイサルㇱペ」(iwaysaruspe)だとして、iway-sar-us-peなのかしら?
KAMUIの日記: わからせ顔のアウラ 4
・・・水戸黄門の印籠だ。最後に圧倒的な「力」の差を見せつけるところとか。