麻雀AI開発DL編(6)

はじめに

これまでmjai環境で自作のAIの評価を行ってきました。以前も言及しましたが、この評価方法ではAIの強さを(mjaiを知らない)第三者に説明しにくいという問題があります。そこで開発を次の段階に進める前に天鳳自動打ちによってAIの評価を行うことにしました。なお、このために天鳳自動打ちのプログラムを一から作成しました。

結果

"Mar1422"というIDで一般卓東南戦を200戦行ったところ二段R1809という結果になりました。安定段位は二段のようです。

通算成績

天鳳IDログ検索サイトへのリンクはこちら。https://nodocchi.moe/tenhoulog/#!&name=Mar1422

牌譜(クリックすると確認できます)

• https://tenhou.net/3/?log=2022031416gm-0009-0000-9358e848&tw=2
• https://tenhou.net/3/?log=2022031417gm-0009-0000-5ddc9ca4&tw=2
• https://tenhou.net/3/?log=2022031417gm-0009-0000-7a95c75e&tw=0
• https://tenhou.net/3/?log=2022031417gm-0009-0000-4d4bd58e&tw=1
• https://tenhou.net/3/?log=2022031418gm-0009-0000-3bd49751&tw=1
• https://tenhou.net/3/?log=2022031418gm-0009-0000-e0a5cf27&tw=1
• https://tenhou.net/3/?log=2022031419gm-0009-0000-090bd659&tw=3
• https://tenhou.net/3/?log=2022031419gm-0009-0000-b753f8c0&tw=0
• https://tenhou.net/3/?log=2022031419gm-0009-0000-47d7598b&tw=0
• https://tenhou.net/3/?log=2022031421gm-0009-0000-70c7501b&tw=3
• https://tenhou.net/3/?log=2022031421gm-0009-0000-8936c0b2&tw=0
• https://tenhou.net/3/?log=2022031422gm-0009-0000-2d2e149d&tw=3
• https://tenhou.net/3/?log=2022031422gm-0009-0000-14f627f2&tw=2
• https://tenhou.net/3/?log=2022031423gm-0009-0000-d1009b8f&tw=2
• https://tenhou.net/3/?log=2022031423gm-0009-0000-ae2236d6&tw=0
• https://tenhou.net/3/?log=2022031500gm-0009-0000-95bd4701&tw=0
• https://tenhou.net/3/?log=2022031500gm-0009-0000-6455daa8&tw=3
• https://tenhou.net/3/?log=2022031501gm-0009-0000-99c5139a&tw=1
• https://tenhou.net/3/?log=2022031501gm-0009-0000-e0c161e5&tw=1
• https://tenhou.net/3/?log=2022031501gm-0009-0000-a698a934&tw=1
• https://tenhou.net/3/?log=2022031502gm-0009-0000-b4ef1e10&tw=2
• https://tenhou.net/3/?log=2022031503gm-0009-0000-b3dc9e0b&tw=1
• https://tenhou.net/3/?log=2022031503gm-0009-0000-ca777780&tw=2
• https://tenhou.net/3/?log=2022031503gm-0009-0000-80b552e8&tw=1
• https://tenhou.net/3/?log=2022031504gm-0009-0000-1bdc128b&tw=3
• https://tenhou.net/3/?log=2022031504gm-0009-0000-810f8a97&tw=2
• https://tenhou.net/3/?log=2022031505gm-0009-0000-853b2332&tw=2
• https://tenhou.net/3/?log=2022031505gm-0009-0000-fa6fab97&tw=0
• https://tenhou.net/3/?log=2022031505gm-0009-0000-babe3098&tw=3
• https://tenhou.net/3/?log=2022031506gm-0009-0000-b8b1d800&tw=1
• https://tenhou.net/3/?log=2022031506gm-0009-0000-9ecd0c30&tw=0
• https://tenhou.net/3/?log=2022031507gm-0009-0000-03a09c28&tw=1
• https://tenhou.net/3/?log=2022031507gm-0009-0000-9924836a&tw=0
• https://tenhou.net/3/?log=2022031508gm-0009-0000-8cc815e7&tw=2
• https://tenhou.net/3/?log=2022031508gm-0009-0000-daceb8e3&tw=3
• https://tenhou.net/3/?log=2022031508gm-0009-0000-2e5297d0&tw=2
• https://tenhou.net/3/?log=2022031509gm-0009-0000-41f87648&tw=0
• https://tenhou.net/3/?log=2022031509gm-0009-0000-088a4aff&tw=0
• https://tenhou.net/3/?log=2022031509gm-0009-0000-72b1d881&tw=2
• https://tenhou.net/3/?log=2022031511gm-0009-0000-49877045&tw=1
• https://tenhou.net/3/?log=2022031512gm-0009-0000-09a4ca56&tw=3
• https://tenhou.net/3/?log=2022031512gm-0009-0000-29f85665&tw=3
• https://tenhou.net/3/?log=2022031513gm-0009-0000-934ac084&tw=2
• https://tenhou.net/3/?log=2022031513gm-0009-0000-eabfc986&tw=1
• https://tenhou.net/3/?log=2022031514gm-0009-0000-c14a0724&tw=0
• https://tenhou.net/3/?log=2022031514gm-0009-0000-888aca39&tw=3
• https://tenhou.net/3/?log=2022031515gm-0009-0000-c9b0442c&tw=2
• https://tenhou.net/3/?log=2022031515gm-0009-0000-3c1a1d38&tw=1
• https://tenhou.net/3/?log=2022031516gm-0009-0000-ed5119ae&tw=3
• https://tenhou.net/3/?log=2022031516gm-0009-0000-f166f162&tw=1
• https://tenhou.net/3/?log=2022031516gm-0009-0000-e4767209&tw=3
• https://tenhou.net/3/?log=2022031517gm-0009-0000-b372b9ad&tw=1
• https://tenhou.net/3/?log=2022031517gm-0009-0000-ea613f86&tw=1
• https://tenhou.net/3/?log=2022031518gm-0009-0000-e6e616c2&tw=3
• https://tenhou.net/3/?log=2022031518gm-0009-0000-9e5f4cb4&tw=3
• https://tenhou.net/3/?log=2022031519gm-0009-0000-96532a37&tw=3
• https://tenhou.net/3/?log=2022031519gm-0009-0000-6eeeda23&tw=0
• https://tenhou.net/3/?log=2022031520gm-0009-0000-c7e51285&tw=2
• https://tenhou.net/3/?log=2022031520gm-0009-0000-335b5ba8&tw=3
• https://tenhou.net/3/?log=2022031520gm-0009-0000-0590397d&tw=0
• https://tenhou.net/3/?log=2022031521gm-0009-0000-75a60217&tw=2
• https://tenhou.net/3/?log=2022031521gm-0009-0000-0c4f8445&tw=0
• https://tenhou.net/3/?log=2022031522gm-0009-0000-6c0faa23&tw=0
• https://tenhou.net/3/?log=2022031522gm-0009-0000-36c8dedd&tw=0
• https://tenhou.net/3/?log=2022031523gm-0009-0000-38838db3&tw=0
• https://tenhou.net/3/?log=2022031523gm-0009-0000-1b7b9e76&tw=1
• https://tenhou.net/3/?log=2022031600gm-0009-0000-4784dcb6&tw=0
• https://tenhou.net/3/?log=2022031600gm-0009-0000-1e38e2c3&tw=2
• https://tenhou.net/3/?log=2022031601gm-0009-0000-d870d9e4&tw=3
• https://tenhou.net/3/?log=2022031601gm-0009-0000-70498abc&tw=1
• https://tenhou.net/3/?log=2022031602gm-0009-0000-6ad0c2ba&tw=2
• https://tenhou.net/3/?log=2022031602gm-0009-0000-048a880a&tw=3
• https://tenhou.net/3/?log=2022031602gm-0009-0000-563c4d9f&tw=0
• https://tenhou.net/3/?log=2022031603gm-0009-0000-5d3ed8b0&tw=2
• https://tenhou.net/3/?log=2022031604gm-0009-0000-0930fb3e&tw=3
• https://tenhou.net/3/?log=2022031604gm-0009-0000-cb77c0e8&tw=3
• https://tenhou.net/3/?log=2022031605gm-0009-0000-7a6b4a31&tw=1
• https://tenhou.net/3/?log=2022031605gm-0009-0000-5de0835b&tw=3
• https://tenhou.net/3/?log=2022031606gm-0009-0000-c35ee92c&tw=2
• https://tenhou.net/3/?log=2022031606gm-0009-0000-28a7c1f5&tw=1
• https://tenhou.net/3/?log=2022031607gm-0009-0000-2c54d451&tw=0
• https://tenhou.net/3/?log=2022031607gm-0009-0000-057d6f26&tw=2
• https://tenhou.net/3/?log=2022031608gm-0009-0000-2c286dec&tw=3
• https://tenhou.net/3/?log=2022031608gm-0009-0000-c558a67f&tw=1
• https://tenhou.net/3/?log=2022031609gm-0009-0000-6581417b&tw=0
• https://tenhou.net/3/?log=2022031609gm-0009-0000-f9bcb620&tw=2
• https://tenhou.net/3/?log=2022031610gm-0009-0000-2c5c92f2&tw=1
• https://tenhou.net/3/?log=2022031610gm-0009-0000-19c49458&tw=1
• https://tenhou.net/3/?log=2022031611gm-0009-0000-e90386c9&tw=2
• https://tenhou.net/3/?log=2022031612gm-0009-0000-f7a96210&tw=1
• https://tenhou.net/3/?log=2022031612gm-0009-0000-0aa4b51e&tw=1
• https://tenhou.net/3/?log=2022031612gm-0009-0000-32387370&tw=1
• https://tenhou.net/3/?log=2022031613gm-0009-0000-6535dea0&tw=0
• https://tenhou.net/3/?log=2022031613gm-0009-0000-ef7fd74b&tw=0
• https://tenhou.net/3/?log=2022031614gm-0009-0000-763cf1a0&tw=3
• https://tenhou.net/3/?log=2022031615gm-0009-0000-e5da6f43&tw=1
• https://tenhou.net/3/?log=2022031615gm-0009-0000-2de9b54c&tw=3
• https://tenhou.net/3/?log=2022031615gm-0009-0000-d6af768d&tw=3
• https://tenhou.net/3/?log=2022031616gm-0009-0000-b4eea570&tw=1
• https://tenhou.net/3/?log=2022031616gm-0009-0000-10814297&tw=1
• https://tenhou.net/3/?log=2022031617gm-0009-0000-10041d54&tw=2
• https://tenhou.net/3/?log=2022031617gm-0009-0000-4f3e43ad&tw=3
• https://tenhou.net/3/?log=2022031618gm-0009-0000-fa151221&tw=2
• https://tenhou.net/3/?log=2022031618gm-0009-0000-572a7395&tw=1
• https://tenhou.net/3/?log=2022031618gm-0009-0000-4f5f1136&tw=2
• https://tenhou.net/3/?log=2022031619gm-0009-0000-2fdd6b35&tw=2
• https://tenhou.net/3/?log=2022031620gm-0009-0000-bdad6d01&tw=0
• https://tenhou.net/3/?log=2022031620gm-0009-0000-65ede1af&tw=0
• https://tenhou.net/3/?log=2022031620gm-0009-0000-83327038&tw=2
• https://tenhou.net/3/?log=2022031621gm-0009-0000-4119afcb&tw=3
• https://tenhou.net/3/?log=2022031622gm-0009-0000-2b60a35a&tw=3
• https://tenhou.net/3/?log=2022031622gm-0009-0000-4805477b&tw=1
• https://tenhou.net/3/?log=2022031622gm-0009-0000-c6f6bfcb&tw=0
• https://tenhou.net/3/?log=2022031623gm-0009-0000-fb586146&tw=2
• https://tenhou.net/3/?log=2022031623gm-0009-0000-a28ae8ce&tw=3
• https://tenhou.net/3/?log=2022031700gm-0009-0000-a81483a6&tw=1
• https://tenhou.net/3/?log=2022031700gm-0009-0000-c411d319&tw=2
• https://tenhou.net/3/?log=2022031701gm-0009-0000-454ffe34&tw=3
• https://tenhou.net/3/?log=2022031701gm-0009-0000-7f0e196c&tw=1
• https://tenhou.net/3/?log=2022031702gm-0009-0000-a80d22d0&tw=2
• https://tenhou.net/3/?log=2022031702gm-0009-0000-4f53de8f&tw=0
• https://tenhou.net/3/?log=2022031703gm-0009-0000-5c4c5006&tw=3
• https://tenhou.net/3/?log=2022031703gm-0009-0000-ece01a6d&tw=1
• https://tenhou.net/3/?log=2022031704gm-0009-0000-aebd15e5&tw=3
• https://tenhou.net/3/?log=2022031704gm-0009-0000-95db02d1&tw=1
• https://tenhou.net/3/?log=2022031704gm-0009-0000-b8335477&tw=3
• https://tenhou.net/3/?log=2022031704gm-0009-0000-2bc9c5d8&tw=3
• https://tenhou.net/3/?log=2022031705gm-0009-0000-d4a0bc51&tw=1
• https://tenhou.net/3/?log=2022031705gm-0009-0000-dc10726e&tw=3
• https://tenhou.net/3/?log=2022031706gm-0009-0000-4fdc56d8&tw=1
• https://tenhou.net/3/?log=2022031706gm-0009-0000-bf907225&tw=2
• https://tenhou.net/3/?log=2022031707gm-0009-0000-ad4fb5c5&tw=2
• https://tenhou.net/3/?log=2022031707gm-0009-0000-ab069a11&tw=3
• https://tenhou.net/3/?log=2022031708gm-0009-0000-ae5097c0&tw=2
• https://tenhou.net/3/?log=2022031708gm-0009-0000-869765f9&tw=1
• https://tenhou.net/3/?log=2022031708gm-0009-0000-b4fb8b5a&tw=2
• https://tenhou.net/3/?log=2022031709gm-0009-0000-082a5602&tw=3
• https://tenhou.net/3/?log=2022031709gm-0009-0000-056c04b9&tw=3
• https://tenhou.net/3/?log=2022031710gm-0009-0000-1828d263&tw=0
• https://tenhou.net/3/?log=2022031710gm-0009-0000-a10263e7&tw=2
• https://tenhou.net/3/?log=2022031710gm-0009-0000-fbbb665a&tw=0
• https://tenhou.net/3/?log=2022031711gm-0009-0000-7893a0f5&tw=2
• https://tenhou.net/3/?log=2022031711gm-0009-0000-bf473a6b&tw=2
• https://tenhou.net/3/?log=2022031712gm-0009-0000-f51f2608&tw=1
• https://tenhou.net/3/?log=2022031713gm-0009-0000-9f11a78f&tw=0
• https://tenhou.net/3/?log=2022031713gm-0009-0000-34301313&tw=3
• https://tenhou.net/3/?log=2022031713gm-0009-0000-789bb191&tw=3
• https://tenhou.net/3/?log=2022031714gm-0009-0000-b440c205&tw=2
• https://tenhou.net/3/?log=2022031714gm-0009-0000-b149e5e1&tw=0
• https://tenhou.net/3/?log=2022031714gm-0009-0000-47c5ba62&tw=2
• https://tenhou.net/3/?log=2022031715gm-0009-0000-affc24fc&tw=0
• https://tenhou.net/3/?log=2022031715gm-0009-0000-87e9194a&tw=3
• https://tenhou.net/3/?log=2022031716gm-0009-0000-4f8df4ad&tw=3
• https://tenhou.net/3/?log=2022031716gm-0009-0000-602d2c57&tw=0
• https://tenhou.net/3/?log=2022031717gm-0009-0000-ded71104&tw=2
• https://tenhou.net/3/?log=2022031717gm-0009-0000-904e03af&tw=2
• https://tenhou.net/3/?log=2022031718gm-0009-0000-e2420c54&tw=0
• https://tenhou.net/3/?log=2022031718gm-0009-0000-a3fbd606&tw=3
• https://tenhou.net/3/?log=2022031718gm-0009-0000-626b2aa5&tw=3
• https://tenhou.net/3/?log=2022031721gm-0009-0000-4c734847&tw=0
• https://tenhou.net/3/?log=2022031722gm-0009-0000-57c8b16c&tw=2
• https://tenhou.net/3/?log=2022031722gm-0009-0000-118a49c0&tw=0
• https://tenhou.net/3/?log=2022031722gm-0009-0000-daea8c1a&tw=2
• https://tenhou.net/3/?log=2022031723gm-0009-0000-4fb2d057&tw=3
• https://tenhou.net/3/?log=2022031723gm-0009-0000-490c9293&tw=2
• https://tenhou.net/3/?log=2022031800gm-0009-0000-5dda5881&tw=1
• https://tenhou.net/3/?log=2022031800gm-0009-0000-1606ccab&tw=3
• https://tenhou.net/3/?log=2022031801gm-0009-0000-2774efc5&tw=2
• https://tenhou.net/3/?log=2022031801gm-0009-0000-0e2b8936&tw=1
• https://tenhou.net/3/?log=2022031802gm-0009-0000-e8899c61&tw=1
• https://tenhou.net/3/?log=2022031802gm-0009-0000-0c3cc606&tw=1
• https://tenhou.net/3/?log=2022031803gm-0009-0000-7e46b2b1&tw=2
• https://tenhou.net/3/?log=2022031803gm-0009-0000-eed5a19d&tw=2
• https://tenhou.net/3/?log=2022031804gm-0009-0000-5ee9bc2d&tw=1
• https://tenhou.net/3/?log=2022031804gm-0009-0000-d3ecd804&tw=0
• https://tenhou.net/3/?log=2022031805gm-0009-0000-060e8cf1&tw=0
• https://tenhou.net/3/?log=2022031805gm-0009-0000-ccddff21&tw=0
• https://tenhou.net/3/?log=2022031806gm-0009-0000-13d284f9&tw=1
• https://tenhou.net/3/?log=2022031807gm-0009-0000-76b190f5&tw=1
• https://tenhou.net/3/?log=2022031807gm-0009-0000-214a5054&tw=0
• https://tenhou.net/3/?log=2022031807gm-0009-0000-442fb760&tw=2
• https://tenhou.net/3/?log=2022031808gm-0009-0000-45e9da01&tw=0
• https://tenhou.net/3/?log=2022031808gm-0009-0000-5988e369&tw=2
• https://tenhou.net/3/?log=2022031808gm-0009-0000-304ee771&tw=3
• https://tenhou.net/3/?log=2022031809gm-0009-0000-eae0a7fd&tw=1
• https://tenhou.net/3/?log=2022031810gm-0009-0000-d29253cf&tw=3
• https://tenhou.net/3/?log=2022031810gm-0009-0000-e1666f13&tw=2
• https://tenhou.net/3/?log=2022031811gm-0009-0000-e2678857&tw=0
• https://tenhou.net/3/?log=2022031811gm-0009-0000-c9b75306&tw=1
• https://tenhou.net/3/?log=2022031811gm-0009-0000-57b9f490&tw=1
• https://tenhou.net/3/?log=2022031812gm-0009-0000-d75e6ba1&tw=3
• https://tenhou.net/3/?log=2022031812gm-0009-0000-2b42e4ed&tw=0
• https://tenhou.net/3/?log=2022031812gm-0009-0000-fb9efba5&tw=3
• https://tenhou.net/3/?log=2022031813gm-0009-0000-890b0791&tw=1
• https://tenhou.net/3/?log=2022031814gm-0009-0000-846fb33b&tw=3
• https://tenhou.net/3/?log=2022031814gm-0009-0000-bd1d75e0&tw=0
• https://tenhou.net/3/?log=2022031815gm-0009-0000-710e116c&tw=0
• https://tenhou.net/3/?log=2022031815gm-0009-0000-2e945097&tw=1
• https://tenhou.net/3/?log=2022031816gm-0009-0000-9e0f1f8c&tw=1
• https://tenhou.net/3/?log=2022031816gm-0009-0000-afa71cb3&tw=0

所感

一般卓東南戦での二段のポイント配分は30p, 15p, 0p, -60pです。1戦あたりに獲得できるポイント期待値が2.78と低いことから、三段へ昇段するには4位率を下げる必要があります。やはり押し引きが課題と言えそうです。

おわりに

同卓していただいた皆様ありがとうございました。今後は強化学習を用いて麻雀AIを開発しようと考えています。