银行 社区服务 每日签到 会员排行 网站地图
  • 2810阅读
  • 46回复

引擎公平对战测试的建议

楼层直达
我发帖:不隐藏、不叫卖、不加密。
级别: 论坛检查
[棋中红钻4级]发帖数量≥1000篇 [棋中黄钻5级]金币数量≥10000枚 [棋中蓝钻1级]乐币数量≥10枚 [未点亮棋中粉钻]贡献值数量<1点 [棋中彩钻3级]精华帖数量≥5篇
发帖
1507
金币
10614
威望
13
贡献值
0
乐币
33
主题
138

只看该作者 40楼 发表于: 2023-09-03
非平衡局面缺乏公平,意义不大,以下三次测试都是平衡初始局面,红方第一步有限随机,超快棋500局测试,线程时间Hash都一样:


pk230902 对 pk0408-bmi2 的分数:95 胜 - 63 负 - 342 和 [0.532] 500
等级分差异:22.3 +/- 17.1,胜率:53.20%,和棋率:68.40%


pk0408-bmi2 对 pk230902x 的分数:71 胜 - 114 负 - 315 和 [0.457] 500
等级分差异:-30.0 +/- 18.5,胜率:45.70%,和棋率:63.00%


pk230902 对 pk230902x 的分数:57 胜 - 78 负 - 365 和 [0.479] 500
等级分差异:-14.6 +/- 15.8,胜率:47.90%,和棋率:73.00%


pk230902 和 pk230902x都是我用0902源码自编译的bmi2版,两种0902在超快棋测试都略胜0408
我发帖:不隐藏、不叫卖、不加密
级别: 中尉
[棋中红钻2级]发帖数量≥100篇 [棋中黄钻2级]金币数量≥1000枚 [未点亮棋中蓝钻]乐币数量<10枚 [未点亮棋中粉钻]贡献值数量<1点 [未点亮棋中彩钻]精华帖数量<1篇
发帖
378
金币
1016
威望
1
贡献值
0
乐币
4
主题
12

只看该作者 41楼 发表于: 2023-09-03
回 40楼(lingshi) 的帖子
lingshi的本主题帖,是个好帖子,据本人所阅,第一是肯定的。论坛的本质,不是给出标准答案,那不叫论坛。当然,没有标准答案,不是胡说八道,要言之有物,要有理有据,只要做到这点,即使你的结论我不认同,我也尊重你。另者,本帖能唤起人们对公平测试的思考与讨论,这就足够了。
      另外,说句题外话,论坛中有人处心积虑地哗众取宠(本人曾被这样骂过),在搔首弄姿,在吟吟作态,令人作呕,本人也曾被蒙蔽过。
舟遥遥以轻扬  风飘飘而吹衣
级别: 少尉
[棋中红钻2级]发帖数量≥100篇 [棋中黄钻1级]金币数量≥100枚 [棋中蓝钻1级]乐币数量≥10枚 [未点亮棋中粉钻]贡献值数量<1点 [未点亮棋中彩钻]精华帖数量<1篇
发帖
265
金币
739
威望
0
贡献值
0
乐币
18
主题
5
只看该作者 42楼 发表于: 2023-09-03
我之前测试也是各种开局,各种时间都测过,后来看多了stockfish的测试,还有TCEC,CCC,fastgm,cegt等各种网站上的比赛,还有自己测试的结果来看,测试最重要的是同一条件下测试的盘数足够多,国象引擎动辄50000局的测试,中象是远没那条件的,我自己一般也就测个2000局,和卡卡的5000起步也有差距,TCEC上有个小问答,专门说明了一下不用平衡开局测试的原因:相比100局有95局和棋比起来,it is more entertaining!
https://tcec-chess.com/articles/TCEC_Openings_FAQ.html
舟遥遥以轻扬  风飘飘而吹衣
级别: 中尉
[棋中红钻2级]发帖数量≥100篇 [棋中黄钻2级]金币数量≥1000枚 [未点亮棋中蓝钻]乐币数量<10枚 [未点亮棋中粉钻]贡献值数量<1点 [未点亮棋中彩钻]精华帖数量<1篇
发帖
378
金币
1016
威望
1
贡献值
0
乐币
4
主题
12

只看该作者 43楼 发表于: 2023-09-03
回 42楼(风的线条) 的帖子
你说的很有道理,对我都有参考意义。看来,你在测试上花过不少时间;所以,你的意见,我都认真听取并细心思考的。
如果有人想教你一门功夫,你首先要看到他的功夫咋样。比如,从小到大再到老的一个人,自告奋勇想教你弹钢琴,你跟他学了,咳!我咋没学会呢?
后来,你终于明白,教你的人也未曾弹好过-首曲子,全是东拼西凑,拾人牙慧!
舟遥遥以轻扬  风飘飘而吹衣
级别: 少尉
[棋中红钻2级]发帖数量≥100篇 [棋中黄钻1级]金币数量≥100枚 [棋中蓝钻1级]乐币数量≥10枚 [未点亮棋中粉钻]贡献值数量<1点 [未点亮棋中彩钻]精华帖数量<1篇
发帖
265
金币
739
威望
0
贡献值
0
乐币
18
主题
5
只看该作者 44楼 发表于: 2023-09-03
刚有旋风的时候去大杀四方,很快黑了觉得生无可恋,了无生趣之下为了发挥收费引擎的余热,开机就能对打是个不错的选择,旋风的各种限制加上鱼的崛起,又把重点转到各种和鱼相关的周边来玩了.现在努力学习国象,因为国象各种引擎,界面,跑谱,测试的全面,便捷,完完全全不是中象能比较的,哎~~
舟遥遥以轻扬  风飘飘而吹衣
级别: 中尉
[棋中红钻2级]发帖数量≥100篇 [棋中黄钻2级]金币数量≥1000枚 [未点亮棋中蓝钻]乐币数量<10枚 [未点亮棋中粉钻]贡献值数量<1点 [未点亮棋中彩钻]精华帖数量<1篇
发帖
378
金币
1016
威望
1
贡献值
0
乐币
4
主题
12

只看该作者 45楼 发表于: 2023-09-03
论坛早有人出教程了
本论坛早前教程链接地址:
http://www.qqzze.com/read-htm-tid-60083-page-1.html
级别: 中尉
[棋中红钻2级]发帖数量≥100篇 [棋中黄钻2级]金币数量≥1000枚 [未点亮棋中蓝钻]乐币数量<10枚 [未点亮棋中粉钻]贡献值数量<1点 [未点亮棋中彩钻]精华帖数量<1篇
发帖
378
金币
1016
威望
1
贡献值
0
乐币
4
主题
12

只看该作者 46楼 发表于: 2023-09-03
最新皮卡鱼pk0903棋力测试结果
全局设置
思考策略    限时制:1+0+0 0.6
线程数    1
哈希表    128
后台思考    ×
开局库    ×
局面文件    tournament\fen.txt
随机选取    √
编排模式    循环赛
循环次数    500
同时进行场数    6
超时宽限    30ms
自动判和    回合数>=40 双方分数绝对值<=20
每场对局重新加载引擎    √


排名    引擎    胜    和    负    胜率    ΔElo
1    pk0903    162    729    109    52.65%    +18.4±11.2
2    pk0802    109    729    162    47.35%    -18.4±11.2
pk0903净胜53盘,等级分高上一版本36.8
快速回复

限56 字节
请不要在回贴只采用字母:“ PP、asdfhjkl、HAO、OK、ddddddd ......”。  请不要在回贴过于简单的内容:“不错、顶、支持、厉害、呵呵、靠、晕........”
 
验证问题: 我们的论坛名字是?
上一个 下一个