德州AI和贝叶斯法则的利用 之前的德州游戏AI会利用贝叶斯法则(一种概率反演算的定律)来推断对手的手牌范围,这种办法会导致AI产生极大的漏洞。冷扑用的办法是不预先假定对

之前的德州游戏AI会利用贝叶斯法则(一种概率反演算的定律)来推断对手的手牌范围,这种办法会导致AI产生极大的漏洞。冷扑用的办法是不预先假定对手的手牌范围,而是考虑对手如果拿着某手牌做出这样的行动合理不合理,按照他自己的纳什均衡,这样的动作会让他损失多少EV,从而调整自己的行动最大化对手的损失。
举个例子,这也是一般人类和AI很棘手的问题。一个人上桌第一手牌就翻牌前推了你200个盲注,你拿A9同花应该跟注还是弃牌。一般人类和之前的德扑AI往往会推测对手手牌范围,然后考虑平均来说跟注值不值得。推测对手手牌范围的行为会让自己打法产生漏洞,容易被高手钻空子。冷扑利用了2014年发明的一种新算法,他不推测对手平均手上拿什么牌,而是针对每种手牌考虑德扑规则:假如对手拿27它应不应该全压,如果按照他自己的纳什均衡策略,他全压27损失巨大。那如果他拿AA应不应该全压,按照他的纳什均衡策略,AA全压太浪费了,损失也是巨大。一个一个的考察他每种手牌这样打会损失多少EV。然后我们选择一种打法让他长期来说损失EV最大的打法。也就是说,你可以每把拿烂牌推我,但是万一我拿到好牌call你,你损失巨大。所以我不怕你这样打。(注意冷扑不会考虑之前玩家游戏历史,所以连续翻牌前推10次和翻牌前推1次对冷扑是一样的)
第四,之前德扑AI会把对手的下注大小简单的四舍五入,这是一个大漏洞,一来会导致纳什均衡计算出错,二来会导致人类利用AI这点来剥削AI。冷扑的做法是如果人类做出了不寻常的奇怪下注,冷扑不会简单的四舍五入,而是会针对这种下注方法独立的展开纳什均衡计算。他们的实验发现,使用这种算法,可以让德扑玩法冷扑被人类高手剥削的可能性降低为原来的1/12. 但是这个方法只用在转牌和河牌圈(后两轮)前两轮还是简单四舍五入。
最后,也是让冷扑变得强大的一个重要系统,就是冷扑能总结一整天下来的游戏,修补自己的漏洞。它会优先考察自己最常见的错误,每个晚上冷扑大概能修补自己3个漏洞(其实还有更多漏洞,不过电脑的计算量限制下冷扑只能修补两三个漏洞)。
冷扑的弱点
开发者承认冷扑最大的弱点是不会考虑对手打法。就算你从来不咋呼,或者每手牌都咋呼,冷扑以及现在主流的德扑AI都不会利用你的漏洞。德扑AI只会坚持纳什均衡打法,利用人类偏离纳什均衡的错误来盈利。这点和人类玩家很不一样。
冷扑即使在晚上的自我进化阶段也不会去寻找人类的漏洞。
不过开发者说,这个弱点也恰好同时是冷扑的优点。因为假如你要去剥削对手的弱点,那么你自己就会卖出破绽,这样人类高手反而会利用你的破绽来剥削你。比如你看对手把把咋呼,下一把你想着要去抓对手咋呼,那你必然会拿弱牌跟注对手。这时你自己就卖了个漏洞出来,对手有可能利用这个漏洞来反打你。而抓漏洞的游戏上,AI肯定玩不过人类高手。真正好的打法是不管对手有没有漏洞,AI寻找纳什最优打法的能力肯定比人类强,只要AI按照最优打法来打,人类一犯错,AI就能盈利。
事实上人类顶尖高手的明显漏洞非常小,AI尝试去抓人类漏洞是危险的行为。AI和普通人类玩家交手也能取得很大的优势。但是剥削弱玩家的德扑教学能力上,AI是比不过人类高手的。(不过反正坚持按照GTO(最优打法)玩都能赢,为什么一定要想着去剥削对手呢)
此外很多人类以为AI会侦查他们的漏洞,所以故意卖漏洞给AI,这也造成了他们进一步偏离纳什均衡,反而承受更大的损失。
FAQ
抖音短剧下载全攻略
抖音短剧真的超级火,但有时候想离线观看或者保存下来,怎么操作呢?其实最简单的方法就是用抖音自带的下载功能。只要打开抖音APP,找到喜欢的短剧,点右下角的“分享”按钮,再选择“保存视频”,视频就会自动存到手机相册。注意哦,有些视频可能因为版权限制不能下载,这种情况就需要换个方法啦。
遇到不能直接保存的短剧,别担心!可以试试第三方下载工具。比如“抖音视频下载器”或“快抖下载器”,这些软件能帮你通过复制视频链接,快速下载高质量的短剧。有些工具还能批量下载,比如你想一次性收藏一个作者所有短剧,轻松搞定。不过选下载软件时要小心,最好选正规平台,免得手机中毒或者个人信息泄露。
要是在手机上实在不好操作,也可以用电脑下载。先复制短剧链接,在电脑浏览器访问支持抖音视频下载的网站,或者用像4k Video Downloader这样的软件,把链接粘贴进去,一键下载。这样下载的视频质量通常很好,保存也方便。对上班族来说,工作间隙下载喜欢的短剧,晚上回家慢慢看,超级舒服。
还有一种特别实用的办法,就是屏幕录制。虽然不是下载,但操作简单又实用。只需打开手机的录屏功能,然后播放你想保存的短剧,录完还能编辑一下,上传朋友圈也很方便。虽然录制视频可能有些瑕疵,但在没有下载权限时,这招真心好用。
最后提醒一下,如果想下载大陆地区抖音短剧,要注意有些内容只能在国内版APP看到。安卓用户可以下载大陸抖音的APK安装包,iPhone用户则需要切换App Store的地区到中国大陆,然后再下载抖音。这样才能畅快追剧,不用担心找不到资源。下载的同时,也别忘了尊重版权,合法使用视频资源哦!
牛瓜是什么瓜?
牛角瓜是菜瓜的一种,以蒂部粗大柄部稍细状如牛角得名,也有因其粗壮如牛腿叫它牛腿瓜。 崇明方言中,没有甜瓜或香瓜的说法,一律叫作菜瓜。 现存最早的明朝正德《崇明县志·物产》中,就载有它的大名。Feb 12, 2021
拉瓜迪机场有几个航站楼?
拉瓜迪亚机场以其高效的服务和前往纽约市各区的便捷交通而闻名。 该机场共有四个航站楼(A、B、C 和D),每个航站楼都提供一系列便利设施,如餐饮选择、购物商店和休息室。 B 航站楼是最大的航站楼,最近进行了大规模翻修,为乘客提供了现代化的设施和更舒适的体验。
吃瓜是怎么来的?
该词源于2016年网络热词“不明真相的吃瓜群众”(或简写为“吃瓜群众”),更早则来自百度贴吧中“前排出售瓜子”、“吃瓜子看戏”等用语,而“不明真相”是网民用来反讽中国官方话语中常见的“少数别有用心”、“不明真相的群众”等固定短语。
「大瓜」の読み方は?
大瓜(オウリ)はどこ?