人工智能导论(微课视频版)课件 第9章9.3-9.4-智能博弈_第1页
人工智能导论(微课视频版)课件 第9章9.3-9.4-智能博弈_第2页
人工智能导论(微课视频版)课件 第9章9.3-9.4-智能博弈_第3页
人工智能导论(微课视频版)课件 第9章9.3-9.4-智能博弈_第4页
人工智能导论(微课视频版)课件 第9章9.3-9.4-智能博弈_第5页
已阅读5页,还剩12页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

第九章智能博弈9.智能博弈2026年8月19日9.1博弈论基础9.2博弈问题的复杂度9.3智能博弈策略求解技术9.4智能博弈应用及经典案例9.3智能博弈策略求解技术

2026年8月19日经典的博弈论难以解决高复杂度的博弈问题,随着人工智能的快速发展,智能博弈应运而生。智能博弈(IntelligentGame),又称计算机博弈、机器博弈,是指利用人工智能领域的搜索和学习技术替代传统数值优化计算,来实现高复杂度博弈问题的快速求解。智能博弈的热潮由棋类游戏掀起,逐步扩展到竞技类游戏以及各类兵棋推演等应用中。著名围棋智能体AlphaGo/AlphaZero,核心思想就是采用深度学习网络与蒙特卡洛树搜索的结合。9.3智能博弈策略求解技术

2026年8月19日蒙特卡洛树搜索(Monte-CarloTreeSearch)算法流程分成四步:选择(Selection),扩展(Expansion),模拟(Simulation)和反向传播(Backpropagation)。AlphaZero去掉了“模拟”环节,用深度网络进行动作概率和状态值(奖励)估计。9.3智能博弈策略求解技术

2026年8月19日

O方X方O方127468539

9.3智能博弈策略求解技术

2026年8月19日蒙特卡洛树搜索(Monte-CarloTreeSearch)1.扩展根节点并进行评估(第一次树搜索)

N=0W=0Q=0P=0.4N=0W=0Q=0P=0.1N=0W=0Q=0P=0.05N=0W=0Q=0P=0.1N=0W=0Q=0P=0.15N=0W=0Q=0P=0.2N=0A=2A=7A=6A=3A=8A=9网络

9.3智能博弈策略求解技术

2026年8月19日蒙特卡洛树搜索(Monte-CarloTreeSearch)2.反向传播(第一次树搜索)N=0W=0Q=0P=0.4N=0W=0Q=0P=0.1N=0W=0Q=0P=0.05N=0W=0Q=0P=0.1N=0W=0Q=0P=0.15N=0W=0Q=0P=0.2N=1

A=2A=7A=6A=3A=8A=9由于当前节点是根节点,不需要反向传播W(节点的奖励值之和)

和Q(节点的平均奖励值),只需更新访问次数NN=0

其中,鼓励利用奖励值较高的动作鼓励探索访问次数少的动作权重平衡利用和探索的权重9.3智能博弈策略求解技术

2026年8月19日蒙特卡洛树搜索(Monte-CarloTreeSearch)3.选择(第二次树搜索):根据动作选择公式选择动作N=0W=0Q=0P=0.4N=0W=0Q=0P=0.1N=0W=0Q=0P=0.05N=0W=0Q=0P=0.1N=0W=0Q=0P=0.15N=0W=0Q=0P=0.2N=1

A=2A=7A=6A=3A=8A=9

9.3智能博弈策略求解技术

2026年8月19日蒙特卡洛树搜索(Monte-CarloTreeSearch)4.扩展节点并进行评估(第二次树搜索)N=0W=0Q=0P=0.2N=0W=0Q=0P=0.15N=0W=0Q=0P=0.1N=0W=0Q=0P=0.25N=0W=0Q=0P=0.3N=0W=0Q=0P=0.4N=0W=0Q=0P=0.1N=0W=0Q=0P=0.05N=0W=0Q=0P=0.1N=0W=0Q=0P=0.15N=0W=0Q=0P=0.2N=1

A=7A=6A=3A=8A=9A=3A=6A=7A=8A=9网络

9.3智能博弈策略求解技术

2026年8月19日蒙特卡洛树搜索(Monte-CarloTreeSearch)5.反向传播(第二次树搜索)

网络N=0W=0Q=0P=0.2N=0W=0Q=0P=0.15N=0W=0Q=0P=0.1N=0W=0Q=0P=0.25N=0W=0Q=0P=0.3N=1W=0.1Q=0.1P=0.4N=0W=0Q=0P=0.1N=0W=0Q=0P=0.05N=0W=0Q=0P=0.1N=0W=0Q=0P=0.15N=0W=0Q=0P=0.2N=2

A=7A=6A=3A=8A=9A=3A=6A=7A=8A=9

9.3智能博弈策略求解技术

2026年8月19日

X方失败

reward=-1N=0W=0Q=0P=0.2N=0W=0Q=0P=0.15N=0W=0Q=0P=0.1N=0W=0Q=0P=0.25N=0W=0Q=0P=0.3N=1W=0.1Q=0.1P=0.4N=0W=0Q=0P=0.1N=0W=0Q=0P=0.05N=0W=0Q=0P=0.1N=0W=0Q=0P=0.15N=0W=0Q=0P=0.2N=2

A=7A=6A=3A=8A=9A=3A=6A=7A=8A=99.3智能博弈策略求解技术

2026年8月19日蒙特卡洛树搜索(Monte-CarloTreeSearch)7.反向传播(第三次树搜索)O方玩家选择动作9,赢得了游戏N=0W=0Q=0P=0.2N=0W=0Q=0P=0.15N=1W=1Q=1P=0.3N=0W=0Q=0P=0.1N=0W=0Q=0P=0.25N=1+1=2W=0.1-1=-0.9Q=-0.9/2=-0.45P=0.4N=0W=0Q=0P=0.1N=0W=0Q=0P=0.05N=0W=0Q=0P=0.1N=0W=0Q=0P=0.15N=0W=0Q=0P=0.2N=2N=3

A=7A=6A=3A=8A=9A=3A=6A=7A=8A=9N=1W=0.1Q=0.1P=0.4

9.3智能博弈策略求解技术

2026年8月19日

N=40W=-35Q=-0.875P=0.4N=10W=-9Q=-0.9P=0.1N=5W=-5Q=-1P=0.05N=10W=-8Q=-0.8P=0.1N=15W=-10Q=-0.6P=0.15N=320W=10Q=0.03P=0.2N=400………………

A=2A=7A=6A=3A=8A=9

9.3智能博弈策略求解技术

2026年8月19日蒙特卡洛树搜索(Monte-CarloTreeSearch)应用于五子棋的AlphaZero算法结果演示/initial-h/AlphaZero_Gomoku_MPI9.智能博弈2026年8月19日9.1博弈论基础9.2博弈问题的复杂度9.3智能博弈策略求解技术9.4智能博弈应用及经典案例9.4智能博弈应用及经典案例

2026年8月19日随着计算能力的大幅提升以及人工智能算法的逐渐成熟,自20世纪90年代起,涌现了众多智能博弈领域的突出成果。在棋牌类博弈方面1997年IBM公司的“深蓝(DeepBlue)”击败国际象棋大师卡斯帕罗夫;2016年,DeepMind团队推出了AlphaGo,击败了围棋世界冠军李世石;2017年卡耐基梅隆大学发布了Libratus,在两人无限制德州扑克中击败了职业选手。DeepBlue比赛现场AlphaGoLibratus子博弈问题解决思路9.4智能博弈应用及经典案例

2026年8月19日随着计算能力的大幅提升以及人工智能算法的逐渐成熟,自20世纪90年代起

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论