-
俄罗斯方块强化学习实验报告
一、俄罗斯方块DQN算法实验报告1. 网络结构图1 DQN网络结构2. 超参数 GAMMA = 0.99 # decay rate of past observations 设置增强学习更新公式中的累计折扣因子 OBSERVE = 500. # timesteps to observe before training 设置观察期的迭代次数 EXPLORE = 500. # frames over which to anneal epsilon 设置探索期的观察次数 FINAL_EPSILON = 0.002 # final value of epsilon 设置ε的最终最小值 INITIAL_EPSILON = 10.0 # starting value of epsilon 设置ε的初始值 REPLAY_MEMORY = 5900 # number of previous transitions to remember 设置replay memory的容量 BATCH = 32 # size of mini batch 设置每次网络参数更新世用的样本数目 K = 1 # only select an action every Kth frame, repeat prev for others,设置几帧图像进行一次动作, # K越大让控制台输出的速度变慢,游戏画面速度变快,机器人动作的速度变越迟缓。ACTIONS = 6 # number of valid actions 游戏动作数3.实验结果训练前期的self.score分数很低150左右,EPSILON=1.0,Q_MAX= 2.061341e-02:图2 EPSILON=1.0设置超参数EPSILON=0.05在1000步迭代之后:EPSILON固定在0.04999999999999416 Q_MAX = -1.163765e-01Self.score有明显的提升,但是之后无论训练多久都没有明显提升了。图3 EPSILON=0.05设置超参数EPSILON= 0.002在1001步迭代之后:EPSILON固定在0.000004 Q_MAX = 1.728995e 02Self.score可以轻松达到200以上。图4 EPSILON=0.000004设置超参数EPSILON= 0.000001在1001步迭代之后:EPSILON固定在-0.001998997999987482 Q_MAX = 1.899879e 03Self.score可以轻松达到200以上。图5 EPSILON=-0.002 【核心代码】用DQN来玩俄罗斯方块 tetrix_DQN ├── Wrapped Game Code│ └── tetris_fun.py├── deep_q_network.py├── logs_tetris│ ├── hidden.txt│ └── readout.txt└── saved_networks ├── tetris-dqn-10000.data-00000-of-00001 ├── tetris-dqn-10000.index ├── tetris-dqn-10000.meta └── tetris-dqn-316600003 directories, 8 files
- 2020-12-01下载
- 积分:1
-
图片分类,图像识别,目标检测
图片分类,图像识别,目标检测的resnet50,python实现。
- 2021-05-06下载
- 积分:1
-
猜拳游戏(石头剪刀布.py)
# 石头 0 剪刀 1 布 2 import randombot = random.randint(0, 2)player = int(input("输入您的结果")) if (player == 1) and (bot == 2) or (player == 2) and (bot == 0) or (player == 0) and (bot == 1): print("玩家获胜") elif player == bot: print("你们打成平手") else: print("电脑获胜")
- 2020-11-30下载
- 积分:1
-
《可爱的python》习题答案.doc
新手入门,附有答案代码截图
- 2020-03-26下载
- 积分:1
-
基于K210开发的人脸特征识别2020电赛(demo_face_recognition(2).py)
基于K210开发的人脸特征识别2020电赛(demo_face_recognition(2).py)
- 2020-11-28下载
- 积分:1
-
联邦学习框架代码
联邦学习的基本框架
- 2021-05-07下载
- 积分:1
-
python动力学轨迹模拟
【实例简介】假设无人机在 50m 高度的空中飞行时,投放一个救援物质,当前飞机的前进速度为 10
m/s, 救援物质质量为 0.1kg, 重力加速度 9.8m/s2, 空气阻力与速度方向相反,空
气阻力大小为 k *v, k = 0.1,请使用软件模拟物质掉落的轨迹(建议使用 Python 实现
轨迹图,C 语言使用 print 输出迭代过程中的坐标)
- 2021-08-27 00:31:03下载
- 积分:1
-
廖雪峰 2018官方Python3教程(二)
【实例简介】
- 2021-09-10 00:31:11下载
- 积分:1
-
阿拉伯数字转罗马数字
【实例简介】数据转换与基本语法实例
- 2021-08-06 00:31:03下载
- 积分:1
-
轴承故障诊断python代码
轴承故障诊断python代码
- 2020-12-10下载
- 积分:1