归档: 2022/12

DQN

DQNGoogle Deep mind 团队就是靠着这 DQN 使计算机玩电动玩得比我们还厉害 融合了神经网络和 Q learning 的方法, 名字叫做 Deep Q Network. 我们可以将状态和动作当成神经网络的输入, 然后经过神经网络分析后得到动作的 Q 值, 这样我们就没必要在表格中记录 Q 值, 而是直接使用神经网络生成 Q 值. DQN 两大利器 DQN 有一个记忆库用于

单步更新 and 回合更新

单步更新 and 回合更新单步更新虽然我们每一步都在更新, 但是在没有获取宝藏的时候, 我们现在站着的这一步也没有得到任何更新, 也就是直到获取宝藏时, 我们才为获取到宝藏的上一步更新为: 这一步很好, 和获取宝藏是有关联的, 而之前为了获取宝藏所走的所有步都被认为和获取宝藏没关系. 回合更新虽然我要等到这回合结束, 才开始对本回合所经历的所有步都添加更新, 但是这所有的步都是和宝藏有关系的,

Q Leaning 和 Sarsa

Q Leaning 和 Sarsa在强化学习中 Sarsa 和 Q learning 及其类似,Sarsa 是说到做到型, 所以我们也叫他 on-policy, 在线学习, 学着自己在做的事情. 而 Q learning 是说到但并不一定做到, 所以它也叫作 Off-policy, 离线学习. 而因为有了 maxQ, Q-learning 也是一个特别勇敢的算法.因为 Q learning 机

一条命令去除 Creator 图片黑边

一条命令去除 Creator 图片黑边https://forum.cocos.org/t/topic/112300 黑边现象是边缘像素与黑色进行插值导致,如果边缘像素和自己相近颜色插值,黑边就会自然消失 基于这个思路将最靠近图片边缘的透明像素的alpha改为3,并且将其RGB值设为邻近非透明像素RGB的插值,简称扩边。 如何安装 工具使用python3编写,需读者自行安装python3环境

Win10 利用 pycharm 运行 gym 框架

Win10 利用 pycharm 运行 gym 框架在windows下运行,要借助anaconda建一个环境,在新建的环境里面配置好gym,之后在pycharm中新建一个项目,在项目中添加运行这个新建的环境,就可以在windows上运行gym了 安装anaconda 下载最新版 https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/

域名转移至其他阿里云账号

域名转移至其他阿里云账号 前提条件 123456789域名必须在有效期内。进行线上转移前,您需查看域名是否在有效期内,详情请参见WHOIS查询。如果域名已过期,需先为域名续费,请参见域名续费。“.cn”域名的注册时间需大于7天,“.com”和“.net”域名的注册时间需大于1天,实际以控制台界面显示的具体提示原因为准。域名不能处于过户中状态。如果您操作了域名过户,需等过户成功后再进行账号间转移

ICP备案信息转移至其他阿里云账号

ICP备案信息转移至其他阿里云账号 注意事项 12345678910转移成功后,新账号的所有人将享有ICP备案信息的管理权限(包括但不限于备案信息修改、注销备案等),请您谨慎操作。ICP备案信息转移过程中,不会影响您备案主体下已备案网站的正常访问。将ICP备案信息转入其他阿里云账号时,待转入的账号需满足以下条件,否则无法成功操作备案转移。账号下无进行中的ICP备案订单。账号下没有其他主体的IC

跨账号过户迁移阿里云ECS实例

跨账号过户迁移阿里云ECS实例 约束限制: 123456789VPC类型的ECS实例的弹性公网IP不支持过户,固定公网IP支持过户。过户操作只涉及变更所属用户名信息。过户一般需要半小时左右。包年包月的ECS实例过户后,服务器时长和到期时间与原来保持一致。部分营销活动或优惠活动购买的ECS实例不支持过户,详情以活动页面为准。 本人迁移遇到的问题: 12密钥对登录的云服,需要解除密钥对绑定,换成

Anaconda安装及配置

Anaconda安装及配置 下载 https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/ 安装 配置环境 主要有三个环境的配置: ①anaconda安装路径(为了Python检查正常): 前面安装时路径一定要记清楚,之前已提醒复制,我的是F:\anaconda ②安装路径\Scripts(为了conda检查正常): 只需在上述路径中

域名备案加急

域名备案加急https://www.ksbaw.vip 比较物美价廉 4-5天 1.8k 可以淘宝购买,开对公发票,无合同