文章目录Q-learning原理python例子本文是作者在学习莫烦的强化学习课程中的笔记，强烈推荐莫烦强化学习。Q-learning原理我们以一个走迷宫的小游戏为例：让探索者学会走迷宫.黄色的是天堂(reward1),黑色的地狱(reward-1).大多数RL是由reward导向的,所以定义reward是RL中比较重要的一点.Q-learning原理实际上就是建立一个Q表（最本文最后有展示），里面包含所有状态下、不同动作的Q值（最终根据Q值走出迷宫），Q
系统 2019-09-27 17:48:15 2806
移动3G嵌入式硬件开发的基本过程：1、明确硬件总体需求情况，如CPU处理能力、存储容量及速度、I/O端口的分配、接口要求、电平要求、特殊电路要求等等。2、根据需求分析制定硬件总体方案，寻求关键器件及相关技术资料、技术途径和技术支持，充分考虑技术可行性、可靠性和成本控制，并对开发调试工具提出明确要求。关键器件可试着去索取样品。3、总体方案确定后，做硬件和软件的详细设计，包括绘制硬件原理图、软件功能框图、PCB设计、同时完成开发元器件清单。4、做好PCB板后，
系统 2019-08-29 23:33:24 2806
经常见到有人遗忘了系统的管理员密码来求助的，而网上针对此类的答案可谓五花八门，但经实践发现其中绝大多数都是没有用的，有些以讹传讹的方法（例如在winxp系统下删除sam文件等等）还会造成系统的彻底崩溃。相比之下，利用ERD2003强行修改系统管理员密码的方法简单、易于操作，且对2000/xp/2003系统均有效。下面就具体介绍一下这个软件的用法。1，当然是下载ERD2003，然后将其刻录成CD。2，用此CD启动电脑，是不是觉得启动界面很熟悉？进入启动界面—
系统 2019-08-29 22:07:10 2806
Java线程：线程栈模型与线程的变量SCJP5学习笔记要理解线程调度的原理，以及线程执行过程，必须理解线程栈模型。线程栈是指某时刻时内存中线程调度的栈信息，当前调用的方法总是位于栈顶。线程栈的内容是随着程序的运行动态变化的，因此研究线程栈必须选择一个运行的时刻（实际上指代码运行到什么地方)。下面通过一个示例性的代码说明线程（调用）栈的变化过程。这幅图描述在代码执行到两个不同时刻1、2时候，虚拟机线程调用栈示意图。当程序执行到t.start();时候，程序多
系统 2019-08-12 09:30:00 2806
第四讲：sql执行计划顺序sql执行计划顺序原则：先子后父，右上为先。1.执行顺序：43212.执行顺序：325413.执行顺序：32541注意：虽然2，3执行顺序是一样，但逻辑读是有区别的。Oracle基础：sql执行计划分析(4)
系统 2019-08-12 01:33:47 2806
Download:MicrosoftSQLServer2008ManagementStudioExpress-MicrosoftDownloadCenter-DownloadDetailsMicrosoft®SQLServer®2008ManagementStudioExpress快速链接概述系统要求说明其他信息需要支持吗？立即访问Microsoft支持网站>立即访问Microsoft支持网站>MicrosoftSQLServer2008Managemen
系统 2019-08-12 01:32:04 2806
郁闷的是Andriod的开发网站developer.android.com是无法访问。另，源代码网站为http://source.android.com，不知道为什么？需要访问http://developer.android.com.nyud.net/index.html，虽然慢点，但是至少可以访问，http://androidappdocs.appspot.com/这个站点比较快。在Android拥戴者的奇特世界观中有个很有趣的对比：Android：开源
系统 2019-08-29 23:32:07 2805
Velocity是什么Velocity是一个基于java的模板引擎，类似与Freemarker。为啥要用模板引擎模板引擎的速度要比jsp快，因为JSP需要编译成servlet。将数据（Date）和模板(View)分离，让不同的角色只关注自己的部分。Velocity和Freemarker的比较功能上：FreeMarker的功能比Velocity多，是Velocity的超集。使用上：Velocity更加简单和轻量级。VelocityTemplateLangua
系统 2019-08-29 22:52:26 2805
设置完环境变量的时候没有加$PATH:，这样的话，导致在其他文件设置的环境变量xxx/bin,xxx/sbin被覆盖掉了，登录系统的时候没有对应目录去对应你的登录帐号和密码，所以就只能重新登录，但是又登录不上。重启电脑，进入恢复模式，也可以按ctrl+alt+F1或者ctrl+alt+F2进入系统终端，重新修改之前设置的环境变量，我是在/etc/下的profile的文件夹设置的环境变量设置成这样再次重启就OK了。ubuntu设置环境变量PATH后登录不上
系统 2019-08-29 22:25:14 2805
pyechart官方安装教程：https://pyecharts.org/#/zh-cn/quickstart?id=%E5%A6%82%E4%BD%95%E5%AE%89%E8%A3%85详解：步骤一：安装pip目前如果你在python.org下载最新版本的安装包，则是已经自带了该工具。Python2.7.9+或Python3.4+以上版本都自带pip工具。pip官网：https://pypi.org/project/pip/1、你可以通过以下命令来判断
系统 2019-09-27 17:51:11 2804
