文章目录Q-learning原理python例子本文是作者在学习莫烦的强化学习课程中的笔记，强烈推荐莫烦强化学习。Q-learning原理我们以一个走迷宫的小游戏为例：让探索者学会走迷宫.黄色的是天堂(reward1),黑色的地狱(reward-1).大多数RL是由reward导向的,所以定义reward是RL中比较重要的一点.Q-learning原理实际上就是建立一个Q表（最本文最后有展示），里面包含所有状态下、不同动作的Q值（最终根据Q值走出迷宫），Q
系统 2019-09-27 17:48:15 2892
02年毕业，找了一份工作，天南地北的跑，后来不想荒废所学就准备转行，后来到一家公司实习，“网页美工”，其实小公司为了生存，灵活性很强，机动性也快。当时问我会不会做logo，我也装胖子，就应下了，就做了这个LOGO,一个月后我找到正式的工作，在向他们道别的时候，当我说我要去“ＸＸ公司”（这个公司在当地很牛Ｘ的，然而我倒没觉得什么大之处），他们都显示惊恐无比，张着大嘴不相信我所说的。我也很高兴交他们这帮朋友（他们是大学刚毕后就创业的，我也很佩服他们那两个主管）
系统 2019-08-29 23:51:38 2892
在实际应用中经常需要把Excel表格数据导入到数据库，为此需求本人写了一个读取Excel数据的java类，现将代码贴出来与大家一起分享。该类提供两个方法，一个方法用于读取Excel表格的表头，另一个方法用于读取Excel表格的内容。（注：本类需要POI组件的支持，POI是apache组织下的一个开源组件，）代码如下：Java代码packageorg.hnylj.poi.util;importjava.io.FileInputStream;importjav
系统 2019-08-29 23:33:39 2892
Java线程：线程栈模型与线程的变量SCJP5学习笔记要理解线程调度的原理，以及线程执行过程，必须理解线程栈模型。线程栈是指某时刻时内存中线程调度的栈信息，当前调用的方法总是位于栈顶。线程栈的内容是随着程序的运行动态变化的，因此研究线程栈必须选择一个运行的时刻（实际上指代码运行到什么地方)。下面通过一个示例性的代码说明线程（调用）栈的变化过程。这幅图描述在代码执行到两个不同时刻1、2时候，虚拟机线程调用栈示意图。当程序执行到t.start();时候，程序多
系统 2019-08-12 09:30:00 2892
原来编号是分段的,1-1000表示一个类别,1000-2000表示一个类别.现在编号自动生成不要类别,要找原来数据中最小的数据编号.本想是用个2分递归来查,但效率太慢了.想到了个方法用行号.selectid,row_number()over(orderbyid)asrownumfromitems上面可以查询出id与行号对应的表,再查看rownum与id不同就是空的id号了.完整为:selecttop1rownumfrom(selectid,row_numb
系统 2019-08-12 01:53:43 2892
媒体查询最大的敌人是安卓集团中众多的奇葩分辨率简直要人命。分辨率多了以后会让你的工作复杂度多了N个维度。它的基本语法：@mediascreenand(max-width:800px){}当最大宽度是800px的时候{}里面的代码会生效当然@media可以查询的媒介不止screen一种。这里列出了可查询媒介类型http://www.w3.org/TR/CSS2/media.html#media-typesmax-width这样的查询术语也有很多
系统 2019-08-12 01:51:35 2892
第四讲：sql执行计划顺序sql执行计划顺序原则：先子后父，右上为先。1.执行顺序：43212.执行顺序：325413.执行顺序：32541注意：虽然2，3执行顺序是一样，但逻辑读是有区别的。Oracle基础：sql执行计划分析(4)
系统 2019-08-12 01:33:47 2892
Web开发实用浏览器(工具)插件1、PowerBandPowerBand是一个IE的插件(同时也支持MyIE2/Maxthon)。提供了对HTML动态分析，跟踪，编辑的功能。能够方便快捷的分析HTML页面的结构，有助于网页设计人员/网站开发人员调试，分析晦涩的HTML代码。这是我最早使用的HTML开发辅助工具，现在是2.1版了，支持ASP.NETViewState的解码，支持DebugView，类似于VC中的Watch，通过这个功能能够显示页面中元素对象的
系统 2019-08-29 23:39:25 2891
这是我最早听说的趣味逻辑题之一，是很小的时候父亲告诉我的：“有3顶黑帽子，2顶白帽子。让三个人从前到后站成一排，给他们每个人头上戴一顶帽子。每个人都看不见自己戴的帽子的颜色，却只能看见站在前面那些人的帽子颜色。（所以最后一个人可以看见前面两个人头上帽子的颜色，中间那个人看得见前面那个人的帽子颜色但看不见在他后面那个人的帽子颜色，而最前面那个人谁的帽子都看不见。现在从最后那个人开始，问他是不是知道自己戴的帽子颜色，如果他回答说不知道，就继续问他前面那个人。事
系统 2019-08-29 23:14:03 2891
在开发过程为了便于测试，经常需要准备些视频，于是找到了这一款轻便的转换软件,EasyHTML5Video。它可以很方便视频转转换为HTML5的三种格式和Flash格式，并可以为你生成一个简单的页面。Windows和Mac都有相应的版本。当然，转出来的视频有水印。但做测试已经够了。官网地址:LINK推荐一个HTML5视频转换工具
系统 2019-08-29 22:34:12 2891
