文章目录Q-learning原理python例子本文是作者在学习莫烦的强化学习课程中的笔记，强烈推荐莫烦强化学习。Q-learning原理我们以一个走迷宫的小游戏为例：让探索者学会走迷宫.黄色的是天堂(reward1),黑色的地狱(reward-1).大多数RL是由reward导向的,所以定义reward是RL中比较重要的一点.Q-learning原理实际上就是建立一个Q表（最本文最后有展示），里面包含所有状态下、不同动作的Q值（最终根据Q值走出迷宫），Q
系统 2019-09-27 17:48:15 2817
在实际应用中经常需要把Excel表格数据导入到数据库，为此需求本人写了一个读取Excel数据的java类，现将代码贴出来与大家一起分享。该类提供两个方法，一个方法用于读取Excel表格的表头，另一个方法用于读取Excel表格的内容。（注：本类需要POI组件的支持，POI是apache组织下的一个开源组件，）代码如下：Java代码packageorg.hnylj.poi.util;importjava.io.FileInputStream;importjav
系统 2019-08-29 23:33:39 2817
Velocity是什么Velocity是一个基于java的模板引擎，类似与Freemarker。为啥要用模板引擎模板引擎的速度要比jsp快，因为JSP需要编译成servlet。将数据（Date）和模板(View)分离，让不同的角色只关注自己的部分。Velocity和Freemarker的比较功能上：FreeMarker的功能比Velocity多，是Velocity的超集。使用上：Velocity更加简单和轻量级。VelocityTemplateLangua
系统 2019-08-29 22:52:26 2817
用JAVASCRIPT+CSS实现换肤ex002.html
系统 2019-08-29 22:20:02 2817
CssSelector是我最喜欢的元素定位方法，Selenium官网的Document里极力推荐使用CSSlocator，而不是XPath来定位元素，原因是CSSlocator比XPathlocator速度快，特别是在IE下面（IE没有自己的XPath解析器(Parser)）他比xpath更高效更准确更易编写，美中不足是根据页面文字时略有缺陷没有xpath直接。因为前端开发人员就是用CSSSelector设置页面上每一个元素的样式，无论那个元素的位置有多复
系统 2019-08-12 09:27:31 2817
OpenCASCADEPCurveofTopologicalFaceeryar@163.comAbstract.OpenCASCADEprovidesaclassBRepBuilderAPI_MakeFacetobuildtopologicalfaces.Afacemaybebuiltfromasurface,elementarysurfacefromgppackage,surfacefromGeom,fromawireandfindthesurfacea
系统 2019-08-12 01:33:03 2817
Python操作RabbitMQ基础：一、简介：1.介绍：RabbitMQ是一个消息代理：它接收和转发消息。可以把它比作为邮局，当您要发布邮件放在邮箱中时，可以确定这封邮件让哪位快递员来进行发送到您的收件人手中。2.术语：1.发送消息的程序是生产者：2.队列可以理解为邮箱，用来存储一些邮件。队列的由主机的存储器和磁盘限制约束，它本质上是一个大的消息缓冲器。很多生产者可以发送到一个队列的消息，并且许多消费者可以尝试从一个队列接收数据：3.消费者可以理解为接收
系统 2019-09-27 17:57:23 2816
需求:一台机器上有多个网卡,如何访问指定的URL时使用指定的网卡发送数据呢?$curl--interfaceeth0www.baidu.com#curlinterface可以指定网卡阅读urllib.py的源码,追述到open_http�C>httplib.HTTP�C>httplib.HTTP._connection_class=HTTPConnectionHTTPConnection在创建的时候会指定一个source_address.HTTPConne
系统 2019-09-27 17:51:30 2816
古有滕王阁“落霞与孤鹜齐飞，秋水共长天一色”，现有WindowsLive隐私与分享并重，为您提供安全而又多彩的社交体验。随着社交化网络的普及，人们愈加普遍地利用网络平台分享着喜怒哀乐，渲染着生活的七彩霞光。在社交化网络开放、共享的主题之下，如何保护隐私成为重中之重，也是微软开发团队为保证用户安全的精心考量。如果您的个人信息遭到公开，垃圾邮件、骚扰电话不约而至尚是小事，不法分子可能通过这些信息获取您的账户、密码等，而后盗用您的钱财甚至借助您的身份肆意妄为，可
系统 2019-08-12 09:30:00 2816
近期做东西，用到了对SQLServer数据库的操作。好吧，确实好久没看了，对这个数据库陌生到了极点，连最简单的如何设置一个id主键，让它随着插入数据的增多，自动增长id值的设置都忘记了，网上查了一下，好多人都说使用代码，好像跟我要的不一样，然后在百度知道找到了答案，虽然有点不好意思，但还是贴出来吧：问：如何手动设置SQLServer的id（主键），让它随着插入的数据自动增长？答：点击需要设置的表，点击右键——设计——在列中，点击id——下方出现如下的图：自
系统 2019-08-12 01:54:50 2816
