Spark编程环境Spark可以独立安装使用，也可以和Hadoop一起安装使用。在安装Spark之前，首先确保你的电脑上已经安装了Java8或者更高的版本。Spark安装访问Spark下载页面，并选择最新版本的Spark直接下载，当前的最新版本是2.4.2。下载好之后需要解压缩到安装文件夹中，看自己的喜好，我们是安装到了/opt目录下。tar-xzfspark-2.4.2-bin-hadoop2.7.tgzmvspark-2.4.2-bin-hadoop2
系统 2019-09-27 17:52:49 1819
#!/usr/bin/envpython#coding=utf-8#------------------------------------------------------#Name:Apache日志分析脚本#Purpose:此脚本只用来分析Apache的访问日志#Version:2.0#Author:LEO#Created:2013-4-26#Modified:2013-5-4#Copyright:(c)LEO2013#---------------
系统 2019-09-27 17:52:04 1819
通过纯Python完成股票回测框架的搭建。什么是回测框架?无论是传统股票交易还是量化交易，无法避免的一个问题是我们需要检验自己的交易策略是否可行，而最简单的方式就是利用历史数据检验交易策略，而回测框架就是提供这样的一个平台让交易策略在历史数据中不断交易，最终生成最终结果，通过查看结果的策略收益，年化收益，最大回测等用以评估交易策略的可行性。代码地址在最后。本项目并不是一个已完善的项目,还在不断的完善。回测框架回测框架应该至少包含两个部分,回测类,交易类.回
系统 2019-09-27 17:51:37 1819
es实现聚合es通过agg实现聚合，详情可见es文档有时候查询es数据的时候可能需要实现多字段groupby的功能，例如：SELECTsum(item_count)fromAgroupbyfield1,field2,field3要实现多个维度的聚合，需要嵌套的agg查询语句:{"query":{},"aggs":{"field1":{"terms":{"field":"field1","size":2147483647#设置一个大的分桶数，防止一次统计不完
系统 2019-09-27 17:51:32 1819
EventHandler在HDA中，要创建Python脚本，需要先选择一个事件处理器(EventHandle),他表示你要在什么时候执行你现在所创建的脚本命令OnCreated(在节点创建时，执行脚本)如选择此项编辑Python脚本，Python将会在节点创建时执行Python中的命令PythonModel(Python模式)这一项会使创建的脚本在使用过程中根据用户设置执行可以使用这一项给节点设置参数提示等功能OnDelete(在节点创建时执行脚本)Pyt
系统 2019-09-27 17:51:26 1819
一、pythongui（图形化）模块介绍：Tkinter:是python最简单的图形化模块，总共只有14种组建Pyqt:是python最复杂也是使用最广泛的图形化Wx:是python当中居中的一个图形化，学习结构很清晰Pywin:是pythonwindows下的模块，摄像头控制(opencv)，常用于外挂制作二、wx模块的安装：C:\Users\Administrator>pipinstallwxpython三、图形化介绍……四、wx主要组件介绍1、fra
系统 2019-09-27 17:48:42 1819
原来在robotframework中使用presskey方法进行键盘的操作，但是该方法需要写被操作对象的locator，不是很方便，现在找到了一种win32api库写键盘操作的一个方法（注意：此方法被操作界面必须在顶层），首先，需要安装win32api的python库，使用命令：pipinstallpywin32具体实现代码如下：importwin32apiimportwin32conclassMyLibrary(object):defkeybd_even
系统 2019-09-27 17:48:23 1819
python调用短信猫控件实现发短信功能实例代码如下所示：#!/usr/bin/envpython#coding=gbkimportsysimportwin32com.clientocxname='ShouYan_SmsGate61.Smsgate'axocx=win32com.client.Dispatch(ocxname)axocx.CommPort=8#设置COM端口号axocx.SmsService='+8613800100500'#设置短信服务号
系统 2019-09-27 17:47:54 1819
博主之前写过各种排序方法的详细分析，于是在这个地方直接放上示例代码示例代码如下：#encoding:utf-8defquick_sort(lists,left,right):#快速排序ifleft>=right:returnlistskey=lists[left]low=lefthigh=rightwhileleft
系统 2019-09-27 17:47:30 1819
PyHook是一个基于Python的“钩子”库，主要用于监听当前电脑上鼠标和键盘的事件。这个库依赖于另一个Python库PyWin32，如同名字所显示的，PyWin32只能运行在Windows平台，所以PyHook也只能运行在Windows平台。关于PyHook的使用，在它的官方主页上就有一个简单的教程，大体上来说，可以这样使用#-*-coding:utf-8-*-#3importpythoncom4importpyHook5defonMouseEvent
系统 2019-09-27 17:47:22 1819
