在之前学习的RDD和DataFrame数据集主要处理的是离线数据，随着时代发展进步，我们会发现越来越多数据是在源源不断发回到数据中心，同时需要立刻响应给用户，这样的情况我们就会用到实时处理，常用的场景有实时显示某商场一小时人流密度、实时显示当天火车站人口总数等等。接下来从实时数据源说起，实时数据源主要有：FileSourceSocketSourceFlumeSourceKafkaSourceFileSource指的是文件作为数据来源，常用的有本地文件fil
系统 2019-09-27 17:52:32 2118
一.if语句1.if语句作用:让程序根据条件选择性地执行某条语句或某些语句说明:if语句又叫条件语句,也叫分支语句语法:if真值表达式1:语句块1elif真值表达式2:语句块2...else:语句块4语法说明:elif子句可以有0个,1个或多个else子句可以有0个或1个且只能放在此if语句的最后要求:if语句内部的语句通常要以4个空格的缩进来表示包含关系,相同的缩进格式代表相同的所属级别示例:#输入一个数字，判断这个数是0,还是正数，还是负数n=int(
系统 2019-09-27 17:51:22 2118
打开excel文件读取数据data=xlrd.open_workbook("excelFile.xls")读取工作表table=data.sheets()[0]#通过索引顺序获取table=data.sheet_by_index(0)#通过索引顺序获取table=data.sheet_by_name(u'Sheet1')#通过名称获取获取整行和整列的值（数组）table.row_values(i)#获取整行值table.col_values(i)#获取整列
系统 2019-09-27 17:51:17 2118
在接收raw_input方法后，判断接收到的字符串是否为数字例如：str=raw_input("pleaseinputthenumber:")ifstr.isdigit():为True表示输入的所有字符都是数字，否则，不是全部为数字str为字符串str.isalnum()所有字符都是数字或者字母str.isalpha()所有字符都是字母str.isdigit()所有字符都是数字str.islower()所有字符都是小写str.isupper()所有字符都是
系统 2019-09-27 17:51:10 2118
1.今日内容1.1函数的参数*的魔性用法函数形参最终顺序1.2名称空间全局名称空间，局部名称空间，内置名称空间取值顺序与加载顺序作用域内置函数：globals()locals()1.3高阶函数（函数的嵌套）1.4关键字：globalnonlocal2.内容详细2.1函数的参数昨天我们从形参角度，讲了两种参数，一个是位置参数，位置参数主要是实参与形参从左至右一一对应，一个是默认值参数，默认值参数，如果实参不传参，则形参使用默认参数。那么无论是位置参数，还是默
系统 2019-09-27 17:50:44 2118
mongodb是基于分布式文件存储的nosql(非关系型)数据库虽说是nosqldb,butmongodb其中的文档可以是关系型的在mongodb中,表为集合,里面的数据为文档;文档本质就是一条调JSON数据进入mongodb:mongo退出mongodb:exit库操作显示库:showdbs选择或者创建:usellsdb#不管该库是否存在,都会use进入,如何该库不存在,use进去不存入数据退出时,该库不会被创建.所以创建库就use再写入数据.查看所在库
系统 2019-09-27 17:50:39 2118
文章目录摘要环境注意-Python>=3.7会导致编译失败编译方法摘要本文记述如何在windows10上编译mod_wsgi(Python3.5+Apache-2.4.39)环境win10Apache-2.4.39-https://www.apachelounge.com/download/Python-3.5VisualStudio2019(含c++开发组件)mod_wsgi-https://github.com/GrahamDumpleton/mod_
系统 2019-09-27 17:50:32 2118
dict的特性dict是python中的一个可变的数据类型，用{}表示，dict的key必须是不可变的数据类型，而value的数据类型可以任意。格式：{key:value,key:value,key:value}注：键值对如果是字符串使用单引号，最后一个键值对没有逗号dict的优点①：查询速度快，可以二分查找②：key是不可以重复的注：不可变数据类型：元组，bool，int,str可以hashset可变数据类型：dict，listdict的方法1，增加的方
系统 2019-09-27 17:50:26 2118
使用python脚本备份zk中的配置python备份代码python3back.pyimportosimportos.pathfromkazoo.clientimportKazooClientfromkazoo.clientimportKazooStatezk=KazooClient('test:2181')zk.start()zkBashPath="/conf/base/"backUp_path="/tmp/test/"cs=zk.get_childre
系统 2019-09-27 17:50:23 2118
python环境搭建常用的python环境管理工具：pyenv&&virtualenvpyenv#安装到~/.pyenv当中,如果使用了zsh，那么将.bashrc-->.zshrcgitclonehttps://github.com/pyenv/pyenv.git~/.pyenvecho'exportPYENV_ROOT="$HOME/.pyenv"'>>~/.bashrcecho'exportPATH="$PYENV_ROOT/bin:$PATH"'>
系统 2019-09-27 17:49:57 2118
