在之前学习的RDD和DataFrame数据集主要处理的是离线数据，随着时代发展进步，我们会发现越来越多数据是在源源不断发回到数据中心，同时需要立刻响应给用户，这样的情况我们就会用到实时处理，常用的场景有实时显示某商场一小时人流密度、实时显示当天火车站人口总数等等。接下来从实时数据源说起，实时数据源主要有：FileSourceSocketSourceFlumeSourceKafkaSourceFileSource指的是文件作为数据来源，常用的有本地文件fil
系统 2019-09-27 17:52:32 1942
前言学习一个库的最好的方式是了解这个库的源码和组成原理，有时候源码可能会略显生涩，这时候我们想通过查看文档来了解，所以我们可以通过输出库自带的描述文档来了解一个库。Numpy和Scipy模块numpy提供了数组对象，面向的任何使用者。scipy在numpy的基础上，面向科学家和工程师，提供了更为精准和广泛的函数。scipy几乎实现numpy的所有函数，一般而言，如果scipy和numpy都有这个函数的话，应该用scipy中的版本，因为scipy中的版本往往
系统 2019-09-27 17:52:27 1942
11.5jQuery引入方式：方式一：本地引入方式二：直接使用CDN文档就绪事件：DOM文档加载的步骤1.解析HTML结构。2.加载外部脚本和样式表文件。3.解析并执行脚本代码。4.DOM树构建完成。5.加载图片等外部文件。6.页面加载完毕11.51选择器id选择器：$("#i1")标签选择器：$("p")class选择器：$(".c1")所有元素选择器：$("*")交集选择器：$("div.c1")//找到类为c1的div标签并集选择器：$("#i1,
系统 2019-09-27 17:52:18 1942
基本常识python中的左位移和右位移利用Python在一个文件的头部插入数据withopen(path,"r+")asf:old=f.read()f.seek(0)f.write(data)f.write(old)Debugxpath中遇到[]AttributeError:‘dict’objecthasnoattribute‘iteritems’Python3.5中：iteritems变为items【Python】ufunc‘subtract’didno
系统 2019-09-27 17:52:10 1942
目录第十五章、Python多线程同步锁，死锁和递归锁1.引子：2.同步锁3.死锁引子：4.递归锁RLock原理：不多说，放代码总结：5.大总结第十五章、Python多线程同步锁，死锁和递归锁1.引子：1.创建线程对象t1=threading.Thread(target=say,args=('tony',))2.启动线程t1.start()后面又说了两个点就是join和守护线程的概念以上就是python多线程的基本使用说明：前面说的两个功能是相互独立的，
系统 2019-09-27 17:51:52 1942
和很多语言一样，Python中也分为简单赋值、浅拷贝、深拷贝这几种“拷贝”方式。在学习过程中，一开始对浅拷贝理解很模糊。不过经过一系列的实验后，我发现对这三者的概念有了进一步的了解。一、赋值赋值算是这三种操作中最常见的了，我们通过一些例子来分析下赋值操作：str例复制代码代码如下:>>>a='hello'>>>b='hello'>>>c=a>>>[id(x)forxina,b,c][4404120000,4404120000,4404120000]由以上指
系统 2019-09-27 17:51:51 1942
完全转自https://blog.csdn.net/beijiu5854/article/details/77897767，但是经过自己的测试。转载自http://blog.csdn.net/u013894834/article/details/75305752Ubuntu16.04下完美切换Python版本（亲测）对于ubuntu16.04，由于本身是自带python，这样就减少了在windows下的下载和环境变量配置，非常不错。但是他本身是自带两个版本
系统 2019-09-27 17:51:41 1942
本文适用场景：想用Tkinter开发界面程序并屏幕居中，但没找到相应的API。这两天玩了玩Tkinter，感觉不错，就是屏幕居中这个问题在网上搜了很长时间也没找到答案，最后没办法，看它的文档，用自己的方法实现了。方法很土，就是获取初始化的窗体大小和屏幕大小，再通过计算得到大体值。以下是代码：复制代码代码如下:#!/usr/bin/python'''File:screenCenter.pywAuthor:MikeE-Mail:Mike_Zhang@live.
系统 2019-09-27 17:51:41 1942
一、计算机结构五大部件：输入设备、输出设备、存储器、运算器、控制器二、cpu、硬盘、内存三者之间的关系cpu：是计算机运算核心和控制中心，让电脑的各个部件顺利工作，起到协调和控制作用硬盘：存储资料和软件等数据设备，有容量大，断电数据不丢失的特点，也被人们称之为“数据仓库”内存：a、负责硬盘等硬件上的数据与cpu之间的数据交换处理。b、缓存系统中的临时数据。c、断电后数据丢失三、变量的命名规则：1、要具有描述性2、变量名只能_、数字、字母组成，不能有空格或特
系统 2019-09-27 17:51:18 1942
本篇文章介绍如何使用xlrd来读取Excel表格中的内容，xlrd是第三方库，所以在使用前我们需要安装xlrd。另外我们一般会使用xlwt来写Excel，所以下一篇文章我们会来介绍如何使用xlwt来写Excel。xlrd下载：xlrd0.8.0安装xlrd安装xlrd，只需运行setup即可，另外你也可以直接解压缩到你的project中，也可以直接用xlrd的API获取Excel，这里称之为workbook复制代码代码如下:open_workbook(fi
系统 2019-09-27 17:51:03 1942
计算机之所以能做很多自动化的任务，因为它可以自己做条件判断。比如，输入用户年龄，根据年龄打印不同的内容，在Python程序中，可以用if语句实现：age=20ifage>=18:print'yourageis',ageprint'adult'print'END'注意:==Python代码的缩进规则==。具有相同缩进的代码被视为代码块，上面的3，4行print语句就构成一个代码块（但不包括第5行的print）。如果if语句判断为True，就会执行这个代码块。
系统 2019-09-27 17:51:01 1942
#/usr/bin/envpython#coding:utf-8#进程检测程序importosimportpsutilimportdatetime#获取用户输入的PID#获取pid对应的应用名p=psutil.Process(os.getpid())print('Processname:%s'%p.name())#获取进程bin路径print('Processbinpath:%s'%p.exe())#获取pid对应的路径print('Processpath
系统 2019-09-27 17:50:43 1942
分支结构的应用场景迄今为止，我们写的Python代码都是一条一条语句顺序执行，这种结构的代码我们称之为顺序结构。然而仅有顺序结构并不能解决所有的问题，比如我们设计一个游戏，游戏第一关的通关条件是玩家获得1000分，那么在完成本局游戏后我们要根据玩家得到分数来决定究竟是进入第二关还是告诉玩家“GameOver”，这里就会产生两个分支，而且这两个分支只有一个会被执行，这就是程序中分支结构。类似的场景还有很多，给大家一分钟的时间，你应该可以想到至少5个以上这样的
系统 2019-09-27 17:49:23 1942
ProtocolBuffers（类似XML的一种数据描述语言）最新版本2.3里，protoc―py_out命令只生成原生的Python代码。尽管PB（ProtocolBuffers）可以为C++语言生成快速解析和序列化代码，但是这种方式对于Python不适用，并且手动生成的已包装的代码需要非常大的维护工作。在讨论组里，这是一个常见的功能要求，由于一个必备的客户端组件―AppEngine（根据团队介绍名称为AppEngine），生成原生的Python代码有更
系统 2019-09-27 17:49:21 1942
单例模式单例模式（SingletonPattern）是一种常用的软件设计模式，该模式的主要目的是确保某一个类只有一个实例存在。当你希望在整个系统中，某个类只能出现一个实例时，单例对象就能派上用场。比如，某个服务器程序的配置信息存放在一个文件中，客户端通过一个AppConfig的类来读取配置文件的信息。如果在程序运行期间，有很多地方都需要使用配置文件的内容，也就是说，很多地方都需要创建AppConfig对象的实例，这就导致系统中存在多个AppConfig的实
系统 2019-09-27 17:49:13 1942
