在学习转换之前先了解以下它们的基本概念RDD：弹性分布式数据集，是一个只读分区集合DataFrame：以命名列方式组织的分布式数据集，概念上和关系型数据库的一张表一样DataSet：分布式数据集合，Python暂时不支持了解了基本的概念之后，接下来我们通过代码编写三种数据集的形成RDD的形成frompyspark.sqlimportSparkSessionif__name__=='__main__':spark=SparkSession\.builder\
系统 2019-09-27 17:52:31 2051
Python3快速入门（七）——Python3正则表达式1、re模块简介re模块提供Perl风格的正则表达式模式，使Python语言拥有全部的正则表达式功能。2、正则表达式模式模式字符串使用特殊的语法来表示一个正则表达式：正则表达式模式中的字母和数字匹配同样的字符串；多数字母和数字前加一个反斜杠时会有不同的含义；标点符号通常有特殊的含义，只有被转义时才匹配自身；反斜杠本身需要使用反斜杠转义。^匹配字符串的开头$匹配字符串的末尾.匹配任意字符，除了换行符，当
系统 2019-09-27 17:51:33 2051
第1题：python下多线程的限制以及多进程中传递参数的方式？python多线程有个全局解释器锁（globalinterpreterlock），简称GIL，这个GIL并不是python的特性，他是只在Cpython解释器里引入的一个概念，而在其他的语言编写的解释器里就没有这个GIL例如：Jython。这个锁的意思是任一时间只能有一个线程运用解释器，跟单cpu跑多个程序一个意思，我们都是轮着用的，这叫“并发”，不是“并行”。为什么会有GIL？多核CPU的出现
系统 2019-09-27 17:50:37 2051
1.字符串大小写转换string.title()#将字符串中所有单词的首字母以大写形式显示string.upper()#将字符串中所有字母转化为大写字母string.lower()#将字符串中所有字母转化为小写字母str="helloworld!"print(str.title())HelloWorld!print(str.upper())HELLOWORLD!print(str.lower())helloworld!2.字符拼接python中只用使用'+
系统 2019-09-27 17:50:30 2051
PIL图片操作读取图片img=Image.open(“a.jpg”)显示图片im.show()#im是Image对象，im是numpy类型，通过Image.fromarray(nparr,mode='RGB')函数转换为Image对象图片的size(width,height)=img.size图片的模式mode=img.mode截区域img_c=img.crop(x1,y1,x2,y2)裁剪图片img=img.resize((size,size),Imag
系统 2019-09-27 17:48:58 2051
*args和**kwargs*args代表位置参数，它会接收任意多个参数并把这些参数作为元组传递给函数。**kwargs代表的关键字参数，允许你使用没有事先定义的参数名，另外，位置参数一定要放在关键字参数的前面。__new__和__init__的区别创建一个新实例时调用__new__,初始化一个实例时用__init__,这是它们最本质的区别。new方法会返回所构造的对象，init则不会.new函数必须以cls作为第一个参数，而init则以self作为其第一
系统 2019-09-27 17:48:29 2051
阅读更多变量1.变量•指在程序执行过程中，可变的量；•定义一个变量，就会伴随有3个特征，分别是内存ID、数据类型和变量值。•其他语言运行完之前，一定要手动把程序的内存空间释放掉。但python解释器是自带内存回收机制的，一旦python程序运行完后，会自动释放内存空间。age=10print(id(age),type(age),age)常量2.常量•指在程序执行过程中，不可变的量；•一般都用大写字母定义常量。AGE=10print(AGE)3.变量的命名方
系统 2019-09-27 17:48:22 2051
最近开发Erlang,对其字符串处理能力无言至极,于是决定把它和python联合起来,打造一个强力的分布式系统,等将来需要系统级开发时,我再把C++/C组合进来.首先参考了Erlang官方文档和http://blog.developers.api.sina.com.cn/?tag=erlang以及http://kazmier.net/computer/port-howto/.研读了将近24个小时,才终于完全把问题解决.起名为town，town在英文里表示集
系统 2019-09-27 17:48:01 2051
python远程统计文件#!/usr/bin/python#encoding=utf-8importtimeimportosimportparamikoimportmultiprocessing#统计文件数量defget_total(ip,password,filepath):paramiko.util.log_to_file('paramiko.log')ssh=paramiko.SSHClient()ssh.set_missing_host_key_p
系统 2019-09-27 17:47:49 2051
python处理时间的模块有三个：datetime,time,calendar;datetime模块主要是用来表示日期的，就是我们常说的年月日时分秒，calendar模块主要是用来表示年月日，是星期几之类的信息，time模块主要侧重点在时分秒，粗略从功能来看，我们可以认为三者是一个互补的关系，各自专注一块。1，time模块1.1时间的获取、表示、转换time模块获取时间的基本方法：tt=time.time()#1559201353.5570097得到的是时
系统 2019-09-27 17:47:42 2051
