1.urllib.error.URLError:解决办法：退出网页上的谷歌账号，然后在命令行中进行认证。2.安装pyCrypto出现error:MicrosoftVisualC++14.0isrequired.安装pycryptodome来代替pyCrypto
系统 2019-09-27 17:55:09 1866
基本要点：程序中储存的所有数据都是对象(可变对象：值可以修改不可变对象：值不可修改)每个对象都有一个身份、一个类型、一个值例：>>>a1='abc'>>>type(a1)str创建一个字符串对象，其身份是指向它在内存中所处的指针(在内存中的位置)a1就是引用这个具体位置的名称使用type()函数查看其类型其值就是'abc'自定义类型使用class对象的类型用于描述对象的内部表示及其支持的方法和操作创建特定类型的对象，也将该对象称为该类型的实例，实例被创建后
系统 2019-09-27 17:54:28 1866
前言尝试用python语言写脚本是好的开始，证明我们有了自动化的思想，这对优秀的程序开发人员是很重要的，电子计算机本来就是要减少重复工作的。首先我们要用到python自带的一些包，python语言让人爱不释手的一点，就是它自带了许多简捷迅速的包，堪称攻坚手术刀，用到的包：os（操作系统相关库），shutil（高级的文件,文件夹,压缩包处理模块）。经典的开头#-*-coding:utf-8-*-importosimportshutilimportsystyp
系统 2019-09-27 17:54:28 1866
jsonJSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式，易于人阅读和编写。json是我们在制作爬虫时非常常见的网络对象，本文就列举python对于json的基本操作。json函数使用json函数首先要导入json库即importjson主要使用以下两个函数：json.dumps将Python对象编码成JSON字符串json.loads将已编码的JSON字符串解码为Python对象json.dumpsjson.dump
系统 2019-09-27 17:54:25 1866
小编在以前给大家介绍过python一些很少用到的功能，这次我们给大家分享了6个隐藏的python功能，学习下。在python的设计哲学中，有这么一条内容：“Simpleisbetterthancomplex”，简单的代码比复杂的要好，这也是为什么python被推荐为初学者必学的语言。很多人初学python，往往会受到其他语言的影响，比如之前学过java的，把python代码写的像java一样。举个例子，在java中设计一个类时，我们常常会为内部变量定义ge
系统 2019-09-27 17:53:03 1866
一、问题引出浅拷贝首先看下面代码的执行情况：a=[1,2,3]print('a=%s'%a)#a=[1,2,3]b=aprint('b=%s'%b)#b=[1,2,3]a.append(4)#对a进行修改print('a=%s'%a)#a=[1,2,3,4]print('b=%s'%b)#b=[1,2,3,4]b.append(5)#对b进行修改print('a=%s'%a)#a=[1,2,3,4,5]print('b=%s'%b)#b=[1,2,3,4,
系统 2019-09-27 17:52:42 1866
前段时间时间为大家讲解了如何使用requests库模拟登录淘宝，而今天我们将对该功能进行丰富。所以我们把之前的那个版本定为1.0，而今天修改的版本定为2.0。版本的迭代意味着功能的升级，那今天的2.0版本较之前的1.0版本有哪些改进呢？我们一起来看看！1.0版本实现步骤我们先来回顾一下模拟登录淘宝的步骤吧，我们还是先看看淘宝登录的详细时序图：这是淘宝网登录的一个请求流程，而我们模拟登录也是根据这样的一个流程。但是在代码模拟登录的时候就不会分的这么细，我们根
系统 2019-09-27 17:52:34 1866
前言上项目的时候，遇见一次需求，需要把在线的其中一个collection里面的数据迁移到另外一个collection下，于是就百度了看到好多文章，其中大部分都是使用导入的方法，没有找到在线数据的迁移方法。于是写了python脚本，分享出来。思路：collection数据量比较大，所以一次性操作所有数据太大，于是分段执行操作。先分段按1000条数据量进行查询，处理成json数据把处理后的json数据发送到目的collection上即可实现:一、使用http的
系统 2019-09-27 17:52:33 1866
上面我们学习了RDD如何转换，即一个RDD转换成另外一个RDD，但是转换完成之后并没有立刻执行，仅仅是记住了数据集的逻辑操作，只有当执行了Action动作之后才会真正触发Spark作业，进行算子的计算执行操作有：reduce(func)collect()count()first()take(n)takeSample(withReplacement,num,[seed])takeOrdered(n,[ordering])saveAsTextFile(path
系统 2019-09-27 17:52:33 1866
一位置传递没什么好过多讲解.#位置传递实例:deffun1(a,b,c):returna+b+cprint(fun1(1,2,3))输出：6二关键字传递更具每个参数的名字写入函数参数#关键字传递deffun2(a,b,c):returna+b+cprint(fun2(1,c=3,b=2))输出：6三参数默认值传递给函数的输入参数设定一个默认值,如果该参数最终没有输入,则使用默认参数出入函数.#默认值传递deffun3(a,b=2,c=3):returna+
系统 2019-09-27 17:52:29 1866
