代码如下fromfake_useragentimportUserAgentfromlxmlimportetreeimportrequests,osimporttime,re,datetimeimportbase64,json,pymysqlfromfontTools.ttLibimportTTFontua=UserAgent()classCustomException(Exception):def__init__(self,status,msg):self
系统 2019-09-27 17:53:51 1956
Python对于将函数作为参数传递给另一个函数调用是非常方便的，只要你在函数中将调用的参数按照函数处理进行调用，这种操作就能顺利完成。如：defS(n):sum=0foriinrange(n):sum+=ireturnsumdefP(f):a=eval(input('输入一个数'))print('数的累加为：'f(a))运行P(S)，即能够从键盘获得输入并打印出结果。这里将函数S作为参数传递给P是非常方便的。而在P中，之所以将参数f认为是函数，则是因为对它
系统 2019-09-27 17:53:34 1956
这里主要讲了bs4解析方法和json方法，以8684网页为例子，爬取了全国公交线路importrequestsimporttimefrombs4importBeautifulSoupimportjsonfromxpinyinimportPinyinheaders={'User-Agent':'Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/76.0.
系统 2019-09-27 17:53:12 1956
运行多进程每个子进程的内存空间是互相隔离的进程之间数据不能共享的互斥锁但是进程之间都是运行在一个操作系统上，进程之间数据不共享,但是共享同一套文件系统,所以访问同一个文件,或同一个打印终端,是可以的，而共享带来的是竞争，竞争带来的结果就是错乱#并发运行,效率高,但竞争同一打印终端,带来了打印错乱frommultiprocessingimportProcessimporttimedeftask(name):print("%s1"%name)time.slee
系统 2019-09-27 17:52:42 1956
说到流处理，Spark为我们提供了窗口函数，允许在滑动数据窗口上应用转换，常用场景如每五分钟商场人流密度、每分钟流量等等，接下来我们通过画图来了解SparkStreaming的窗口函数如何工作的，处理过程图如下所示：上图中绿色的小框框是一批一批的数据流，虚线框和实线框分别是前一个窗口和后一个窗口，从图中可以看出后一个窗口在前一个窗口基础上移动了两个批次的数据流，而我们真正通过算子操作的数据其实就是窗口内所有的数据流。在代码实现前了解下窗口操作常用的函数有：
系统 2019-09-27 17:52:34 1956
前序Thereshouldbeone-andpreferablyonlyone-obviouswaytodoit.――――theZenofPython意译：Python提倡用一种，而且最好是只有一种方法来完成一件事虽然Python有以上的提倡，但却在字符串格式化方面，没有做到这一点。字符串格式化敲黑板，划重点：在Python中有至少三种常见方式实现字符串格式化：%-formatting格式（Python2.6以前，推荐输出时使用）str.format()格
系统 2019-09-27 17:52:21 1956
3.4.5断言断言(assertions)的使用方式类似于if语句，只是在不满足条件时，会直接抛出异常。类似于下面的if语句(伪代码)ifnotcondition:#如果不满足条件，会直接抛出异常，程序会中断crashprogram那么究竟为什么需要这样的代码呢？主要原因为需要检测程序在某个地方是否满足条件，如果不满足条件，应该及时通知开发人员，而不是将这些bug隐藏起来，知道关键的时候在崩溃。其实在TDD中经常使用断言，TDD会在程序发现异常时执行断言，
系统 2019-09-27 17:52:20 1956
2019-09-18-21:11:24(初学者不会学博客,望大家见谅见谅)今天学的内容是有关list.、dict、set集合的使用方法和注意事项list和dict在循环中不可删,而且list在迭代输出时进行删除是会导致索引跟着改变所以一般list不在循环过程中进行删除list和dict要进行删除时,应该把要删除的记录到另一个列表中,然后在进行删除深浅拷贝:浅拷贝只拷贝第一层的内容,而深拷贝是全部内容都进行了拷贝下面是总结的内容:一.重要知识点1.str.j
系统 2019-09-27 17:51:29 1956
原文链接：https://www.liaoxuefeng.com/wiki/1016959663602400/1017318207388128注：本篇博客是学习廖雪峰老师网站的摘抄，是为了方便以后的学习。如有侵权，请联系删除！联系邮箱：1103540209@qq.com文章目录1.切片2.迭代3.列表生成式4.生成器5.迭代器小结参考掌握了Python的数据类型、语句和函数，基本上就可以编写出很多有用的程序了。比如构造一个1,3,5,7,...,99的列表
系统 2019-09-27 17:51:28 1956
1.random.random()random.random()方法返回一个随机数，其在0至1的范围之内，以下是其具体用法：importrandomprint("随机数:",random.random())输出结果：0.228675212571162.random.uniform()random.uniform()是在指定范围内生成随机数，其有两个参数，一个是范围上限，一个是范围下线，具体用法如下：importrandomprint(random.unif
系统 2019-09-27 17:51:23 1956
