当年学爬虫的第一个想法就是想把双色球的数据爬下来，然后看能不能用什么牛叉的算法，或者数据分析把后面的双色球概率算出来；知道现在才抽空写了这几行代码爬取了双色球的数据，我也真是够懒的；也算是闲来无事，练手的爬虫吧；好了，多余的就不说了，直接上代码吧，代码注释已经很清楚了；importsysimportrequestsfromlxmlimportetreedefget_url(url):#请求url的方法，返回htmlheaders={'User-Agent'
系统 2019-09-27 17:47:57 1917
可能有这样一种情况，当你想检查其他条件后一个条件解析为真。在这种情况下，可以使用嵌套的if结构。在嵌套的if语句结构，可以在一个if...elif...else结构里面可有另外一个if...elif...else结构。语法：嵌套if...elif...else结构的语法可以是：ifexpression1:statement(s)ifexpression2:statement(s)elifexpression3:statement(s)elsestateme
系统 2019-09-27 17:47:50 1917
导入线程包importthreading准备函数线程，传参数t1=threading.Thread(target=func,args=(args,))类继承线程，创建线程对象classMyThread(threading.Thread)defrun(self):passif__name__=="__main__":t=MyThread()t.start()线程共享全面变量,但在共享全局变量时会出现数据错误问题使用threading模块中的Lock类,添加互
系统 2019-09-27 17:47:40 1917
还是分析一下大体的流程：首先还是Chrome浏览器抓包分析元素，这是网址：https://www.douyu.com/directory/all发现所有房间的信息都是保存在一个无序列表中的li中，所以我们可以先获取一个装有li的element对象的列表，然后在对每个element逐一操作分析斗鱼的翻页，有一个下一页按钮，是个li，class="dy-Pagination-item-custom"，但是当烦到最后一页的时候，class="dy-Paginat
系统 2019-09-27 17:47:21 1917
分析分析网站寻找需要的网址用谷歌浏览器摁F12打开开发者工具，然后打开斗鱼颜值分类的页面，如图：在里面的请求中，最后发现它是以ajax加载的数据，数据格式为json，如图：圈住的部分是我们需要的数据，然后复制它的网址为https://www.douyu.com/gapi/rknc/directory/yzRec/1，出于学习目的只爬取第一页（减少服务器压力）。然后把网址放到浏览器中测试是否可以访问。如图：结果正常。分析json数据，提取图片链接最后分析发现
系统 2019-09-27 17:46:57 1917
对Python中正则表达式的理解，主要就是对符号的理解，本文即对Python中常用的正则表达式符号进行简析。其主要的符号有：.默认匹配一个字符，不包含换行符，如果设置DOTALL则匹配换行符^匹配行首$匹配行尾*匹配０个或者多个重复＋匹配一个或者多个重复？匹配一个或者零个重复*?,+?,??按照非贪婪模式匹配{m},{m,n},{m,n}?分别匹配m个重复，m至n个重复，m至n个重复按照非贪婪模式\转义[][abc],[a-z][^a-z]|或者匹配'a|
系统 2019-09-27 17:46:52 1917
项目目录结构：按照下图所示创建build文件夹及内容Dockerfile:FROMubuntu:16.04FROMpython:3.6ENVhttp_proxy=http://172.16.6.67:3128ENVhttps_proxy=http://172.16.6.67:3128RUNapt-get-yupdate&&\apt-get-yupgrade&&\apt-getinstall-y\vim\git\python3-dev\python3-set
系统 2019-09-27 17:46:45 1917
很多时候我们需要过滤掉标点符号等特殊字符，网上虽然有一堆的方法，但是都没有找到一个非常满意的，有些过滤不了中文的标点符号，有些过滤不了英文的标点符号，有些过滤不全。最后通过查看正则表达式文档，发现一个高效的办法，一行代码就能搞定：defreplace_all_blank(value):"""去除value中的所有非字母内容，包括标点符号、空格、换行、下划线等:paramvalue:需要处理的内容:return:返回处理后的内容"""#\W表示匹配非数字字母
系统 2019-09-27 17:46:03 1917
1、函数实现#-*-coding:utf-8-*-deftail(filename,n=10):withopen(filename,"r")asf:lines=f.readlines()[-n:]return"".join(lines)2、测试文件poetry.txt为了方便验证，每行之前加上行号数字1.虞美人・宜州见梅作2.3.宋代：黄庭坚4.5.天涯也有江南信。6.梅破知春近。7.夜阑风细得香迟。8.不道晓来开遍、向南枝。9.10.玉台弄粉花应妒。11
系统 2019-09-27 17:45:33 1917
我想大家都知道qq农场吧？今天闲来无事，突发奇想，准备酝酿一个类似的网页游戏。废话不说，具体如下：-----------------------------------------------这不是一个异常--------------------------------------------------这一款模拟经营类游戏，每个人注册登录后，都有一个初始的属性，根据起始做的选择题，分配一定的属性。每个人起手没有金钱，可以选择在系统控制的比如商店，农场，牧
系统 2019-08-29 23:46:44 1917
