著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。Repetitionisthemotherofalllearning.重复是学习之母。看、看、看、看、看，看视频，看书，看公众号…倘若学习编程只要看看书、看看视频、听听讲就能够学会，那编程本身也失去魅力了。现在大家图方便，搜集大堆大堆的视频教程去看，看的时候感觉都懂了。看完什么都忘了。要动手啊！你学编程，无论是工作，还是做自己的项目，都是要一行代码一行代码地去敲出来的。这个过程才是真正学习
系统 2019-09-27 17:51:10 2063
爬虫即网络爬虫，英文是WebSpider。翻译过来就是网络上爬行的蜘蛛，如果把互联网看作一张大网，那么爬虫就是在大网上爬来爬去的蜘蛛，碰到想要的食物，就把他抓取出来。我们在浏览器中输入一个网址，敲击回车，看到网站的页面信息。这就是浏览器请求了网站的服务器，获取到网络资源。那么，爬虫也相当于模拟浏览器发送请求，获得到HTML代码。HTML代码里通常包含了标签和文字信息，我们就从中提取到我们想要的信息。通常爬虫是从某个网站的某个页面开始，爬取这个页面的内容，找
系统 2019-09-27 17:51:07 2063
Python在debug方面的支持还是不错的，在明确代码意义的情况下，通过log、print和assert分析错误原因，配合单元测试可以很高效。然而，实际工作中大量代码很可能出自他人之手，这种情况下，使用debugger就显得更加高效了。一、在控制台下进行程序调试PDB如果你熟悉命令行调试工具（例如gdb、lldb），那么使用Python中的PDB将获得非常好的体验，PDB不仅支持项目启动时进行调用，也支持在Pythonshell中交互式调试；功能上，支持
系统 2019-09-27 17:50:11 2063
原文链接：https://segmentfault.com/a/1190000016276635【时间】2019.09.06【题目】python实现客户端和服务器端传输数据转自：python实现客户端和服务器端传输数据服务器端：defsocket_service_data():try:s=socket.socket(socket.AF_INET,socket.SOCK_STREAM)s.setsockopt(socket.SOL_SOCKET,socket
系统 2019-09-27 17:49:57 2063
更详细见：https://blog.csdn.net/Lord_sh/article/details/92653790>>>x=np.arange(0,16).reshape(4,4)>>>xarray([[0,1,2,3],[4,5,6,7],[8,9,10,11],[12,13,14,15]])>>>idx=[[1,0,0,0],[0,1,0,0],[0,1,0,0],[0,0,0,1]]>>>idx[[1,0,0,0],[0,1,0,0],[0,1,
系统 2019-09-27 17:49:14 2063
1.1安装模块pipinstallpykafka1.2基本使用#-*coding:utf8*-frompykafkaimportKafkaClienthost='IP:9092,IP:9092,IP:9092'client=KafkaClient(hosts=host)#生产者topicdocu=client.topics['my-topic']producer=topicdocu.get_producer()foriinrange(100):printi
系统 2019-09-27 17:48:56 2063
下面通过几个案例来分析一下，注意：本节的parsematch函数请参考《妙用re.sub分析正则表达式解析匹配过程》案例一：>>>re.findall(r".*.*(.*)",'第二回悟彻菩提真妙理断魔归本合元神')['断魔归本合元神']>>>parsematch(r".*.*(.*)",'第二回悟彻菩提真妙理断魔归本合元神')第1次匹配，匹配情况:匹配子串group(0):第二回悟彻菩提真妙理断魔归本合元神,位置为：(0,19)匹配子串group(1):
系统 2019-09-27 17:48:48 2063
当年学爬虫的第一个想法就是想把双色球的数据爬下来，然后看能不能用什么牛叉的算法，或者数据分析把后面的双色球概率算出来；知道现在才抽空写了这几行代码爬取了双色球的数据，我也真是够懒的；也算是闲来无事，练手的爬虫吧；好了，多余的就不说了，直接上代码吧，代码注释已经很清楚了；importsysimportrequestsfromlxmlimportetreedefget_url(url):#请求url的方法，返回htmlheaders={'User-Agent'
系统 2019-09-27 17:47:57 2063
fileinput模块可以遍历文本文件的所有行.它的工作方式和readlines很类似,不同点在于,它不是将全部的行读到列表中而是创建了一个xreadlines对象.下面是fileinput模块中的常用函数input()#它会返回能够用于for循环遍历的对象.filename()#返回当前文件的名称lineno()#返回当前(累计)的行数filelineno()#返回当前文件的行数isfirstline()#检查当前行是否是文件的第一行复制代码代码如下:#
系统 2019-09-27 17:46:52 2063
环境MacPython3.6.4Atom背景Atom执行PythonCode使用ScriptPackage，执行快捷键cmd+i。但是默认是执行Mac系统的2.7版本的Python。配置cmd+，(cmd+逗号)快捷键打开Settings，或者点击Atom→Preferences打开Settings点击OpenConfigFolder（会打开Atom的Project）打开.atom/packages/script/lib/grammars/python.c
系统 2019-09-27 17:46:08 2063
1.编译nginx在网上买了一本《实战nginx-取代Apache的高性能服务器》，写的比较浅，主要是些配置方面的东西，不过却正是目前我所需要的。由于需要支持https和rewrite，所以除了nginx的源码之外，又下载了openssl-0.9.8r.tar.gz和pcre-8.12.tar.gz，把他们和nginx-1.0.4.tar.gz放到同一个目录。为了方便编译，笔者写了一个脚本，代码如下:#!/bin/bash#================
系统 2019-09-27 17:38:47 2063
这两天写了个监测网页的爬虫，作用是跟踪一个网页的变化，但运行了一晚出现了一个问题。。。。希望大家不吝赐教！我用的是python3，错误在对htmlresponse的decode时抛出，代码原样为：response=urllib.urlopen(dsturl)content=response.read().decode('utf-8')抛出错误为File"./unxingCrawler_p3.py",line50,ingetNewPhonescontent=
系统 2019-09-27 17:38:24 2063
通过上班闲暇时间开始学习一门脚本语言--python，很早前就有老同学建议学习一门脚本语言对未开开发会很有帮助，最初考虑选择哪门语言的时候在python和ruby中纠结了一下，最后选择python主要是感觉它的使用用户更广。开发环境我是在windows平台下开发的，python版本官方推荐的是2.7和3.3，我选择了后者，附上下载地址。事实上，对于新手来说，2.x和3.x确实有一些改变，如果你用2.x的帮助文档在3.x下开发可能会遇到一些麻烦（比如prin
系统 2019-08-12 09:30:29 2063
首先要分析一下电影天堂网站的首页结构。在这里插入图片描述从上面的菜单栏中我们可以看到整个网站资源的总体分类情况。刚刚好我们可以利用到它的这个分类，将每一个分类地址作为爬虫的起点。①解析首页地址提取分类信息#解析首页defCrawIndexPage(starturl):print"正在爬取首页"page=__getpage(starturl)ifpage=="error":returnpage=page.decode('gbk','ignore')tree=
系统 2019-09-27 17:56:58 2062
前言在Python中可迭代(Iterable)、迭代器(Iterator)和生成器(Generator)这几个概念是经常用到的，初学时对这几个概念也是经常混淆，现在是时候把这几个概念搞清楚了。0x00可迭代(Iterable)简单的说，一个对象(在Python里面一切都是对象)只要实现了只要实现了__iter__()方法，那么用isinstance()函数检查就是Iterable对象；例如classIterObj:def__iter__(self):#这里
系统 2019-09-27 17:56:54 2062
