1Python开发环境搭建1.1Python版本介绍Python目前官方运营维护的版本分为2.x版本和3.x版本。2.x版本相对来说，稳定性更高，兼容的主流第三方扩展库更多，商用开发首选；3.x架构设计更完善，性能更好，一些发展前端的第三方扩展库以3.x版本首选兼容和维护。因为2.x版本和3.x版本存在架构上的差异，所以互不兼容，在开发选择版本时需要注意。目前2.x版本的最新版本是2.7.14；3.x版本的最新版本是3.6.3。1.2Python下载与安装
系统 2019-09-27 17:52:53 2143
zip函数接受任意多个（包括0个和1个）序列作为参数，返回一个tuple列表。具体意思不好用文字来表述，直接看示例：1.示例1:复制代码代码如下:x=[1,2,3]y=[4,5,6]z=[7,8,9]xyz=zip(x,y,z)printxyz运行的结果是：[(1,4,7),(2,5,8),(3,6,9)]从这个结果可以看出zip函数的基本运作方式。2.示例2：复制代码代码如下:x=[1,2,3]y=[4,5,6,7]xy=zip(x,y)printxy运
系统 2019-09-27 17:52:42 2143
若干个数组可以沿不同的轴合合并到一起，vstack,hstack的简单用法，>>>a=np.floor(10*np.random.random((2,2)))>>>aarray([[8.,8.],[0.,0.]])>>>b=np.floor(10*np.random.random((2,2)))>>>barray([[1.,8.],[0.,4.]])>>>np.vstack((a,b))array([[8.,8.],[0.,0.],[1.,8.],[0.,
系统 2019-09-27 17:52:40 2143
作为临时测试用python命令来搭建web测试是最好不过的选择了；CD切换到当前目录只需要一句python命令就迅速搭建好了简单的web服务器，pythonlinux自带又无需额外配置安装感觉还是很好用的；python开启web服务器命令python-mSimpleHTTPServer8080端口号可以任意指定一个没有被占用的端口，但必须能通过防火墙；执行完上面命令后，直接输入IP地址加端口号就行了http://:端口号/路径如：http://192.16
系统 2019-09-27 17:52:09 2143
到今日，已经去到python的第5课了，是不是很激动，已经对Python产生兴趣了，感觉python人家说胶水语言，比其他语言都简单，我还是觉得学习python再去学其他可能会更加高效。今日我们来学习列表和字典。这2个东西跟之前说的3数据类型有什么区别（字符串，整数int,浮点数float)有什么关系？这个还真是别疑惑。我们从变量这块去说吧。name="samly71"####这个name赋值字符串samly71这串；number=111####numbe
系统 2019-09-27 17:51:24 2143
一、定义函数def函数名():函数体代码例：#定义函数defemail():print('sendemail')#调用执行函数email()二、函数的返回值defemail():print("sendemail")return"发送成功"#没有return，默认返回Noneret=email()#函数return后面是什么值，ret等于返回值print(ret)注意：一旦遇到return,函数内部return以下的代码不再执行。三、函数的普通参数defem
系统 2019-09-27 17:51:12 2143
今天主要是来说一下怎么可视化来监控你的爬虫的状态。相信大家在跑爬虫的过程中，也会好奇自己养的爬虫一分钟可以爬多少页面，多大的数据量，当然查询的方式多种多样。今天我来讲一种可视化的方法。关于爬虫数据在mongodb里的版本我写了一个可以热更新配置的版本，即添加了新的爬虫配置以后，不用重启程序，即可获取刚刚添加的爬虫的状态数据。1.成品图这个是监控服务器网速的最后成果，显示的是下载与上传的网速，单位为M。爬虫的原理都是一样的，只不过将数据存到InfluxDB的
系统 2019-09-27 17:50:52 2143
1、CSV（1）写csv文件importcsvdefwritecsv(path,data):withopen(path,"w")asf:writer=csv.writer(f)forrowDataindata:print("rowData=",rowData)writer.writerow(rowData)path=r"E:\\Python\\py17\\automatictext\\000001.csv"writecsv(path,[[1,2,3],[4
系统 2019-09-27 17:50:02 2143
（1）在校大学生。最好是数学或计算机相关专业，编程能力还可以的话，稍微看一下爬虫知识，主要涉及一门语言的爬虫库、html解析、内容存储等，复杂的还需要了解URL排重、模拟登录、验证码识别、多线程、代理、移动端抓取等。由于在校学生的工程经验比较少，建议找一些少量数据抓取的项目，而不要去接一些监控类的项目、或大规模抓取的项目。慢慢来，步子不要迈太大。（2）在职人员。如果你本身就是爬虫工程师，挣钱很简单。如果你不是，也不要紧。只要是做IT的，稍微学习一下爬虫应该
系统 2019-09-27 17:49:59 2143
Python标准库中collections对集合类型的数据结构进行了很多拓展操作，这些操作在我们使用集合的时候会带来很多的便利，多看看很有好处。defaultdict是其中一个方法，就是给字典value元素添加默认类型，之前看到过但是没注意怎么使用，今天特地瞅了瞅。首先是各大文章介绍的第一个例子：复制代码代码如下:importcollectionsascolldefdefault_factory():return'defaultvalue'd=coll.d
系统 2019-09-27 17:48:36 2143
