爬虫的概念：爬虫就是获取网页并提取和保存信息的自动化程序爬虫的分类：主要有四类：通用网络爬虫，聚焦网络爬虫，增量式网络爬虫，深层网络爬虫爬虫的流程：常见的几种爬虫问题：主要有五类：静态网页的爬取，Ajax数据的爬取，动态渲染页面爬取，验证码的识别，代理的使用常见的爬虫框架：pyspider框架，Scrapy框架分布式爬虫：在多台机器上运行爬虫程序爬虫的一些常用"库"：解析库：lxml;BeautifulSoup;pyquery;tesserocr请求库：r
系统 2019-09-27 17:56:06 2361
Python如何转换string到float?简单几步，让你轻松解决。打开软件，新建python项目，如图所示右键菜单中创建.py文件，如图所示步骤中文件输入代码如下：defstring_to_float(str):returnfloat(str)if__name__=='__main__':str='3.1415926'res=string_to_float(str)print(res+1)空白后，右键菜单中选择【Run'test'】查看运行结果如下图所
系统 2019-09-27 17:54:45 2361
importnumpyasnpimportmathclassConv2D(object):def__init__(self,shape,output_channels,ksize=3,stride=1,method='VALID'):self.input_shape=shapeself.output_channels=output_channelsself.input_channels=shape[-1]self.batchsize=shape[0]sel
系统 2019-09-27 17:53:54 2361
在Python3中列表数据类型的内置方法里有三种方法可以删除列表的最后一个元素（我所知道的）：1、pop方法list=[1,2,3,4]list.pop()print(list)#[1,2,3]2、del方法list=[1,2,3,4]del(list[-1])print(list)#[1,2,3]3、切片list=[1,2,3,4]list=list[0:-1]print(list)#[1,2,3]总结：以上三种方法未在内存处理上进行测试，唯一区别，po
系统 2019-09-27 17:53:39 2361
LinuxNo.1IPv4下面是IPv4的IP正则匹配实例:简单的匹配给定的字符串是否是ip地址importreifre.match(r"^(?:[0-9]{1,3}\.){3}[0-9]{1,3}$","236.168.192.1"):print"IPvaild"else:print"IPinvaild"精确的匹配给定的字符串是否是IP地址importreifre.match(r"^(?:(?:25[0-5]|2[0-4][0-9]|[01]?[0-9]
系统 2019-09-27 17:49:15 2361
先看这张图，这是从官方网站扒下来的。Engine翻译过来就是引擎的意思，汽车通过引擎来驱动，而SQLAlchemy是通过Engine来驱动，Engine维护了一个连接池（Pool）对象和方言（Dialect）。方言简单而言就是你连的到底是MySQL还是Oracle或者PostgreSQL还是其它数据库，关于方言（Dialect）的介绍在另外一篇文章有介绍，可参考数据库方言dialect。连接池很重要，因为每次发送sql查询的时候都需要先建立连接，如果程序启
系统 2019-09-27 17:48:57 2361
mean和average都是计算均值的函数，在不指定权重的时候average和mean是一样的。指定权重后，average可以计算一维的加权平均值。具体如下：importnumpyasnpa=np.array([np.random.randint(0,20,5),np.random.randint(0,20,5)])print('原始数据\n',a)print('mean函数'.center(20,'*'))print('对所有数据计算\n',a.mean
系统 2019-09-27 17:48:44 2361
Keras、PyTorch、MXNet用户画像C、C++笔记JavaWeb+大数据笔记CDH6、CDH5Python笔记https://pan.baidu.com/s/1OBd1rbwGx0F8YnefM7R0Uw提取码0halhttps://pan.baidu.com/s/1TKNZ6TtDxDtDUnezrcXJ8Q提取码2berhttps://pan.baidu.com/s/1_XWMwcoNuDPdE3xkluo08A提取码b12mhttps://
系统 2019-09-27 17:48:35 2361
错误#yumlistFile"/usr/bin/yum",line30exceptKeyboardInterrupt,e:^SyntaxError:invalidsyntax解决办法一是升级yum。二是修改yum的解释器为旧版本python2.7，即将连接文件/usr/bin/python连接回/usr/bin/python2.7。治标不治本，不推荐。三是在设置里更改解释器设置，即修改/usr/bin/yum文件，指定使用python2.7作为yum的解释
系统 2019-09-27 17:47:57 2361
本文所述为Python3的基本运算符，是学习Python必须掌握的，共享给大家参考一下。具体如下：首先Python中的运算符大部分与C语言的类似，但也有很多不同的地方。这里就大概地罗列一下Python3中的运算符。一、算术运算符注意：双斜杠//除法总是向下取整。从符点数到整数的转换可能会舍入也可能截断，建议使用math.floor()和math.ceil()明确定义的转换。Python定义pow(0,0)和0**0等于1。二、比较运算符运算符描述<小于<=
系统 2019-09-27 17:46:50 2361
python实现建造者模式前言无论是在现实世界中还是在软件系统中，都存在一些复杂的对象，它们拥有多个组成部分，如汽车，它包括车轮、方向盘、发送机等各种部件。而对于大多数用户而言，无须知道这些部件的装配细节，也几乎不会使用单独某个部件，而是使用一辆完整的汽车，可以通过建造者模式对其进行设计与描述，建造者模式可以将部件和其组装过程分开，一步一步创建一个复杂的对象。用户只需要指定复杂对象的类型就可以得到该对象，而无须知道其内部的具体构造细节.介绍建造者模式（Bu
系统 2019-09-27 17:45:45 2361
问题背景目前的linux发行版上，有很多安装了两个版本的python。我的机器上默认的版本为python2.x。且在使用easy_install安装第三方库时，也默认安装到了2.x的版本上，在3.x版本下则无法import安装的库。环境：Kubuntu15.04解决方法安装python3-setuptools和easy_install3，并安装pip3sudoapt-getinstallpython3-setuptoolssudoeasy_install3
系统 2019-09-27 17:38:29 2361
isis比较的是两个变量的地址值，如果地址值正确，则返回True，否则返回False，实例如下：如图所示，a,b列表的数值相等，但地址是不相等的，所以返回True，与值无关====比较的是两个变量的值相等，如果值相等，则返回True，否则返回False，实例如下：如图所示，其数值相等，所以返回True，因为==只比较的是值，与地址无关
系统 2019-09-27 17:57:21 2360
不知道大家有没有遇到这样的情况，比如视频合并时文件名没有按照正常顺序排列，像这样可见，文件名排序是乱的。这个样子合并出来的视频一定也是乱的。所以得想办法把文件名修改一下，让软件读取出正确的顺序。闲话少说，上代码。"""注意：一、文件名除去扩展名必须以'_'+数字结尾。二、convert.py放在文件目录。三、目录中不能有多余文件主要算法：根据最大数字的位数添加0例如,如果最大数字为123,那么位数为3位,1就要变成001、2变成002、23变成023,依次
系统 2019-09-27 17:56:11 2360
以下是演示“如何在Python中复制文件”的九种方法。shutilcopyfile（）方法shutilcopy（）方法shutilcopyfileobj（）方法shutilcopy2（）方法ospopen方法os系统（）方法Thread（）方法子进程调用（）方法子进程check_output（）方法1.ShutilCopyfile（）方法该方法只有在目标可写时才将源的内容复制到目的地。如果您没有写入权限，则会引发IOError。它通过打开输入文件进行阅读，
系统 2019-09-27 17:55:53 2360
