最近博主手上有一个爬虫项目，开始深入研究python爬虫开发，这是我篇博客也相当于是我的学习笔记，我认为学习爬虫第一步，先学习python多线程与多进程，熟悉网络编程，接下来会陆续以博客的方式跟大家做分享。多进程Python实现多进程的方式主要有两种，一种方法是使用os模块中的fork方法，另一种方法是使用multiprocessing模块。这两种方法的区别在于前者仅适用于Unix/Linux操作系统，对Windows不支持，后者则是跨平台的实现方式，目前
系统 2019-09-27 17:53:30 1868
汇总整理一套Python网页爬虫，文本处理，科学计算，机器学习和数据挖掘的兵器谱。1.Python网页爬虫工具集一个真实的项目，一定是从获取数据开始的。无论文本处理，机器学习和数据挖掘，都需要数据，除了通过一些渠道购买或者下载的专业数据外，常常需要大家自己动手爬数据，这个时候，爬虫就显得格外重要了，幸好，Python提供了一批很不错的网页爬虫工具框架，既能爬取数据，也能获取和清洗数据，也就从这里开始了：1.1Scrapy鼎鼎大名的Scrapy，相信不少同学
系统 2019-09-27 17:53:22 1868
闲暇之余，在家里自建了个服务器，因为用的小区宽带，IP位动态分配。域名解析就是个问题，我的域名一般停放在DNSPod下。DNSPod有提供修改的API，就用Python简单的实现了一下动态解析。这样，就不用安装花生壳了。废话不说，看代码：#!/usr/bin/envpython#-*-coding:utf-8-*-importhttplib,urllib,urllib2importtimeimportsys,osimportreimportjsonuser
系统 2019-09-27 17:52:14 1868
Python3快速入门（七）——Python3正则表达式1、re模块简介re模块提供Perl风格的正则表达式模式，使Python语言拥有全部的正则表达式功能。2、正则表达式模式模式字符串使用特殊的语法来表示一个正则表达式：正则表达式模式中的字母和数字匹配同样的字符串；多数字母和数字前加一个反斜杠时会有不同的含义；标点符号通常有特殊的含义，只有被转义时才匹配自身；反斜杠本身需要使用反斜杠转义。^匹配字符串的开头$匹配字符串的末尾.匹配任意字符，除了换行符，当
系统 2019-09-27 17:51:33 1868
描述exp()方法返回x的指数,ex。语法以下是exp()方法的语法:importmathmath.exp(x)注意：exp()是不能直接访问的，需要导入math模块，通过静态对象调用该方法。参数x--数值表达式。返回值返回x的指数,ex。实例以下展示了使用exp()方法的实例：#!/usr/bin/python3importmath#导入math模块print("math.exp(-45.17):",math.exp(-45.17))print("mat
系统 2019-09-27 17:49:51 1868
本文实例讲述了Python3实现连接SQLite数据库的方法，对于Python的学习有不错的参考借鉴价值。分享给大家供大家参考之用。具体方法如下：实例代码如下：importsqlite3db=r"D:\pyWork\test.db"#pyWork目录下test.db数据库文件drp_tb_sql="droptableifexistsstaff"crt_tb_sql="""createtableifnotexistsstaff(idintegerprimar
系统 2019-09-27 17:46:13 1868
装饰器基本概念大家都知道装饰器是一个很著名的设计模式，经常被用于AOP(面向切面编程)的场景，较为经典的有插入日志，性能测试，事务处理，Web权限校验，Cache等。Python语言本身提供了装饰器语法（@），典型的装饰器实现如下：@function_wrapperdeffunction():pass@实际上是python2.4才提出的语法糖，针对python2.4以前的版本有另一种等价的实现：deffunction():passfunction=func
系统 2019-09-27 17:45:57 1868
通过下面的步骤让你由浅入深明白装饰器是什么。假定你拥有最基本的Python知识，本文阐述的东西可能对那些在工作中经常接触Python的人有很大的帮助。1、函数（Functions）在Python里，函数是用def关键字后跟一个函数名称和一个可选的参数表列来创建的，可以用关键字return指定返回值。下面让我们创建和调用一个最简单的函数：>>>deffoo():...return1>>>foo()1该函数的函数体（在Python里将就是多行语句）是强制性的并
系统 2019-09-27 17:38:30 1868
一、含有一个装饰器#encoding:utf-8############含有一个装饰器#########defouter(func):definner(*args,**kwargs):#要装饰f1（），这里用这俩形式参数，可以接受任意个参数，不管f1定义几个参数print"1"r=func(*args,**kwargs)#这里要用func，不要用f1print"2"returnrreturninner@outer#这里outer不要加括号deff1(a1,
系统 2019-09-27 17:37:53 1868
SimpleFactory模式//抽象音乐盒接口publicinterfaceIMusicBox{publicvoidplay();}//钢琴音乐盒publicclassPianoBoximplementsIMusicBox{publicvoidplay(){System.out.println("拨放钢琴音乐:)");}}//小提琴音乐盒publicclassViolinBoximplementsIMusicBox{publicvoidplay(){Sy
系统 2019-08-29 23:45:06 1868
