接下来准备用糗百做一个爬虫的小例子。但是在这之前，先详细的整理一下Python中的正则表达式的相关内容。正则表达式在Python爬虫中的作用就像是老师点名时用的花名册一样，是必不可少的神兵利器。一、正则表达式基础1.1.概念介绍正则表达式是用于处理字符串的强大工具，它并不是Python的一部分。其他编程语言中也有正则表达式的概念，区别只在于不同的编程语言实现支持的语法数量不同。它拥有自己独特的语法以及一个独立的处理引擎，在提供了正则表达式的语言里，正则表达
系统 2019-09-27 17:54:47 1833
环境：编辑工具：浏览器：有问题可以联系qq：1776376537安装xlrd安装DDT一分析1目录结构2导入包二代码importxlrdclassExcelUtil():def__init__(self,excelPath,sheetName="Sheet1"):self.data=xlrd.open_workbook(excelPath)self.table=self.data.sheet_by_name(sheetName)#获取第一行作为key值se
系统 2019-09-27 17:54:09 1833
今天咱写一个挺实用的工具，就是扫描并获取可用的proxy首先呢，我先百度找了一个网站：http://www.xicidaili.com作为例子这个网站里公布了许多的国内外可用的代理的ip和端口我们还是按照老样子进行分析，就先把所有国内的proxy扫一遍吧点开国内部分进行审查发现，国内proxy和目录为以下url：http://www.xicidaili.com/nn/x这个x差不多两千多页，那么看来又要线程处理了。。。老样子，我们尝试是否能直接以最简单的r
系统 2019-09-27 17:54:09 1833
在学习本篇之前，如果你对Python下进行GUI编程基础内容还有不明白，推荐一篇相关文章：简单介绍利用TK在Python下进行GUI编程的教程写一个简单的界面很容易，即使是什么都不了解的情况下，这个文本转载了最简单的界面编写，下个文本介绍了TK的简单但具体的应用在python中创建一个窗口，然后显示出来。fromTkinterimport*root=Tk()root.mainloop()就3行就能够把主窗口显示出来了。root是一个变量名称，其代表了这个主
系统 2019-09-27 17:53:14 1833
描述：使用QtDesignner设计界面，pyQt5+python3实现主体方法制作的猜数字游戏。游戏规则：先选择游戏等级：初级、中级、高级、魔鬼级，选择完游戏等级后点击“确定”，然后后台会自动生成一个与游戏等级匹配的“神秘数字”，游戏玩家在文本框内输入数字，再点击文本框旁边的“确定”，即可比较玩家所猜数字是否就是“神秘数字”。游戏界面：源代码：代码1：guessNumberGame.py（界面代码）#-*-coding:utf-8-*-#Formimpl
系统 2019-09-27 17:52:31 1833
除了重複使用Function，有時我們須檢查結果，依此判斷下個步驟該怎麼進行，如此就需要條件式conditionstatement。if...elif...ese(或if...elif...elif或if..else)while>>>defnumIsEven(k):...ifk%2==0:...print(k,'iseven')...else:...print(k,'isodd')...>>>numIsEven(8)8iseven>>>numIsEven(
系统 2019-09-27 17:52:28 1833
作为eclipse的忠实粉丝，我自然乐意用eclipse来编写。于是捣鼓了一小会儿就搞好了。但是我运行的第一个程序出现了一个很奇怪的问题：SyntaxError:(unicodeerror)‘utf-8’codeccan’tdecodebyte0xceinposition16:invalidcontinuationbyte我隐约的看到了utf-8，知道了肯定是编码的问题，可是我寻思我没有写汉字呀原来是自动生成的日期中有中文。删掉就好了。但是如果我们真的需要
系统 2019-09-27 17:52:01 1833
个人想到的解决方法有两种,一种是.replace('old','new')第一个参数是需要换掉的内容比如空格,第二个是替换成的内容,可以把字符串中的空格全部替换掉.第二种方法是像这样str_1_data='abc'str_2_list=str_1_data.split()str_1=''foriinrange(len(str_2_list)):#这里可以直接用str_1.join(str2_list)str_1+=str_2_list[i]print(st
系统 2019-09-27 17:51:45 1833
做cnn的难免要做大量的图片处理。由于接手项目时间不长，且是新项目，前段时间写代码都很赶，现在稍微总结（恩，总结是个好习惯）。1,首先安装python-Image和python-skimage、python-matplotlib。简单代码：importImageasimgimportosfrommatplotlibimportpyplotasplotfromskimageimportio,transformimportargparsedefshow_dat
系统 2019-09-27 17:51:13 1833
上一小节老袁给晓白介绍了python-web开发工程师主要做什么，并从初中高级三个层次分析了这个岗位的具体需求。本节继续介绍python爬虫工程师的一些具体要求。python爬虫工程师该岗位做什么？python爬虫工程师主要是从网上爬取各种数据，然后对数据做整理和简单的存储。具体的职责如下：设计并实现公司的爬虫软件设计并实现网络数据的抓取规则，可以定期爬取指定的网站设计爬虫策略和防屏蔽规则，提高网页抓取效率和质量实现数据提取，清洗，结构化，数据库存储和统计
系统 2019-09-27 17:50:32 1833
