Scrapy是一个开源的Python数据抓取框架，速度快，强大，而且使用简单。来看一个官网主页上的简单并完整的爬虫：虽然只有10行左右的代码，但是它的确是一个完整的爬虫服务：当执行scrapyrunspiderxxx.py命令的时候，Scrapy在项目里查找Spider(蜘蛛️)并通过爬虫引擎来执行它。首先从定义在start_urls里的URL开始发起请求，然后通过parse()方法处理响应。response参数就是返回的响应对象。在parse()方法中，
系统 2019-09-27 17:53:38 2047
案例：爬取使用搜狗根据指定词条搜索到的页面数据（例如爬取词条为‘周杰伦'的页面数据）importurllib.request#1.指定urlurl='https://www.sogou.com/web?query=周杰伦''''2.发起请求:使用urlopen函数对指定的url发起请求，该函数返回一个响应对象，urlopen代表打开url'''response=urllib.request.urlopen(url=url)#3.获取响应对象中的页面数据:r
系统 2019-09-27 17:53:11 2047
首先我们提到一个代码块的概念。在python中并没有花括号来表示代码块这种规定。所以它有了一个新的规定：用缩进来表示代码块。（强制要求缩进）当然了，这对像我这种不缩进都要死的人，没有任何坏处。所以我们来将一下if语句的模板。cgg=10ifcgg<=60:print("Youarerubbish")else:print("Youaregarbage")这就是最基本的if-else当然了，我们还有elseif，在python中用elif来表示。如：cgg=1
系统 2019-09-27 17:53:01 2047
如下所示：>>>importnumpyasnp>>>a=np.array([[1,2,3],[3,1,2]])>>>b=np.array([[5,2,6],[5,1,2]])>>>aarray([[1,2,3],[3,1,2]])>>>barray([[5,2,6],[5,1,2]])>>>c=a+b>>>carray([[6,4,9],[8,2,4]])>>>c=(a+b)/2>>>carray([[3.,2.,4.5],[4.,1.,2.]])>>>以
系统 2019-09-27 17:52:56 2047
前言学习一个库的最好的方式是了解这个库的源码和组成原理，有时候源码可能会略显生涩，这时候我们想通过查看文档来了解，所以我们可以通过输出库自带的描述文档来了解一个库。Numpy和Scipy模块numpy提供了数组对象，面向的任何使用者。scipy在numpy的基础上，面向科学家和工程师，提供了更为精准和广泛的函数。scipy几乎实现numpy的所有函数，一般而言，如果scipy和numpy都有这个函数的话，应该用scipy中的版本，因为scipy中的版本往往
系统 2019-09-27 17:52:27 2047
可以执行shell命令的相关模块和函数有：os.systemos.spawnos.popen--废弃popen--废弃commands--废弃，3.x中被移除以上执行shell命令的相关的模块和函数的功能均在subprocess模块中实现，并提供了更丰富的功能。subprocesscall执行命令，返回状态码>>>importsubprocess>>>ret=subprocess.call(["ls","-l"],shell=False)total4684
系统 2019-09-27 17:51:25 2047
前言Python以其简单易懂的语法格式与其它语言形成鲜明对比，初学者遇到最多的问题就是不按照Python的规则来写，即便是有编程经验的程序员，也容易按照固有的思维和语法格式来写Python代码，有一个外国小伙总结了一些大家常犯的错误，，我把他翻译过来并在原来的基础补充了我的一些理解，希望可以让你避开这些坑。0、忘记写冒号在if、elif、else、for、while、class、def语句后面忘记添加“:”ifspam==42print('Hello!')
系统 2019-09-27 17:50:54 2047
原文链接：https://www.cnblogs.com/Eva-J/articles/7228075.html什么是正则？假如现在你用python写一段代码，类似：phone_number=input('pleaseinputyourphonenumber：')你怎么判断这个phone_number是合法的呢？根据手机号码一共11位并且是只以13、14、15、16、17、18、19开头的数字这些特点，用python写如下代码：判断手机号码是否合法：#方法
系统 2019-09-27 17:50:16 2047
Python数据类型详解——集合一、定义集合跟列表有点像，也是可以存一堆数据的，不过它有几个独特的特点：1、集合里的元素不可变，即不能再集合里存储列表（list）、字典（dict）。字符串、数字、元组等不可变类型可以存储再集合中。2、天生去重，即在集合里不会出现重复元素，就算你故意写入重复元素，集合也会自动去掉重复的，只保留一个。3、无序，集合中的元素没有先后之分。二、语法1、创建集合a={2,321,'Kwan',1,'小明','Kwan',321}2、
系统 2019-09-27 17:50:08 2047
一、添加epel源yuminstallepel-release二、安装Python3.4,装完再升级吧yuminstallpython34三、安装pip3yuminstallpython34-setuptoolseasy_install-3.4pip之后就可以使用pip3了，如：pip3installnumpy转载至：https://blog.csdn.net/E770679957/article/details/73718870
系统 2019-09-27 17:50:01 2047
