前面十章爬虫笔记陆陆续续记录了一些简单的Python爬虫知识，用来解决简单的贴吧下载，绩点运算自然不在话下。不过要想批量下载大量的内容，比如知乎的所有的问答，那便显得游刃不有余了点。于是乎，爬虫框架Scrapy就这样出场了！Scrapy=Scrach+Python，Scrach这个单词是抓取的意思，Scrapy的官网地址：点我点我。那么下面来简单的演示一下Scrapy的安装流程。具体流程参照：//www.jb51.net/article/48607.htm
系统 2019-09-27 17:54:46 1975
作者：HelloGitHub-ProdesireHelloGitHub的《讲解开源项目》系列，项目地址：https://github.com/HelloGitHub-Team/Article一、nosenose是一个第三方单元测试框架，它完全兼容unittest，并且号称是一个更好用的测试框架。那么nose除了具备unittest的所有功能外，还具有哪些优势呢？1.1用例编写用例的编写方式除了编写继承于unittest.TestCase的测试类外，还可以编
系统 2019-09-27 17:54:38 1975
魔术方法（魔法函数）：一种特殊的方法。特点：不需要人工调用，在特定的时刻自动执行。1._init_初始化魔术方法*****1.触发时机：实例化对象之后触发2.作用:为实例化的对象添加对象的所属成员。3.参数：一个self接受当前对象其他的参数根据实例化的传参决定4.返回值：无5.注意事项：无例：className():age=18def__init__(self,head):self.sex="男"self.color="black"self.runs=s
系统 2019-09-27 17:54:26 1975
我们有时候会需要在网上查找并下载图片，当数量比较少的时候，点击右键保存，很轻松就可以实现图片的下载，但是有些图片进行了特殊设置，点击右键没有显示保存选项，或者需要下载很多图片，这样的情况，写一段Python爬虫代码就可以轻松解决!一、页面抓取#coding=utf-8importurllibdefgetHtml(url):page=urllib.urlopen(url)html=page.read()returnhtmlhtml=getHtml("http
系统 2019-09-27 17:54:24 1975
python具体强大的库文件，很多功能都有相应的库文件，所以很有必要进行学习一下，其中有一个ftp相应的库文件ftplib，我们只需要其中的登录功能，然后利用多线程调用相应字典里面的字段进行登录，还能根据自己的需要，根据自身的情况编写需要的程序，让程序代替我们去做一些枯燥的重复工作。下面直接上代码，下面是主文件复制代码代码如下:importosimporttimeimportthreadingclassmythread(threading.Thread):
系统 2019-09-27 17:54:23 1975
Python面向对象编程——类与对象一、类与对象的概念类即类别、种类，是面向对象设计最重要的概念，从一小节我们得知对象是特征与技能的结合体，而类则是一系列对象相似的特征与技能的结合体。那么问题来了，先有的一个个具体存在的对象（比如一个具体存在的人），还是先有的人类这个概念，这个问题需要分两种情况去看。在现实世界中：肯定是先有对象，再有类。世界上肯定是先出现各种各样的实际存在的物体，然后随着人类文明的发展，人类站在不同的角度总结出了不同的种类，比如人类、动物
系统 2019-09-27 17:53:58 1975
我从StephenA.Goss那读到关于了《Python3正在毁灭Python》。这篇文章有不少精彩的论点，但我却并不认为Python3是在毁灭Python，也不认为整个局面对Python一点也不利。但是正如那些比较俗气的格言所说，也许每一次危机也意味着一次机遇。也许Python3能振兴Python。显然，麻烦的不仅仅是Python2到Python3的移植。时间不再是2005年了，年轻的程序员不再对Python的哪一个版本如此的激动了。不错，现在市场上有很
系统 2019-09-27 17:53:46 1975
一般用xlml但遇到过解析出来的内容不一样。有误用另一种方法得到正确的，有误应该只是极少问题。这种方案备用html=browser.page_sourcehtm=bs(html,'html.parser')
系统 2019-09-27 17:53:29 1975
从容器、可迭代对象谈起所有的容器都是可迭代的（iterable）,迭代器提供了一个next方法。iter()返回一个迭代器，通过next()函数可以实现遍历。defis_iterable(param):try:iter(param)returnTrueexceptTypeError:returnFalseparams=[1234,'1234',[1,2,3,4],set([1,2,3,4]),{1:1,2:2,3:3,4:4},(1,2,3,4)]forp
系统 2019-09-27 17:53:09 1975
阅读更多1,下载pip安装包pip-19.1.1.tar.gz;2,解压缩后出现setup.py文件,然后在目录中通过Shift+右击，点击在此处打开命令窗口,通过pythonsetup.pyinstall,进行安装;3,安装后,通过cmd窗口中，输入piplist,查看命令是否起作用;4,使用pipinstall-Upip,对pip进行升级;5,使用pipinstallpsycopg2,安装postgresql数据驱动;注意:1,python不要装在c盘
系统 2019-09-27 17:53:05 1975
