图虫网-写在前面经历了一顿噼里啪啦的操作之后，终于我把博客写到了第10篇，后面，慢慢的会涉及到更多的爬虫模块，有人问scrapy啥时候开始用，这个我预计要在30篇以后了吧，后面的套路依旧慢节奏的，所以莫着急了，100篇呢，预计4~5个月写完，常见的反反爬后面也会写的，还有fucklogin类的内容。图虫网-爬取图虫网为什么要爬取这个网站，不知道哎~莫名奇妙的收到了，感觉图片质量不错，不是那些妖艳贱货可以比的，所以就开始爬了，搜了一下网上有人也在爬，但是基本
系统 2019-09-27 17:56:55 1880
本文实例讲述了Python中实现两个字典（dict）合并的方法，分享给大家供大家参考。具体方法如下：现有两个字典dict如下：dict1={1:[1,11,111],2:[2,22,222]}dict2={3:[3,33,333],4:[4,44,444]}合并两个字典得到类似：{1:[1,11,111],2:[2,22,222],3:[3,33,333],4:[4,44,444]}方法1：dictMerged1=dict(dict1.items()+di
系统 2019-09-27 17:56:41 1880
importbase64if__name__=="__main__":dir='image.jpg'basef=open(dir.split('.')[0]+'_base64.txt','w')withopen(dir,'rb')asf:base64_data=base64.b64encode(f.read())s=base64_data.decode()data='data:image/jpeg;base64,%s'%s#print(data)basef
系统 2019-09-27 17:56:12 1880
为idle增加一个清屏的扩展ClearWindow就可以了（在http://bugs.python.org/issue6143中可以看到这个扩展的说明）。下面我说安装使用的方法。首先下载clearwindow.py（点击可直接下载，不能下载的可以右键保存，格式为py结尾），将这个文件放在PythonX\Lib\idlelib目录下（X为你的python版本），然后在这个目录下找到config-extensions.def这个文件（idle扩展的配置文件），
系统 2019-09-27 17:55:08 1880
vim有各种强大的插件，这不仅归功于其提供的用来编写插件的脚本语言vimL，还得益于它良好的接口实现，从而支持python等语言编写插件。当vim编译时带有+python特性时就能使用python2.x编写插件，+python3则支持python3.x，可以使用vim--version来查看vim的编译特性。要使用python接口，可以用:hpython来查看vim提供的帮助文档，本文做一个简单的介绍。我们都知道在vim里可以执行bash命令，只需要:!c
系统 2019-09-27 17:54:51 1880
正则表达式什么是正则表达式？正则表达式是对字符串（包括普通字符（例如，a到z之间的字母）和特殊字符（称为“元字符”））操作的一种逻辑公式，就是用事先定义好的一些特定字符、及这些特定字符的组合，组成一个“规则字符串”，这个“规则字符串”用来表达对字符串的一种过滤逻辑。正则表达式是一种文本模式，该模式描述在搜索文本时要匹配的一个或多个字符串。正则表达式可以干什么?快速高效的查找与分析字符串进行有规律查找比对字符串，也叫：模式匹配具有查找、比对、匹配、替换、插入
系统 2019-09-27 17:54:35 1880
pycharm软件很好，但是不能在无图形的终端下使用，另外它们是“重量级选手”。如果偶尔需要vim编辑python程序，让vim支持python的语法提示不是更好！实际上，vim支持python提示，就是把python以及各种各样模块的常用指令都写到一个字典里。操作步骤如下：1、创建vim插件工作目录[root@zsl~]#mkdir-p~/.vim/bundle/2、下载插件[root@zsl~]#cd~/.vim/bundle/[root@zsl~]#
系统 2019-09-27 17:54:31 1880
综述本系列文档用于对Python爬虫技术的学习进行记录总结。Python版本是3.7.4urllib库介绍它是Python内置的HTTP请求库，也就是说我们不需要额外安装即可使用，它包含四个模块(主要对前三个模块进行学习)：request:它是最基本的HTTP请求模块，我们可以用它来模拟发送一请求，就像在浏览器里输入网址然后敲击回车一样，只需要给库方法传入URL还有额外的参数，就可以模拟实现这个过程了。error:异常处理模块，如果出现请求错误，我们可以捕
系统 2019-09-27 17:54:27 1880
安装方法pipinstallScrapy如果顺利的话不用管直接一路下来就OK验证是否安装成功安装成功不顺利的情况1）lxml安装不成功使用whl进行安装，不过需要先安装whlpipinstallwheel安装完成后下载lxml的whl文件网址：http://www.lfd.uci.edu/~gohlke/pythonlibs/whl版本挑选进入cmd――>importpip――>printpip.pep425tags.get_supported()，按照截
系统 2019-09-27 17:54:03 1880
依赖包：pipinstallparamiko源码demo:fromtimeimport*importparamiko#定义一个类，表示一台远端linux主机classLinux(object):#通过IP,用户名，密码，超时时间初始化一个远程Linux主机def__init__(self,ip,username,password,timeout=30):self.ip=ipself.username=usernameself.password=passwo
系统 2019-09-27 17:53:55 1880
