我们开始来谈谈python的爬虫。1，什么是爬虫：网络爬虫是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。互联网犹如一个大蜘蛛网，我们的爬虫就犹如一个蜘蛛，当在互联网遇到所需要的资源，我们就会爬取下来，即为爬虫是一个请求网站并且提取数据的自动化程序。2，下面我们来提到两个名词：1）请求，request即为我们的请求，当我们在浏览器内输入网址，敲击回车时，这时浏览器就会发送消息给该网址所在
系统 2019-09-27 17:50:56 2017
写在前面centos6.8中默认自带的python版本为python2.6，那么这里需要将其改为python3下载并解压官方下载地址为https://www.python.org/downloads/，这里已3.6.3为例。#下载wgethttps://www.python.org/ftp/python/3.6.3/Python-3.6.3.tgz#解压tar-zxvfPython-3.6.3.tgzcdPython-3.6.3安装[root@localh
系统 2019-09-27 17:50:51 2017
什么是转义字符在HTML中<、>、&等字符有特殊含义（<，>用于标签中，&用于转义），他们不能在HTML代码中直接使用，如果要在网页中显示这些符号，就需要使用HTML的转义字符串（EscapeSequence），例如<的转义字符是<，浏览器渲染HTML页面时，会自动把转移字符串换成真实字符。转义字符（EscapeSequence）由三部分组成：第一部分是一个&符号，第二部分是实体（Entity）名字，第三部分是一个分号。比如，要显示小于号（<），就可以写<
系统 2019-09-27 17:49:32 2017
转:https://www.cnblogs.com/cyxiaer/p/9396861.html必需的Oracle链接库的下载地址：https://www.oracle.com/technetwork/topics/winx64soft-089540.html只连接数据库的话不必安装客户端：1.把cx_Oracle的客户端文件复制到site-packages/目录下，可能是Python,Anaconda,venv下面的安装包里2.把下载的instantcl
系统 2019-09-27 17:49:09 2017
1.计算机语言的基本概念计算机语言(ComputerLanguage)指用于人与计算机之间的通信。2.解释型和编译型语言的区别编译型语言：如：CC++（1）、只须编译一次就可以把源代码编译成机器语言，后面的执行无须重新编译，直接使用之前的编译结果就可以；因此其执行的效率比较高；（2）、程序执行效率比较高，但比较依赖编译器，因此跨平台性差一些；解释型语言、如：Python（1）源代码不能直接翻译成机器语言，而是先翻译成中间代码，再由解释器对中间代码进行解释运
系统 2019-09-27 17:49:07 2017
前言：自动化测试存在比较多的使用限制，会存在某段时间无法使用的生疏期。通过这篇文章记录项目编写程序中遇到的问题以及解决思路，希望对以后的自动化开发能有些帮助。问题11：python链接postgre数据库问题12：python单文件打包--可以研究下多文件打包，目前还没有解决多问题打包的问题问题13：python如何生成json文件？如何将生成的文件格式化问题14：python如何创建目录，创建文件问题15：python如何写入文件内容入门之---txt问
系统 2019-09-27 17:47:37 2017
官方文档：https://elasticsearch-py.readthedocs.io/en/master/1、介绍python提供了操作ElasticSearch接口，因此要用python来操作ElasticSearch，首先要安装python的ElasticSearch包，用命令pipinstallelasticsearch安装或下载安装：https://pypi.python.org/pypi/elasticsearch/5.4.02、创建索引假如
系统 2019-09-27 17:47:25 2017
巩固练习：添加注释学习巩固：这节一句废话都没有，因为内容很简单，也没有遇到什么困难，重点说了if-elif-else语句，还有代码块的概念，咱早已熟知啦。
系统 2019-09-27 17:46:32 2017
今天为大家整理了32个Python爬虫项目。整理的原因是，爬虫入门简单快速，也非常适合新入门的小伙伴培养信心。所有链接指向GitHub，祝大家玩的愉快~O(∩_∩)OWechatSogou[1]-微信公众号爬虫。基于搜狗微信搜索的微信公众号爬虫接口，可以扩展成基于搜狗搜索的爬虫，返回结果是列表，每一项均是公众号具体信息字典。DouBanSpider[2]-豆瓣读书爬虫。可以爬下豆瓣读书标签下的所有图书，按评分排名依次存储，存储到Excel中，可方便大家筛选
系统 2019-09-27 17:45:44 2017
最近在项目中遇到这一需求：我需要一个函数工作，比如远程连接一个端口，远程读取文件等，但是我给的时间有限，比如，4秒钟如果你还没有读取完成或者连接成功，我就不等了，很可能对方已经宕机或者拒绝了。这样可以批量做一些事情而不需要一直等，浪费时间。结合我的需求，我想到这种办法：1、在主进程执行，调用一个进程执行函数，然后主进程sleep，等时间到了，就kill执行函数的进程。测试一个例子：importtimeimportthreadingdefp(i):print
系统 2019-09-27 17:38:46 2017
