python爬虫1《1》什么是爬虫网络爬虫？网络爬虫（又被称为网页蜘蛛，网络机器人）,是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。《2》爬虫的基本原理：我们把互联网比喻为一张大网，网络爬虫我们想象为网上的蜘蛛，网页与网页之间的连接我们理解为节点，爬虫就相当于是访问网页，获取网页的信息，又通过节点可以爬取另一个网站，然后不停的通过一个个节点即访问一个个网页，这样网站的数据就可以被我们获取下来了。《3》爬虫的分类：网络爬虫可分为通用爬虫和聚焦爬虫
系统 2019-09-27 17:48:45 2036
cookie:PHPSESSID=et4a33og7nbftv60j3v9m86cro;Hm_lvt_51e3cc975b346e7705d8c255164036b3=1561553685;Hm_lpvt_51e3cc975b346e7705d8c255164036b3=1561553685首先分析一下浏览器中cookie的结构基本上是：key=value;key=value;key=value其中key=value之间用一个分号和一个空格分开首先写一下不
系统 2019-09-27 17:47:05 2036
内置函数：Built-inFunctionsabs()all()any()ascii()bin()1.abs(x)返回x的绝对值。参数可以是整数或浮点数。如果参数是复数，则返回其大小。importmathprint('abs(45)的值:',abs(45))print('abs(-45)的值:',abs(-45))print('abs(45+23)的值:',abs(45+23))print('abs(math.pi)的值:',abs(math.pi))输出
系统 2019-09-27 17:46:09 2036
最近做一个小程序开发任务，主要负责后台部分开发；根据项目需求，需要实现三个定时任务：1>定时更新微信token，需要2小时更新一次；2>商品定时上线；3>定时检测后台服务是否存活；使用Python去实现这三个任务，这里需要使用定时相关知识点；Python实现定点与定时任务方式比较多，找到下面四中实现方式，每个方式都有自己应用场景；下面来快速介绍Python中常用的定时任务实现方式：1>循环+sleep；2>线程模块中Timer类；3>schedule模块；
系统 2019-09-27 17:45:28 2036
核心代码：#!/usr/bin/python#-*-coding:gbk-*-#设置源文件输出格式importsysimportgetoptimportjsonimportcreateDictimportmyConToXMLimportmyConToTabledefgetRsDataToDict():#获取控制台中输入的参数，并根据参数找到源文件获取源数据csDict={}try:#通过getopt获取参数opts,args=getopt.getopt(s
系统 2019-09-27 17:38:33 2036
前言任何应用都离不开数据，所以在学习python的时候，当然也要学习一个如何用python操作数据库了。MySQLdb就是python对mysql数据库操作的模块。今天写了个工具，目的是把csv中的数据插入到数据库中去。其中有一部分，是需要分别向两张表中插入两条数据，如果第二张表中的数据已经存在，那么第一张表中的数据也不需要插入。然后通过百度查找发现，其实MySQLdb库，自带了事务处理的功能，pymysql库也是一样。conn=MySQLdb.conne
系统 2019-09-27 17:38:06 2036
本文介绍了Python对于线程的支持，包括“学会”多线程编程需要掌握的基础以及Python两个线程标准库的完整介绍及使用示例。注意：本文基于Python2.4完成，；如果看到不明白的词汇请记得百度谷歌或维基，whatever。1.线程基础1.1.线程状态线程有5种状态，状态转换的过程如下图所示：1.2.线程同步（锁）多线程的优势在于可以同时运行多个任务（至少感觉起来是这样）。但是当线程需要共享数据时，可能存在数据不同步的问题。考虑这样一种情况：一个列表里所
系统 2019-09-27 17:38:03 2036
异常(exceptions)是Python中一种非常重要的类型，它和语法错误不同，是在程序运行期间引发的错误。Python中内置了很多异常，如IOError,NameError,KeyboardInterrupt等，更多的异常可以点击这里。异常的意义在于提供一种更加优雅的运行方式，例如用Python编写一个计算器，如果用户输入不能计算的对象，则可以抛出异常，并进行处理,如下:whileTrue:try:x=int(input('PleaseInenterA
系统 2019-09-27 17:37:47 2036
今天，我们继续一系列文章，使用HTML5的canvas组件进行游戏开发。接下来，我们将开始学习如何添加动画以及一些更有趣的功能。我们的演示将包括一艘太空船飞越时空，并使用一个新的游戏元素–对话框。对话框将包含两页，我们的按钮用来切换对话框的页面，并隐藏对话框。你可以点击这里阅读这一系列教程的前一篇文章：html5游戏制作入门系列教程（二）。我们的将基于之前的程序和代码进行开发。这里有我们的演示和下载包：在线演示源码下载好吧，下载所需文件，让我们开始编码！步
系统 2019-08-29 23:32:33 2036
/*15ConvertsaBGRimagetoHSVcolorspace1617@parambgrimagetobeconverted1819@returnReturnsbgrconvertedtoa3-channel,32-bitHSVimagewith20SandVvaluesintherange[0,1]andHvalueintherange[0,360]21*/22IplImage*bgr2hsv(IplImage*bgr)23{24IplImag
系统 2019-08-29 23:28:00 2036
