什么是爬虫爬虫就是通过编写程序模拟浏览器上网，然后让其去互联网上抓取数据的过程。爬虫的分类1.通用爬虫：通用爬虫是搜索引擎（Baidu、Google、Yahoo等）“抓取系统”的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。简单来讲就是尽可能的；把互联网上的所有的网页下载下来，放到本地服务器里形成备分，在对这些网页做相关处理(提取关键字、去掉广告)，最后提供一个用户检索接口。搜索引擎如何抓取互联网上的网站数据？门户网站主
系统 2019-09-27 17:52:22 2345
python适用于windows平台使用win32gui,win32api,win32con包simu_read.py复制代码代码如下:#-*-coding=utf-8-*-'''模拟按键翻页Usage:pythonsimu_read.py101.510表示翻10页，1.5表示在一页中按pgdn的时间间隔为1.5s一页pgdn3次，之后按→翻到下一页把浏览器打开到u17要看的漫画中，之后启动该程序，再切回u17便可以自动翻页看漫画了。仅供娱乐，了解pyth
系统 2019-09-27 17:51:27 2345
1、一个python的package文件夹中__init__.py文件是在引用该包时，首先运行的一个文件。正常情况下，我们没有对它进行编辑时，默认为空。2、utils.py文件中存储一些常见的公用的函数、方法。项目不同，里面内容也不一定相同。在调用时，可直接用“fromutilsimport函数名”即可。但有时候公用的函数过多，一个py文件最多放上400~500行的话，一个utils文件根本不够，这种情况下，我们需要将这些函数分放在多个文件中，然后将多个文
系统 2019-09-27 17:50:28 2345
Python三大流程（程序控制流程）一、顺序从左而右，从上到下二、分支（选择）结构1、单分支2、双分支3、多分支（三分支）
系统 2019-09-27 17:49:37 2345
一、python不同环境下运行1、python外部传参引入sys包通过sys.arg[i]获取到对应参数2、python在DOS运行需要加入引用包路径sys.path.append("D:/python/lib")3.shell和bat脚本运行python文件（1）bat文件pythonhello.py%1%2默认有传参数限制，需要用其他方式来获取更多参数（2）shell脚本pythonhello.py$1$2无传参数限制二、应用python生成并写入xm
系统 2019-09-27 17:48:57 2345
更多的信息，可以参考python内部的json文档：python>>>help(json)或者官方文档：http://docs.python.org/library/json.html#module-json.下面给出一个使用python解析json的简单例子：复制代码代码如下:#!/usr/bin/pythonimportjson#Function:Analyzejsonscript#Jsonisascriptcandescriptdatastructu
系统 2019-09-27 17:48:31 2345
python发送email还是比较简单的，可以通过登录邮件服务来发送，linux下也可以使用调用sendmail命令来发送，还可以使用本地或者是远程的smtp服务来发送邮件，不管是单个，群发，还是抄送都比较容易实现。先把几个最简单的发送邮件方式记录下，像html邮件，附件等也是支持的，需要时查文档即可1、登录邮件服务复制代码代码如下:#!/usr/bin/envpython#-*-coding:utf-8-*-#python2.7x#send_simple
系统 2019-09-27 17:47:03 2345
安装pipinstallpyinstaller安装打包进入你的编程目录。打开cmd。键入“pyinstaller-w-ic://logo.icoyourfilename.py”目录下出现3个新的目录：dist、build、—pycache—进入dist，找到exe文件，点击打开。注意：文件名一定要加后缀名如fiilename.ico报错半天，发现自己没加图标后缀！！！！说明-F表示生成单个可执行文件-w表示去掉控制台窗口，这在GUI界面时非常有用。不过如果
系统 2019-09-27 17:46:19 2345
MapReduce与HDFS简介什么是Hadoop？Google为自己的业务需要提出了编程模型MapReduce和分布式文件系统GoogleFileSystem，并发布了相关论文（可在GoogleResearch的网站上获得：GFS、MapReduce）。DougCutting和MikeCafarella在开发搜索引擎Nutch时对这两篇论文做了自己的实现，即同名的MapReduce和HDFS，合起来就是Hadoop。MapReduce的Dataflow如
系统 2019-09-27 17:38:38 2345
UDP套接字是可以使用connect系统调用连接到指定的地址的。从此以后，这个套接字只会接收来自这个地址的数据，而且可以使用send系统调用直接发数据而不用指定地址。可以再次调用connect来连接到别的地方。但是在Python里，一旦调用connect之后，就再也回不到最初的能够接收从任意地址来的数据的状态了！这是Python的API限制，没办法给connect方法传递到AF_UNSPEC地址簇（在C代码里写死了的）。C里边就可以做到的（代码来自这里）：
系统 2019-09-27 17:38:23 2345
