前一段时间一直在研究如何用python抓取搜索引擎结果，在实现的过程中遇到了很多的问题，我把我遇到的问题都记录下来，希望以后遇到同样问题的童鞋不要再走弯路。1.搜索引擎的选取选择一个好的搜索引擎意味着你能够得到更准确的搜索结果。我用过的搜索引擎有四种：Google、Bing、Baidu、Yahoo!。作为程序员，我首选Google。但当我看见我最爱的Google返回给我的全是一堆的js代码，根本没我想要的搜索结果。于是我转而投向了Bing的阵营，在用过一段
系统 2019-09-27 17:48:21 2007
为了提高工作效率（偷懒），用python去解决。工作需要，需要将excel文件转化为csv文件，要是手工的一个个去转换，每个sheet页不但有几十个字段，中间还夹杂着空格，然后按顺序转换成csv文件，这要是手工完成，一两个还行，多了那就是要死人的节奏了，这时候想到了python，走起。__author__='zxl'importpandasaspdimportosimportxlrdpath=r'/Users/zhangxl/Desktop/'filena
系统 2019-09-27 17:47:56 2007
本文实例讲述了Python中zip()函数的定义及用法，相信对于Python初学者有一定的借鉴价值。详情如下：一、定义：zip([iterable,...])zip()是Python的一个内建函数，它接受一系列可迭代的对象作为参数，将对象中对应的元素打包成一个个tuple（元组），然后返回由这些tuples组成的list（列表）。若传入参数的长度不等，则返回list的长度和参数中长度最短的对象相同。利用*号操作符，可以将listunzip（解压）。二、用法
系统 2019-09-27 17:47:05 2007
因为需要对数据处理，将excel数据导入到数据库，记录一下过程。使用到的库：xlrd和pymysql（如果需要写到excel可以使用xlwt）直接丢代码，使用python3，注释比较清楚。importxlrdimportpymysql#importimportlib#importlib.reload(sys)#出现呢reload错误使用defopen_excel():try:book=xlrd.open_workbook("XX.xlsx")#文件名，把文
系统 2019-09-27 17:47:02 2007
本文实例为大家分享了python多线程下信号处理程序示例的具体代码，供大家参考，具体内容如下下面是一个网上转载的实现思路，经过验证，发现是可行的，就记录下来。思路python多线程中要响应Ctrl+C的信号以杀死整个进程，需要：1.把所有子线程设为Daemon；2.使用isAlive()函数判断所有子线程是否完成，而不是在主线程中用join()函数等待完成；3.写一个响应Ctrl+C信号的函数，修改全局变量，使得各子线程能够检测到，并正常退出。源码#!/u
系统 2019-09-27 17:46:56 2007
花了些工夫将碎片网部署到了SAE，中途遇到各类问题。感觉SAE看上去很美，实际上却并不是太成熟（至少python版如此）。下面记录下我遇到的一些主要问题以及解决方法。django版本问题Django1.4都即将发布了，SAE平台自带的SAE版本依旧为1.2x。为使用django1.3版本，你需上传自己的django。具体做法可参考SAE手册中的runtime.html#virtualenv日志模块出错最先遇到的是日至模块的问题。错误显示AdminEmail
系统 2019-09-27 17:46:12 2007
简单记一下python中List的sort方法（或者sorted内建函数）的用法。List的元素可以是各种东西，字符串，字典，自己定义的类等。sorted函数用法如下：sorted(data,cmp=None,key=None,reverse=False)其中，data是待排序数据，可以使List或者iterator,cmp和key都是函数，这两个函数作用与data的元素上产生一个结果，sorted方法根据这个结果来排序。cmp(e1,e2)是带两个参数的
系统 2019-09-27 17:38:23 2007
安装Tornado省事点可以直接用grequests库，下面用的是tornado的异步client。异步用到了tornado，根据官方文档的例子修改得到一个简单的异步爬虫类。可以参考下最新的文档学习下。pipinstalltornado异步爬虫#!/usr/bin/envpython#-*-coding:utf-8-*-importtimefromdatetimeimporttimedeltafromtornadoimporthttpclient,gen,
系统 2019-09-27 17:38:10 2007
单继承时super()和__init__()实现的功能是类似的classBase(object):def__init__(self):print'Basecreate'classchildA(Base):def__init__(self):print'creatA',Base.__init__(self)classchildB(Base):def__init__(self):print'creatB',super(childB,self).__init__
系统 2019-09-27 17:37:52 2007
1.python中的变量：python中的变量声明不需要像C++、Java那样指定变量数据类型（int、float等），因为python会自动地根据赋给变量的值确定其类型。如radius=20，area=radius*radius*3.14159，python会自动的将radius看成“整型”，area看成“浮点型”。所以编程时不用再像之前那样小心翼翼的查看数据类型有没有出错，挺人性化的。2.input和print：先贴个小的程序#Prompttheuse
系统 2019-09-27 17:37:41 2007
