这次只演示了，如何在真实项目内用到BeautifulSoup库来解析网页，而新浪的新闻是ajax加载过来的数据，在这里我们只演示解析部分数据（具体反扒机制没做分析）。代码地址：https://gitee.com/dwyui/BeautifulSoup_xinlang.git。关于的爬虫的博客已经越来越多，使用到的技术也越来越多，后期我还会持续写下去，大概从几个角度去写，多线程爬取（提高效率），如何更好的做到爬取数据（破解反扒）。用redis管理多线程和代理
系统 2019-09-27 17:45:54 1901
Python2中编码相关的问题很是让人蛋疼，特别是中文字符。比如本文所述的中文网页GBK编码的诡异问题。现象例如：盲录�氓��，其实网页里面正常的应该是会员分析接着上面的例子，会员这部分乱码通过repr()函数求值得到如下结果\xc3\xa4\xc2\xbc\xc2\x9a\xc3\xa5\xc2\x91\xc2\x98使用type()函数求值得到的结果为unicodeeval(repr())出来值为盲录�氓��通过查表上述6个汉字对应c3a4c2bcc2
系统 2019-09-27 17:45:40 1901
1.编译nginx在网上买了一本《实战nginx-取代Apache的高性能服务器》，写的比较浅，主要是些配置方面的东西，不过却正是目前我所需要的。由于需要支持https和rewrite，所以除了nginx的源码之外，又下载了openssl-0.9.8r.tar.gz和pcre-8.12.tar.gz，把他们和nginx-1.0.4.tar.gz放到同一个目录。为了方便编译，笔者写了一个脚本，代码如下:#!/bin/bash#================
系统 2019-09-27 17:38:47 1901
在介绍yield前有必要先说明下Python中的迭代器(iterator)和生成器(constructor)。一、迭代器(iterator)在Python中，for循环可以用于Python中的任何类型，包括列表、元祖等等，实际上，for循环可用于任何“可迭代对象”，这其实就是迭代器迭代器是一个实现了迭代器协议的对象，Python中的迭代器协议就是有next方法的对象会前进到下一结果，而在一系列结果的末尾是，则会引发StopIteration。任何这类的对象
系统 2019-09-27 17:38:45 1901
myPhoneBook2.py#!/usr/bin/python#-*-coding:utf-8-*-importreclassPhoneBook(object):'''这是一个电话簿脚本。该脚本能够实现AddContact：添加联系人信息ShowContact：查找姓名显示联系人SaveContacts：存储联系人到TXT文档（存储格式――姓名:号码/号码)LoadContacts：从txt文档中载入联系人'''def__init__(self):sel
系统 2019-09-27 17:38:30 1901
int数字类型classint(object):"""int(x=0)->intorlongint(x,base=10)->intorlongConvertanumberorstringtoaninteger,orreturn0ifnoargumentsaregiven.Ifxisfloatingpoint,theconversiontruncatestowardszero.Ifxisoutsidetheintegerrange,thefunctionre
系统 2019-09-27 17:38:22 1901
hasattr(object,name)作用：判断对象object是否包含名为name的特性（hasattr是通过调用getattr(ojbect,name)是否抛出异常来实现的）。示例：>>>hasattr(list,'append')True>>>hasattr(list,'add')Falsegetattr(object,name,default):作用：返回object的名称为name的属性的属性值，如果属性name存在，则直接返回其属性值；如果属
系统 2019-09-27 17:38:20 1901
1lambda函数函数格式是lambdakeys:express匿名函数lambda是一个表达式函数，接受keys参数，返回表达式的值。所以不用return，也没有函数名，经常用在需要key参数的函数中，比如sorted。2元组(),它是以逗号辨别的，而不是小括号。比如一个元素的元组新手经常写成(12)，其实他会被解释成单个元素12.正确的写法应该是(12,)，在元素后面加上逗号。3模块导入。比如importrandomprintrandom.choice
系统 2019-09-27 17:38:19 1901
JSON编码支持的基本数据类型为None，bool，int，float和str，以及包含这些类型数据的lists，tuples和dictionaries。对于dictionaries，keys需要是字符串类型(字典中任何非字符串类型的key在编码时会先转换为字符串)。为了遵循JSON规范，你应该只编码Python的lists和dictionaries。而且，在web应用程序中，顶层对象被编码为一个字典是一个标准做法。JSON编码的格式对于Python语法而
系统 2019-09-27 17:38:14 1901
python中的单引号双引号有什么区别呢？下面给大家详细的介绍一下：先说双引号与三引号的区别，双引号所表示的字符串通常要写成一行。如：s1="hello,world"如果要写成多行，那么就要使用\(“连行符”)吧，如：s2="hello,\world"s2与s1是一样的。如果你用3个双引号的话，就可以直接写了，如下：s3="""hello,world,hahaha."""相关推荐：《Python视频教程》那么s3实际上就是"hello,\nworld,\n
系统 2019-09-27 17:38:13 1901
