这次只演示了，如何在真实项目内用到BeautifulSoup库来解析网页，而新浪的新闻是ajax加载过来的数据，在这里我们只演示解析部分数据（具体反扒机制没做分析）。代码地址：https://gitee.com/dwyui/BeautifulSoup_xinlang.git。关于的爬虫的博客已经越来越多，使用到的技术也越来越多，后期我还会持续写下去，大概从几个角度去写，多线程爬取（提高效率），如何更好的做到爬取数据（破解反扒）。用redis管理多线程和代理
系统 2019-09-27 17:45:54 1875
创建一个软件包（package）似乎已经足够简单了，也就是在文件目录下搜集一些模块，再加上一个__init__.py文件，对吧？我们很容易看出来，随着时间的推移，通过对软件包的越来越多的修改，一个设计很差的软件包可能会出现循环依赖问题，或是可能变得不可移植和不可靠。1.__init__.py仅为导入服务对于一个简单的软件包，你可能会忍不住把工具方法，工厂方法和异常处理都丢进__init__.py，千万别这样！一个结构良好的__init__.py文件，仅为一
系统 2019-09-27 17:45:42 1875
Python2中编码相关的问题很是让人蛋疼，特别是中文字符。比如本文所述的中文网页GBK编码的诡异问题。现象例如：盲录�氓��，其实网页里面正常的应该是会员分析接着上面的例子，会员这部分乱码通过repr()函数求值得到如下结果\xc3\xa4\xc2\xbc\xc2\x9a\xc3\xa5\xc2\x91\xc2\x98使用type()函数求值得到的结果为unicodeeval(repr())出来值为盲录�氓��通过查表上述6个汉字对应c3a4c2bcc2
系统 2019-09-27 17:45:40 1875
1.简介celery(芹菜)是一个异步任务队列/基于分布式消息传递的作业队列。它侧重于实时操作，但对调度支持也很好。celery用于生产系统每天处理数以百万计的任务。celery是用Python编写的，但该协议可以在任何语言实现。它也可以与其他语言通过webhooks实现。建议的消息代理RabbitMQ的，但提供有限支持Redis,Beanstalk,MongoDB,CouchDB,，和数据库（使用SQLAlchemy的或Django的ORM）。celer
系统 2019-09-27 17:38:47 1875
如果某类里没有__init__方法函数，通过类名字创建的实例对象为空，切没有初始化；如果有此方法函数，通常作为类的第一个方法函数，有点像C++等语言里的构造函数。classCa:def__init__(self,v):#注意前后各两个下划线self.name=vdefpr(self):print"a--->",self.nameia=Ca("Jeapedu")#本质调用的是__init__方法函数ia.pr()Ca.pr(ia)输出结果a--->Jeape
系统 2019-09-27 17:38:41 1875
最近开发了一个GoogleAnalytics相关的应用，但需要在Windows下部署，结合网上的相关经验，最终选择了apache+mod_wsgi这样的配置。修改python应用复制代码代码如下:Notethatmod_wsgirequiresthattheWSGIapplicationentrypointbecalled'application'.Ifyouwanttocallitsomethingelsethenyouwouldneedtoconfig
系统 2019-09-27 17:38:15 1875
在使用google或者baidu搜图的时候会发现有一个图片颜色选项，感觉非常有意思，有人可能会想这肯定是人为的去划分的，呵呵，有这种可能，但是估计人会累死，开个玩笑，当然是通过机器识别的，海量的图片只有机器识别才能做到。那用python能不能实现这种功能呢？答案是：能利用python的PIL模块的强大的图像处理功能就可以做到，下面上代码：importcolorsysdefget_dominant_color(image):#颜色模式转换，以便输出rgb颜色
系统 2019-09-27 17:38:08 1875
CNET科技资讯网8月28日北京报道微软今天宣布其新一代互联网多媒体交互式内容播放应用插件——Silverlight将于今年9月正式发布。微软（中国）有限公司平台与开发合作部总监林毅介绍，Silverlight具有三方面优质特性，包括：高清晰、互动、天然SEO特性。微软今天宣布其新一代互联网多媒体交互式内容播放应用插件——Silverlight将于今年9月正式发布。微软同时向国内媒体预览了Silverlight的部分功能。Silverlight是一种跨平台
系统 2019-08-29 23:43:09 1875
一。TextInput组件就是文本输入框，参数有1。editable,默认是true,为文本可编辑，false,为输入文本不可编辑。2。password,是否为密码字段，默认为false,不是，如果为true时，是密码字段。3。text就是要填的文本字段。二。RadioButton组件就是单选框，就是在某个问题的一组答案中，只有一个被选中，参数有组名称等，具体：1。data:就是输入RadioButton组件实例的label值。2。groupName:组名
系统 2019-08-29 23:42:23 1875
之前写过一系列的OpenExpressApp的文章，到现在OEA的源码下载人次已经上万了，大部分人估计还是抱着学习的态度来使用这个框架。毕竟时间和人力有限，OEA本身也比较复杂，能做到现在我也基本满意了，我们将继续不断应用模型驱动软件工厂的软件工程概念，坚持让业务工程师开发应用（makebusinessengineersdevelopapplications）的理念，改善我们的开发过程，提高开发能力。为了让团队更好的认识OpenExpressApp，我将在
系统 2019-08-29 23:15:32 1875
