网络爬虫，即WebSpider，是一个很形象的名字。把互联网比喻成一个蜘蛛网，那么Spider就是在网上爬来爬去的蜘蛛。1.网络爬虫的定义网络蜘蛛是通过网页的链接地址来寻找网页的。从网站某一个页面（通常是首页）开始，读取网页的内容，找到在网页中的其它链接地址，然后通过这些链接地址寻找下一个网页，这样一直循环下去，直到把这个网站所有的网页都抓取完为止。如果把整个互联网当成一个网站，那么网络蜘蛛就可以用这个原理把互联网上所有的网页都抓取下来。这样看来，网络爬虫
系统 2019-09-27 17:38:28 1998
如果直接对大文件对象调用read()方法，会导致不可预测的内存占用。好的方法是利用固定长度的缓冲区来不断读取文件内容。即通过yield。在用Python读一个两个多G的txt文本时，天真的直接用readlines方法，结果一运行内存就崩了。还好同事点拨了下，用yield方法，测试了下果然毫无压力。咎其原因，原来是readlines是把文本内容全部放于内存中，而yield则是类似于生成器。代码如下：defopen_txt(file_name):withope
系统 2019-09-27 17:38:24 1998
下面列出Python正则表达式的几种匹配用法：1.测试正则表达式是否匹配字符串的全部或部分regex=ur""#正则表达式ifre.search(regex,subject):do_something()else:do_anotherthing()2.测试正则表达式是否匹配整个字符串regex=ur"\Z"#正则表达式末尾以\Z结束ifre.match(regex,subject):do_something()else:do_anotherthing()3
系统 2019-09-27 17:38:16 1998
本文实例介绍了python实现红包裂变算法，分享给大家供大家参考，具体内容如下Python语言库函数安装：pipinstallredpackets使用：importredpacketsredpackets.split(total,num,min=0.01)1、前情提要过年期间支付宝红包、微信红包成了全民焦点，虽然大多数的红包就一块八角的样子，还是搞得大家乐此不疲。作为一名程序猿，自然会想了解下红包的实现细节，微信目前是没有公布红包的实现细节的，所以这里就综
系统 2019-09-27 17:38:12 1998
package{importflash.display.Sprite;importflash.text.*;publicclassASProjectextendsSprite{publicfunctionASProject(){varmytext:TextField=newTextField();mytext.text="helloworld";addChild(mytext);}}}第一个居于as的helloworld程序
系统 2019-08-29 23:52:30 1998
在oracle中通过connectbyprior来实现递归查询[zt]收集的几条在oracle中通过connectbyprior来实现递归查询Startwith...ConnectBy子句递归查询一般用于一个表维护树形结构的应用。创建示例表：CREATETABLETBL_TEST(IDNUMBER,NAMEVARCHAR2(100BYTE),PIDNUMBERDEFAULT0);插入测试数据：INSERTINTOTBL_TEST(ID,NAME,PID)V
系统 2019-08-29 23:49:20 1998
tolua++的源码包中有很多测试例子。这里我用更最简单的例子来学习。第一个例子是数组。仅仅是把C++中的一个数组导出到Lua中，可以在脚本中访问并修改。tarray.pkg文件：$#include"tarray.h"externintg_Arr[10]@Arr;很简单，$#include"tarray.h"，包含实际的C头文件，这个语句会去掉$符号，直接插入到tolua++.exe生成的C文件中。文档中说$lfile，$cfile，$ifile会特别处理
系统 2019-08-29 23:30:55 1998
前面提到的日志功能，只是简单的将日志打印出来，拥有了重定向功能后，这样的日志将会更强大。今天暂时将相关重定向的代码贴上来。再次申请，vs2005下编译通过。下次再进行改进，并更上所有测试程序。//LogManager.h://#include"ace/log_msg.h"#include"ace/Object_Manager.h"#include"aceSingleton.h"#includeusingstd::ofstream;#pra
系统 2019-08-29 23:27:56 1998
当我们再对liferay源代码进行研究或者对某个类进行修改的时候很不方便，所以我们需要搭建一个开发环境，这样在修改liferay源代码的时候就更加方便。下面我们会一步步搭建liferay的开发环境。一、准备工作1、下载下列文件，下载步骤这里省略：jdk-1_5_0_06-windows-i586-p.exeliferay-portal-tomcat-jdk5-
系统 2019-08-29 23:15:41 1998
《Python开发技术详解》试读：2.2.1命名规则2.2Python的编码规则Python语言有自己独特的编码规则,包括命名规则、代码书写规则等。本节将详细介绍Python中常用的规则,并解释这些规则的原理和由来。2.2.1命名规则Python语言有一套自己的命名规则
系统 2019-08-29 23:07:09 1998
