简介提到爬虫，大部分人都会想到使用Scrapy工具，但是仅仅停留在会使用的阶段。为了增加对爬虫机制的理解，我们可以手动实现多线程的爬虫过程，同时，引入IP代理池进行基本的反爬操作。本次使用天天基金网进行爬虫，该网站具有反爬机制，同时数量足够大，多线程效果较为明显。技术路线IP代理池多线程爬虫与反爬编写思路首先，开始分析天天基金网的一些数据。经过抓包分析，可知：./fundcode_search.js包含所有基金的数据，同时，该地址具有反爬机制，多次访问将会
系统 2019-09-27 17:57:51 2665
最近因为想要看漫画，无奈下载的漫画是jpg的格式，网上的转换器还没一个好用的，于是乎就打算用python自己DIY一下：这里主要用了reportlab。开始打算随便写几行，结果为若干坑纠结了挺久，于是乎就想想干脆把代码写好点吧。实现了以下的几项功能：将当前文件夹下的图片保存到一个pdf中，支持选择pdf大小等如果有需要可以遍历它下面的所有文件夹简单的来说完全满足我将漫画转成pdf格式的需求了。碰到了一些问题，这里记录下：一、中文路径：这个实在是略蛋疼，总之
系统 2019-09-27 17:52:39 2665
大年初一很多人都是在欢笑中度过这一天而我选择在这一天看一部感人的电影《狗狗和我得十个约定》。对于喜欢宠物的人来说狗狗和我的十个约定，绝对值得一看。1请对我耐心一点.2请你相信我,只要这样我就感到很幸福了.3请不要忘记我也有心.4我不听你的话是有原因的.5请多和我说说话,虽然我不会说人类的语言,但我能明白你的意思.6别打我,请别忘了如果要动起真格来我比你厉害.7如果我老了,请照顾我.8我只能活十年左右,所以请尽量和我在一起.9你能去上学,有很多朋友,但我只有
系统 2019-08-29 23:21:12 2665
本文阐述的是一款经过生产环境检验的千万级数据全文检索（搜索引擎）架构。本文只列出前几章的内容节选，不提供全文内容。在DELLPowerEdge6850服务器（四颗64位InterXeonMP7110N处理器/8GB内存）、RedHatAS4Linux操作系统、MySQL5.1.26、MyISAM存储引擎、key_buffer=1024M环境下实测，单表1000万条记录的数据量（这张MySQL表拥有int、datetime、varchar、text等类型的1
系统 2019-08-29 22:54:17 2665
2007.05.28中国第一个全面解读IT行业工作岗位心理素质要求及心理特征与工作绩效之间关系的研究报告——《中国IT从业人员心理特征研究报告》今天在北京正式公布。--全面解读IT行业工作岗位心理素质要求2007年5月25日（北京）中国第一个全面解读IT行业工作岗位心理素质要求及心理特征与工作绩效之间关系的研究报告——《中国IT从业人员心理特征研究报告》今天在北京正式公布。这是迄今为止国内专门针对IT行业进行的第一个心理学研究项目，该项研究成果不仅填补了国
系统 2019-08-29 22:45:03 2665
1日期函数mysql>selectcurrent_date()fromdual;mysql>selectcurrent_time()fromdual;mysql>selectmonth(current_date())fromdual;mysql>selectyear(current_date())fromdual;mysql>selectmonth(current_date())fromdual;mysql>selectday(current_date()
系统 2019-08-29 22:10:31 2665
Android应用程序开发中，有的时候我们在应用程序的任何一个地方都需要访问一个全局变量，也就是在任何一个Activity中都可以访问的变量。它不会因为Activity的生命周期结束而消失。要实现应用程序级的变量，我们可以通过Application这个类来实现。首先，我们新建一个类HelloApplication继承Android.app.Application类，然后在我们的类中增加一些变量。如下所示：publicclassHelloApplicatio
系统 2019-08-29 22:07:27 2665
１、从jcaptcha官方网站下载jcaptcha的发行包，并将其发行包中的jar文件考贝到本地项目WEB-INF目录下的lib目录中。官方网址http://jcaptcha.sourceforge.net/２、在web.xml文件中配置Java代码jcaptchacn.hxex.order.core.jcaptcha.ImageCaptchaServ
系统 2019-08-12 09:30:33 2665
CSDNlidphttp://blog.csdn.net/perfectpdltcp/ip协议栈属于操作系统内核层，通过提供系统调用供用户空间访问，从数据报到达最底层的网卡到最终传递给上层软件有一个过程，当一个数据报到达时网络驱动程序把数据报放到一个队列中，同时发送一个消息给ip进程，这里ip进程是一个独立的程序，专门处理ip数据报，tcp/ip协议栈中，根据协议的功能及复杂程度，一般通过进程方式实现，而协议间的数据传递则借助于操作系统提供的进程间通讯机制
系统 2019-08-12 09:30:17 2665
我一直觉得我的自动化测试水平仅仅是入门级，也许还没入门，脚还在门槛上方。为什么会这么想呢？因为我只有过数据库存储过程的自动化脚本编写经验，还是自己摸索的。我不知道自动化测试框架是什么，也不会使用selenium，唯一接触的自动化工具QT也只使用了两个月左右，因为部门没有QTp的序列号。自从11年毕业接触测试以来，我从工作中接触的绝大部分是功能测试，夹杂着偶尔的性能测试。自动化测试的想法是我在做回归测试时候萌生的想法，那时候就想着掌握这项技能，既能给自己加分
系统 2019-08-12 09:27:37 2665
