一个小需求，获取远程页面的源码，主要用于抓数据。原来用的好好的，最近突然不能获取页面源码了，但是仍然可以用浏览器正常浏览。（文后附源码下载。^_^）经过分析，原来用的代码如下：StreamReadersreader=null;stringresult=string.Empty;try{HttpWebRequesthttpWebRequest=(HttpWebRequest)WebRequest.Create(Url);//httpWebRequest.Ti
系统 2019-08-29 23:01:15 2240
转自：http://jingyan.baidu.com/article/574c5219d466c36c8d9dc138.htmlwin7下如何建立ftp服务器步骤/方法1首先在本地机器上创建一个用户！这些用户是用来登录到FTP的！我的电脑右键->管理->本地用户和组－>用户->“右键”新建用户－>输入用户名和密码再点创建就行了！2其次是在C盘新建文件夹“FTP上传”和“FTP下载”两个文件夹！并在每个文件夹里放不同的文件，以便区分！3之后是安装IIS组件
系统 2019-08-29 22:26:16 2240
缘起:在数据驱动的web开发中，经常要重复从数据库中取出相同的数据，这种重复极大的增加了数据库负载。缓存是解决这个问题的好办法。Memcached是什么?Memcached是由DangaInteractive开发的，高性能的，分布式的内存对象缓存系统，用于在动态应用中减少数据库负载，提升访问速度。Memcached能缓存什么？通过在内存里维护一个统一的巨大的hash表，Memcached能够用来存储各种格式的数据，包括图像、视频、文件以及数据库检索的结果等
系统 2019-08-12 09:30:24 2240
▲创建游标CREATEPROCEDUREUsp_CreateCursor(@Select_Commandvarchar(8000),@Cursor_ReturnCURSORVARYINGOUTPUT)AS/*存储过程名称：Usp_CreateCursor功能描述：根据指定的SELECT创建一个动态游标参数描述：@Select_Command---SELECT语句;@Cursor_Return---要返回的游标变量思路：动态游标的关键是不知如何去构造它的SE
系统 2019-08-12 01:54:03 2240
数据仓库技术作为一项数据管理领域的新技术，其精髓在于针对联机分析处理(OLAP)提出了一种综合的解决方案，与以往很多技术不同的是，它主要是一种概念，在此概念指导下完成系统的构造。既没有可以直接购买到的现成产品，也没有具体的分析规范和实现方法，也就是说没有成熟、可靠且被广泛接受的数据仓库标准。在以往关系数据库的设计和实现中，不仅有详细的理论推导，还有无数的设计实例，无论你使用的是什么公司的数据库产品、开发工具，只要按照规范做，那么实现同一业务需求的方案都会很
系统 2019-08-12 01:54:03 2240
Oracle提供了rownum,rownum是一个隐含的字段，默认从1开始。取得前5条记录：采用rownum进行分页查询：需要使用三层嵌套查询来完成分页查询：例如查询第三到第四条记录：select*from(selectrownumr,t.*from(select*fromemp)twhererownum<=4)wherer>=3rownum的使用
系统 2019-08-12 01:52:47 2240
我们在制作安装包时，有些情况下会涉及第三方安装的集成，这里将讨论如何调用安装第三方包，以及需要注意的事项。第三方安装包的介质类型有很多，主要有：单独的一个Setup.exe，单独的一个msi包，或者是类似光盘结构的一组文件及文件夹的安装包。首先，如何在InstallShield中添加第三方安装包：如果是单独的Setup.exe或单独的msi包，可以将他们添加到【Behaviorandlogic】->【SupportFiles】->【LanguageInde
系统 2019-08-12 01:31:54 2240
简介python动态执行字符串代码片段（也可以是文件），一般会用到exec,eval。execexec_stmt::="exec"or_expr["in"expression[","expression]]注意：exec是一个语法声明，不是一个函数.也就是说和if,for一样.官方文档对于exec的解释ThisstatementsupportsdynamicexecutionofPythoncode.exec的第一个表达式可以是：1.代码字符串2.文件对象
系统 2019-09-27 17:53:01 2239
“”"思路:1.a*b=a+a+a+…2.a*b=n个a相加,只需求证b=n即可3.用for循环遍历即可,b就是range的最大次数4.需考虑a,b有五种情况存在,但结果会有三种,正数,0,负数“”"defmultiplication(a,b):ifa>0andb>0:sum=0foriinrange(b):sum+=aprint(sum)elifa<0andb<0:sum=0foriinrange(-b):sum+=asum=-sumprint(sum)
系统 2019-09-27 17:52:27 2239
常见的反爬机制及处理方式1、Headers反爬虫：Cookie、Referer、User-Agent解决方案:通过F12获取headers,传给requests.get()方法2、IP限制：网站根据IP地址访问频率进行反爬,短时间内进制IP访问解决方案:1、构造自己IP代理池,每次访问随机选择代理,经常更新代理池2、购买开放代理或私密代理IP3、降低爬取的速度3、User-Agent限制：类似于IP限制解决方案:构造自己的User-Agent池,每次访问随
系统 2019-09-27 17:51:32 2239
