搜索到与相关的文章
Python

浅谈Python爬取网页的编码处理

背景中秋的时候,一个朋友给我发了一封邮件,说他在爬链家的时候,发现网页返回的代码都是乱码,让我帮他参谋参谋(中秋加班,真是敬业==!),其实这个问题我很早就遇到过,之前在爬小说的时候稍微看了一下,不过没当回事,其实这个问题就是对编码的理解不到位导致的。问题很普通的一个爬虫代码,代码是这样的:#ecoding=utf-8importreimportrequestsimportsysreload(sys)sys.setdefaultencoding('utf8

系统 2019-09-27 17:37:38 2206

编程技术

几则启事

几则启事(一)找人前同事,程序员,有近十年游戏业从业经验,以前多从事客户端开发,对3D图形、性能优化等方面经验丰富,有独到见解。最近几个月他辞职在家搞了个客户端3D引擎,据称完成度不错了,现在已经开源,地址是:http://code.google.com/p/hammer-online/。现在需要完成一个比较漂亮的编辑器,需要一个对3D有所了解,有一定时间和兴趣从事开源项目的朋友参与进来,有意者请直接联系gpe@163.com。另:这个程序员希望找一份珠三

系统 2019-08-29 23:29:35 2206

编程技术

使用网络服务

为了向我们的程序提供数据,AdobeFlex包含特别为与网络服务,HTTP服务器,或者是远程对象服务(Java对象)进行交互而设计的组件。这些组件被称之为远程过程调用(RPC)服务组件。在这一节,我们将会为一个Blog创建一个简单程序,这个程序会列出过去30天内最受欢迎的文章。我们可以决定要列出的文章的数目。我们使用一个名为WebService的RPC服务组件来发送用户的选择,并且由Blog网站所提供的基于SOAP的网络服务获取数据,然后我们在一个Data

系统 2019-08-29 23:23:34 2206

编程技术

修改ulimit参数和tcp的time wait参数

1.linux下tcp的TIME_WAIT参数调整netstat-na|awk'/^tcp/{++S[$NF]}END{for(iinS)printi,S[i]}'查看网络节点的tcp连接状态,如果发现系统存在大量的TIME_WAIT状态的连接,通过调整内核参数解决:vi/etc/sysctl.confnet.ipv4.tcp_syncookies=1net.ipv4.tcp_tw_reuse=1net.ipv4.tcp_tw_recycle=1net.i

系统 2019-08-29 23:15:47 2206

编程技术

偶是程序员

不转不行,太有意思:来自:http://blog.csdn.net/nnnnyyyy/archive/2011/05/10/6410554.aspx最欣赏的是这个:以下是原文:偶是一个程序员。偶的生活很简单.确切地,用两个词,来说,就像偶写的代码一样,单调且无聊。早上七点被手机叫醒:睁开眼,刷牙,洗脸,吃早饭八点半到办公室是必须的,然后开始一天工作:那什么时候下班昵?偶不知道是会是几点钟:从日出到日落,从星期一到星期天,日子就像是写错了代码产生的一个死循环

系统 2019-08-29 23:09:37 2206

编程技术

如何在J2ME程序里调节图像的明

/***调节图像明暗的方法,start和end的值在0-255之间,*比如,0-16就会让图像变得很暗,0-255保持不变*/publicstaticImagelightenessRGB(Imageimage,intstart,intend){//System.out.println("reverseRGBIN");intwidth=image.getWidth();intheight=image.getHeight();//获得图像的ARGB数据,存储在

系统 2019-08-29 22:56:41 2206

编程技术

display:inline-block的实际应用

前面一篇博文有讲关于display:inline-block在FF出现空白的解决方案,这篇博文主要讲解下display:inline-block的实际应用。应用一如下图所示。当固定宽度,固定高度,向左浮动float:left就解决了。但是,这个设计中内容是可变的,也就意味着当内容增多,高度不一就会破坏这个布局。你也许会想到每一行三个放在一个UL里,然后程序员3*N的循环,现在用display:inline-block来解决这个问题

系统 2019-08-29 22:47:34 2206

编程技术

我的房子就快要交付了【首邑溪谷22号楼】

2013年6月30日,我的房子就交付了,还有2个多月的时间,很是期待,先贴张房子的位置图:房子是38平Loft户型,虽然小了点,但是朝东,10层,朝向和楼层都很好,视野很好,采光好,而且距离高铁远。等装修好了,再贴一些装修的图片出来,供大家欣赏。我看好大兴,未来北京重点发展的区域,倒不是希望房子能涨多少,就是觉得环境好,生活舒适,适合居住。我的房子就快要交付了【首邑溪谷22号楼】

系统 2019-08-29 22:46:44 2206

编程技术

图解DotNet框架之五:System.Reflection

(声明:本系列只想给大家介绍.net框架,并不是语法和类的使用的讲解,所以只能概括的描述一下所提到的类,如果有疑问可以到MSDN上面去查)这篇文章我们来学习System.Reflection,.net中反射的核心类.先来看图:前面的文章,我们说过.net的元数据可以完整地描述类型,那么通过System.Reflection,可以在运行时发现类型格式,我们来看一下元数据:源代码:

编程技术

JSP分页技术实现

目前比较广泛使用的分页方式是将查询结果缓存在HttpSession或有状态bean中,翻页的时候从缓存中取出一页数据显示。这种方法有两个主要的缺点:一是用户可能看到的是过期数据;二是如果数据量非常大时第一次查询遍历结果集会耗费很长时间,并且缓存的数据也会占用大量内存,效率明显下降。其它常见的方法还有每次翻页都查询一次数据库,从ResultSet中只取出一页数据(使用rs.last();rs.getRow()获得总计录条数,使用rs.absolute()定位

系统 2019-08-29 22:33:37 2206