最近有部分工作涉及到了Infobright数据仓库，就浏览了一些相关的资料，感觉很受启发。下面写一些感想，如有谬误，还请指正。简单的来讲，Infobright主要有下面的一些优点：1.TB级的数据存储和高效查询。大数据量存储主要依赖自己提供的高速数据加载工具（百G/小时）和高数据压缩比（>10:1），高效查询主要依赖特殊设计的存储结构对查询的优化，但这里优化的效果还取决于数据库结构和查询语句的设计。2.高数据压缩比，号称一般能够达到10:1以上的数据压缩率
系统 2019-08-12 01:53:23 2321
前车之覆，后车之鉴——开源项目经验谈（本文发表于《程序员》2005年第2期）随着开源文化的日益普及，“参与开源”似乎也变成了一种时尚。一时间，似乎大家都乐于把自己的代码拿出来分享了。就在新年前夕，我的一位老朋友、一位向来对开源嗤之以鼻的J2EE架构师竟然也发布了一个开源的J2EE应用框架（姑且称之为“X框架”），不得不令我惊叹开源文化的影响力之强大。可惜开源并非免费的午餐，把源码公开就意味着要承受众目睽睽的审视。仅仅几天之后，国内几位资深的J2EE架构师就
系统 2019-08-12 01:31:51 2321
基本上，lambdas以及map，reduce和filter为python提供了函数式编程能力。让我们看看他们是什么。map：map函数采用iterable（list，tuple，set）并将函数应用于列表中的每个元素。让我们看一个例子来看看它是如何工作的。任务1：给定一个整数列表，编写代码，以方的所有数s在列表中。deffunc（num）：“””对给定数字进行平方的函数“””returnnum*numl=[1,2,3,4,5,6]#map采用一个函数并应
系统 2019-09-27 17:56:26 2320
1、getitem方法使用这个方法最大的印象就是调用对象的属性可以像字典取值一样使用中括号['key']使用中括号对对象中的属性进行取值、赋值或者删除时，会自动触发对应的__getitem__、__setitem__、__delitem__方法代码如下：classFoo(object):def__init__(self):self.name='jack'def__getitem__(self,item):ifiteminself.__dict__:#ite
系统 2019-09-27 17:56:08 2320
首先，需要获取任意知乎的问题，只需要你输入问题的ID，就可以获取相关的页面信息，比如最重要的合计有多少人回答问题。问题ID为如下标红数字编写代码，下面的代码用来检测用户输入的是否是正确的ID，并且通过拼接URL去获取该问题下面合计有多少答案。importrequestsimportreimportpymongoimporttimeDATABASE_IP='127.0.0.1'DATABASE_PORT=27017DATABASE_NAME='sun'cli
系统 2019-09-27 17:54:17 2320
方法：使用urlencode函数urllib.request.urlopen()importurllib.requestimporturllib.parseurl='https://www.sogou.com/web?'#将get请求中url携带的参数封装至字典中param={'query':'周杰伦'}#对url中的非ascii进行编码param=urllib.parse.urlencode(param)#将编码后的数据值拼接回url中url+=para
系统 2019-09-27 17:53:16 2320
之前用了谷歌的selenium模块，为了练习一下所以写了这个（没错才不是别的理由！）代码里涉及到了各种复杂的情况，包括要找的div在别的iframe中的处理方式，顶部导航栏的定位方式等等。综合性很强下面是代码fromseleniumimportwebdriverimporttimefromfake_useragentimportUserAgentopt=webdriver.ChromeOptions()#opt.add_argument('--headle
系统 2019-09-27 17:52:24 2320
第一种,使用create_connection链接，需要pipinstallwebsocket-client(此方法不建议使用，链接不稳定，容易断，并且连接很耗时)importtimefromwebsocketimportcreate_connectionurl='wss://i.cg.net/wi/ws'whileTrue:#一直链接，直到连接上就退出循环time.sleep(2)try:ws=create_connection(url)print(ws
系统 2019-09-27 17:52:20 2320
本文定位：想通过python调用top命令获取cpu使用率但暂时没有思路的情况。如果单纯为了获得cpu的利用率，通过top命令重定向可以轻松实现，命令如下：复制代码代码如下:top-bi>cpuHistory.log或复制代码代码如下:top-bi|teecpuHistory.log这个就不解释了，不懂的朋友查询下top的帮助文档。这里要实现的是通过python调用top命令，并获得cpu的利用率信息。用过popen的朋友很快就能想到类似如下的代码（这个是
系统 2019-09-27 17:51:42 2320
这个问题在网上找了很长时间，也没有很好的解决方案，大多数都是用的ftp.retrlines('LIST',处理函数)来获得文件的时间但是格式是所以很难做成时间戳，获取时间的目的不就是用来比较，所以下面个大家来个可以获取时间然后转化成时间戳的方式首先函数直接获取ftp文件的时间然后我的做法是，先将时间转化成列表，然后做成时间元组，再用函数转化成时间戳。L=list(ftp.sendcmd('MDTM'+"/home/tarena/%s/%s"%(files_
系统 2019-09-27 17:50:49 2320
