- 军军小站|张军博客
搜索到与相关的文章
Hadoop

使用Hadoop MapReduce 进行排序

本文转自:http://www.alidw.com/?p=1420在hadoop中的例子TeraSort,就是一个利用mapredue进行排序的例子。本文参考并简化了这个例子:排序的基本思想是利用了mapreduce的自动排序功能,在hadoop中,从map到reduce阶段,map出来的结构会按照各个key按照hash值分配到各个reduce中,其中,在reduce中所有的key都是有序的了。如果使用一个reduce,那么我们直接将他output出来就行

系统 2019-08-12 09:30:30 3126

Hive

hive UDAF开发入门和运行过程详解

介绍hive的用户自定义聚合函数(UDAF)是一个很好的功能,集成了先进的数据处理。hive有两种UDAF:简单和通用。顾名思义,简单的UDAF,写的相当简单的,但因为使用Java反射导致性能损失,而且有些特性不能使用,如可变长度参数列表。通用UDAF可以使用​​所有功能,但是UDAF就写的比较复杂,不直观。本文只介绍通用UDAF。UDAF是需要在hive的sql语句和groupby联合使用,hive的groupby对于每个分组,只能返回一条记录,这点和m

系统 2019-08-12 01:32:14 3126

Tomcat

将开源博客模板导入Eclipse并发布到Tomcat时猫

昨天下了一个博客模板,导入到MyEclipse发布到Tomcat时会出现下的窗口:DeploymentfailureonTomcat6.x.CouldnotcopyallresourcestoD:\ProgramFiles\ApacheSoftwareFoundation\Tomcat6.0\webapps\BlogOnline.Ifafileislocked,youcanwaituntilthelocktimesouttoredeploy,orstopt

系统 2019-08-29 23:26:37 3125

CSS

【CSS布局.2】绝对定位和相对定位

Absolute,CSS中的写法是:position:absolute;TOP、RIGHT、BOTTOM、LEFT(下面简称TRBL)进行定位,在没有设定TRBL,默认依据父级的做标原始点为原始点。如果设定TRBL并且父级没有设定position属性,那么当前的absolute则以浏览器左上角为原始点进行定位,位置将由TRBL决定。一般来讲,网页居中的话用Absolute就容易出错,因为网页一直是随着分辨率的大小自动适应的,而Absolute则会以浏览器的

系统 2019-08-29 22:57:05 3125

编程技术

[转]探索JUnit4扩展:深入Rule

转载自:http://www.blogjava.net/jiangshachina/archive/2012/01/04/367802.html探索JUnit4扩展:深入Rule本文是"探索JUnit4扩展"系列中的第三篇,将进一步探究Rule的应用,展示如何使用Rule来替代@BeforeClass,@AfterClass,@Before和@After的功能。(2012.01.04最后更新)在本系列的第二篇《探索JUnit4扩展:应用Rule》中提到,可

系统 2019-08-12 09:30:06 3125

Android

【Android Developers Training】 107. 认知用

注:本文翻译自Google官方的AndroidDevelopersTraining文档,译者技术一般,由于喜爱安卓而产生了翻译的念头,纯属个人兴趣爱好。原文链接:http://developer.android.com/training/location/activity-recognition.html样例代码:ActivityRecognition.zip行为认知会尝试检测当前用户的物理行为,比如:行走,驾驶或者静止站立。从一个行为认知客户端发出更新信

系统 2019-08-12 01:54:41 3125

Python

使用Python将文本按标点整句切分

利用分词工具包例如jieba可以轻易的将句子切分为不同的单词,但是当你有切分整句的需求时,该怎么解决呢?将段落按句号切分整句1.jieba分词可以切分单词进行中文自然语言处理时,分词是一个常见的操作,例如:importjieba.possegaspsegtxt="【#奔驰女车主不接受4S店道歉#双方现场交涉言语激烈】4月13日,西安维权奔驰女车主和4S店方见面,双方并未当场和解。4S店相关负责人称,由于出差等原因未及时联系车主,车主则反驳称,可通过电话联系

系统 2019-09-27 17:49:47 3124

Python

python3 罗马数字包含以下七种字符: I, V, X, L,C,D 和

题目:罗马数字包含以下七种字符:I,V,X,L,C,D和M。字符数值I1V5X10L50C100D500M1000例如,罗马数字2写做II,即为两个并列的1。12写做XII,即为X+II。27写做XXVII,即为XX+V+II。通常情况下,罗马数字中小的数字在大的数字的右边。但也存在特例,例如4不写做IIII,而是IV。数字1在数字5的左边,所表示的数等于大数5减小数1得到的数值4。同样地,数字9表示为IX。这个特殊的规则只适用于以下六种情况:I可以放在V

系统 2019-09-27 17:47:11 3124

DB2

db2 创建用户及授权

1、创建系统用户dbuser/ehong隶属于db2users2、C:\ProgramFiles\IBM\SQLLIB\BIN>db2connecttoAKZXTEST数据库连接信息数据库服务器=DB2/NT9.7.3SQL授权标识=ADMINIST...本地数据库别名=AKZXTEST3、给用户授权授予连接权限C:\ProgramFiles\IBM\SQLLIB\BIN>db2grantconnectondatabasetouserdbuserDB200

系统 2019-08-12 01:53:38 3124

redis

在多台服务器上简单实现Redis的数据主从复制

Redis的主从复制功能非常强大,一个master可以拥有多个slave,而一个slave又可以拥有多个slave,如此下去,形成了强大的多级服务器集群架构。下面我演示下怎样在多台服务器上进行Redis数据主从复制。这里我假设有两台服务器,一台是Windows操作系统(局域网IP:192.168.3.82),一台是Linux操作系统(局域网IP:192.168.3.90),在两个操作系统都安装redis,Windows操作系统使用cygwin工具进行安装,

系统 2019-08-12 01:51:37 3124