- 军军小站|张军博客
搜索到与相关的文章
Hadoop

搜索 hadoop

最近几年中,web和企业已经见证了数据膨胀。这一现象有很多种原因,例如,便宜的terabyte量级的存储硬件的商品化,随着时间的推移已接近临界规模的企业数据,以及允许轻松进行信息供应和交换的标准。从企业的角度来说,日益增长的信息已经很难存储在标准关系型数据库甚至数据仓库中。这些问题提到了一些在实践中已存在多年的难题。例如:怎样查询一个十亿行的表?怎样跨越数据中心所有服务器上的所有日志来运行一个查询?更为复杂的问题是,大量需要处理的数据是非结构化或者半结构化

系统 2019-08-29 23:41:01 4331

Hadoop

用 Hadoop 进行分布式并行编程, 第 2 部分

前言在上一篇文章:“用Hadoop进行分布式并行编程第一部分基本概念与安装部署”中,介绍了MapReduce计算模型,分布式文件系统HDFS,分布式并行计算等的基本原理,并且详细介绍了如何安装Hadoop,如何运行基于Hadoop的并行程序。在本文中,将针对一个具体的计算任务,介绍如何基于Hadoop编写并行程序,如何使用IBM开发的HadoopEclipseplugin在Eclipse环境中编译并运行程序。回页首分析WordCount程序我们先来看看Ha

系统 2019-08-12 09:29:58 4329

Spark

高校,微软未来的主战场--有感于DreamSpark的试用

以前,对微软有过崇拜阶段、也曾因为黑屏事件发表过激言论。最近两年,开始了解IBM,Microsoft,Oracle这些世界级巨头的企业文化,渐渐地,改变了自己的想法。这些企业能够长期屹立,虽然被google等后起之秀紧逼而不自乱阵脚,自然有它的不凡之处。对Microsoft,国人可谓爱恨有加。其中一个不可避免的主题,便是“正版化”。尽管微软为此作出了种种努力,但由于东西方文化的差异,国内对知识产权的严重漠视,收入差异等各种因素的关系,很多人提到这几个字,无

系统 2019-08-29 23:53:36 4328

Weblogic

配置EJB项目 -- weblogic服务器

1项目-->右键-->JavaBuildPath-->AddLibrary2选择weblogicsystemlibraries3选择最后一项javax.persistence4点击finish完成weblogic需要加载的所有jar包配置EJB项目--weblogic服务器

系统 2019-08-12 01:32:44 4326

ASP.NET

Asp.Net中获取Castle容器中的服务的另一方法

由于之前的表空间定义得太小,很快就用满了。给表空间新增了一个文件,新增到了4G,但发现还是不行。经查资料,明白除了要扩大表空间之外,还要授权给用户在这个表空间具有不受限制的表空间大小。如下为操作脚本:(1)altertablespaceDISKSPACEadddatafile'D:spacediskDISKSPACE_02.dbf'size4000Mautoextendoff;(2)alteruseross05quotaunlimitedonDISKSPA

系统 2019-08-29 22:30:35 4321

IOS

ios 手机号码查询

首先用到一个手机归属地查询的服务网站。http://webservice.webxml.com.cn/WebServices/MobileCodeWS.asmxSOAP是简单对象访问协议,它可看成是HTTP与XML的结合,其中XML部分是作为HTTP报文的实体主体部分[webDatasetLength:0];//注意这里需要改正一下:webData=[NSMutableDataalloc]init];1、运行Xcode4.4.1,新建一个SingleVie

系统 2019-08-29 23:25:38 4320

编程技术

开始MVC5之旅

ASP.NETMVC5-开始MVC5之旅本教程将使用VisualStudio2013手把手教你构建一个入门的ASP.NETMVC5Web应用程序。本教程配套的C#源码工程可通过如下网址下载:C#版本源码链接。同时,请查阅BuildingtheChapterDownloads来完成编译源码和配置数据库。在本教程中的源码工程,您可在VisualStudio中运行MVC5应用程序。您也可以使Web应用程序部署到一个托管服务提供商上。微软提供免费的网络托管多达10

系统 2019-08-12 01:33:54 4317

redis

redis源码笔记 - redis对过期值的处理(in redi

redis允许对key设置超时时间,实现过期key的自动淘汰。这篇blog分析下,其自适应(adaptive)的淘汰机制。redis每隔100ms定时执行的循环(serverCronfunction)里有如下语句:655/*Expireafewkeyspercycle,onlyifthisisamaster.656*OnslaveswewaitforDELoperationssynthesizedbythemaster657*inordertoguaran

系统 2019-08-12 01:32:33 4315

PostgreSql

PostgreSQL 数据库集群和PL/Proxy配置安装指南

PL/Proxy和PostgreSQL集群的结构关系可以用下图清楚地表示,对PL/Proxy和PostgreSQL集群还不太了解的朋友可以看SkypePlansforPostgreSQLtoScaleto1BillionUsers这篇文章。以下操作是在三台不同机器上执行的情况,其中plproxy节点的机器名是P1,数据库节点的机器名分别是D1和D2。机器硬件配置如下,同时需要Linux-4.2、postgresql-8.3.0和plproxy-2.0.4,

系统 2019-08-29 23:23:18 4313

Tomcat

Tomcat5启动流程与配置详解 ZT

Tomcat5启动流程与配置详解星期日2007年08月19日Tomcat5启动流程与配置详解虽然版本已经更新蛮多的了,但是了解以前的还是有很大帮助的。1.Tomcat5.0目录结构Tomcat下有9个目录,分别是bin,common,conf,logs,server,shared,temp,webapps,work目录,现在对每一目录做介绍。Tomcat根目录在tomcat中叫。-/bin-存放各

系统 2019-08-12 01:32:18 4313