Hadoop

Hadoop 的 TotalOrderPartitioner

http://blog.oddfoo.net/2011/04/17/mapreduce-partition%E5%88%86%E6%9E%90-2/Partition所处的位置Partition位置Partition主要作用就是将map的结果发送到相应的reduce。这就对partition有两个要求:1)均衡负载,尽量的将工作均匀的分配给不同的reduce。2)效率,分配速度一定要快。Mapreduce提供的PartitionerMapreduce默认的

系统 2019-08-12 09:29:57 3594

redis

redis持久化

Redis是一种高级key-value数据库。它跟memcached类似,不过数据可以持久化,而且支持的数据类型很丰富。有字符串,链表,集合和有序集合。支持在服务器端计算集合的并,交和补集(difference)等,还支持多种排序功能。所以Redis也可以被看成是一个数据结构服务器。Redis的所有数据都是保存在内存中,然后不定期的通过异步方式保存到磁盘上(这称为“半持久化模式”);也可以把每一次数据变化都写入到一个appendonlyfile(aof)里

系统 2019-08-12 01:54:53 3594

ASP.NET

在ASP.NET中使用JSON

本篇将简单的介绍一个在.NET中实现JSON的API,然后使用该API做个C/SASP.NET的小练习。Json.NET的简单介绍首先介绍一个为方便在.NET中使用JSON的API,Json.NET。它方便我们读取从浏览器流向服务器的JSON对象,也方便在响应流中写入JSON对象。这里下载:Json.NET。Json.NET只提供了服务器端的方法,主要有实现JSON文本与XML互相转换的类,有自定义读写JSON的JsonReader类和JsonWriter

系统 2019-08-29 23:13:37 3593

编程技术

hibernate.properties及hibernate.cfg.xml

hibernate.properties和hibernate.cfg.xml是hibernate的配置文件,对于初学者,可能存在一些配置疑难。本文给出了hibernate.properties及hibernate.cfg.xml内容配置样例,二者选其一即可hibernate.properties##----------thisistheconnectionandhibernate.dialectfomysql------------------------

系统 2019-08-29 22:08:01 3593

编程技术

InnoSetup使用笔记

今天用InnoSetup做安装包时,因为要装的驱动区分32位、64位,64位系统中要安装32位+64位驱动。想在脚本中进行判断。折腾一阵,终于搞定:参考了:http://379910987.blog.163.com/blog/static/3352379720111164242382/InnoSetup使用笔记

系统 2019-08-12 01:32:38 3593

Python

Python与C之间的相互调用(Python C API及Pytho

writeby九天雁翎(JTianLing)--blog.csdn.net/vagrxie讨论新闻组及文件我实现“onekeycodehighlighter"中碰到的一些小问题,需要实现全局快捷键,但是是事实上Qt并没有对全局快捷键提供支持,那么用Qt的话就只能通过Win32Api来完成了,而我,用的是PyQt,还需要用Python来调用win32API,事实上,都没有什么难的。因为Python如此的流行,导致,开源社区按照自己的爱好,对于Python与C

系统 2019-08-29 22:34:19 3592

编程技术

股票API之---新浪财经频道

实时股票数据接口大全股票数据的获取目前有如下两种方法可以获取:1.http/javascript接口取数据2.web-service接口1.http/javascript接口取数据1.1Sina股票数据接口以大秦铁路(股票代码:601006)为例,如果要获取它的最新行情,只需访问新浪的股票数据接口:http://hq.sinajs.cn/list=sh601006这个url会返回一串文本,例如:varhq_str_sh601006="大秦铁路,27.55,

系统 2019-08-12 09:29:42 3592

C#

C#调用WORD处理的小项目 转

转http://www.cnblogs.com/happygrass/archive/2009/02/13/1388224.html最近一个朋友让我帮他做一个小功能,其实就是把WORD文档里的内容存到数据库里去,可以实现搜索并转EXCEL的功能,需求很简单,想不到加上部署折腾了我一个星期,我先把需求详细描述一下:提供一个WORD文档的样板,这个WORD文档里大部分是文本,其中插入了一个EXCEL表格,WORD的内容如下:房地产价值监证确认书编号:(2009

系统 2019-08-12 09:27:24 3592

C++

浅析C++中虚函数的调用及对象的内部布局

在我那篇《浅析C++中的this指针》中,我通过分析C++代码编译后生成的汇编代码来分析this指针的实现方法。这次我依然用分析C++代码编译后生成的汇编代码来说明C++中虚函数调用的实现方法,顺便也说明一下C++中的对象内部布局。下面所有的汇编代码都是用VC2005编译出来的。虽然,不同的编译器可能会编译出不同的结果,对象的内部布局也不尽相同;但是,只要是符合C++标准的编译器,编译结果和对象的内部布局应该是大同小异。首先,是一个有着简单继承关系的两个类

系统 2019-08-29 23:30:45 3589

redis

跟我学系列教程——《13天让你学会Redis》火热

学习目标每天2小时,13天让你学会Redis。本课程针对Redis新手,甚至连Redis是什么都没有听说过的同学。课程会具体介绍Redis是什么以及为什么要使用Redis,结合项目实践旨在让学生从零開始逐步晋升为一个Redis的优秀开发人员。适合人群1.在校学生:掌握多门存储技术,丰富毕业设计,贴近企业新技术2.在职开发:技术储备,提高晋升空间。报名链接点击报名跟我学系列教程——《13天让你学会Redis》火热报名中

系统 2019-08-12 01:32:21 3589

Python

Python math库 ln(x)运算的实现及原理

这个是很有用的一个运算,除了本身可以求自然对数,还是求指数函数需要用到的基础函数。实现原理就是泰勒展开,最简单是在x=1处进行泰勒展开:但该函数离1越远越难收敛,同时大于2时无法收敛,所以需要进行换元,然后重新展开:但是该换元在接近0时或者接近无穷大时收敛困难,处在1到10范围内收敛快且精度高,所以对大于10或小于1的值进行分解如下:ln(55000)=ln(5.5)+4ln10ln(0.0015)=ln(1.5)-4ln10ln10为算好的值,可直接由l

系统 2019-09-27 17:50:16 3588

C#

C#中的ODBC、OLEDB连接

原文:C#中的ODBC、OLEDB连接usingSystem;usingSystem.Collections.Generic;usingSystem.Text;usingSystem.Data.Odbc;usingSystem.Data.OleDb;namespaceODBCTest{classProgram{staticvoidMain(string[]args){Console.WriteLine("##########################

系统 2019-08-12 01:52:04 3588

IOS

iOS中编码转化

iOS中编码转化1.UTF-8转化NSString*data=@"你好,北京!";//转换成UTF-8NSString*dataUTF8=[datastringByAddingPercentEscapesUsingEncoding:NSUTF8StringEncoding];NSLog(@"%@",dataUTF8);//UTF-8转GBK,将UTF8代码替换,官方解释如下。//Replacesallpercentescapeswiththematchin

系统 2019-08-29 22:50:23 3587

Hive

hive中的subkeylist的结构详解。。

在网上找了一圈。。也没有找到相关的资料。。一点都没有。。。还有有大米公开的代码供参考。。。赶紧把学习的成果记录下来。。CM_KEY_NODE的结构:+0x014SubKeyCounts:[2]Uint4B//SubKeyCounts[0]子键的个数+0x01cSubKeyLists:[2]Uint4B//SubKeyLists[0]子键列表相差本BIN的偏移这里的subKeyList是一个偏移。。指向CM_KEY_INDEX结构。。最复杂的也是这个结构。。

系统 2019-08-12 09:26:52 3587

redis

[预告] [3月8日] 《Redis 设计与实现》

[预告][3月8日]《Redis设计与实现》[预告][3月8日]《Redis设计与实现》2013-02-2810:36:27自从开始在博客断断续续地写一些Redis的源码分析文章以来,我一直有这样一个打算:不是间隔地、分多次地写多篇Redis的源码分析文章,而是抽出一段时间,对Redis的源码做一次完整的分析,并将其中的关键点、以及有趣的部分记录下来,集结成一个文档(或者更通俗地说,一本书?)。我在2012年12月开始将“Redis源码书”的这个想法付诸实

系统 2019-08-12 01:51:33 3586