搜索到与相关的文章
Hadoop

hadoop经典系列(六)2.x的mapreduce过程图解

从业界使用分布式系统的变化趋势和hadoop框架的长远发展来看,MapReduce的JobTracker/TaskTracker机制需要大规模的调整来修复它在可扩展性,内存消耗,线程模型,可靠性和性能上的缺陷。在过去的几年中,hadoop开发团队做了一些bug的修复,但是最近这些修复的成本越来越高,这表明对原框架做出改变的难度越来越大。为从根本上解决旧MapReduce框架的性能瓶颈,促进Hadoop框架的更长远发展,从0.23.0版本开始,Hadoop的

系统 2019-08-12 09:30:06 3456

数据库相关

Create a CSV file

CreateaCSVfile|GroovyExamplesCreateaCSVfileJune21st,20105CommentsForthisexample,let’sassumewehaveanarrayofmapsasourdata.defplanets=[[id:'1',color:'red',planet:'mars',description:'Mars,the"red"planet'],[id:'2',color:'green',planet:

系统 2019-08-12 01:32:14 3456

编程技术

Clustering by density peaks and distance

这次介绍的是Alex和Alessandro于2014年发表在的Science上的一篇关于聚类的文章[13],该文章的基本思想很简单,但是其聚类效果却兼具了谱聚类(SpectralClustering)[11,14,15]和K-Means的特点,着实激起了我的极大的兴趣,该聚类算法主要是基于两个基本点:聚类中心的密度高于其临近的样本点的密度聚类中心与比其密度还高的聚类中心的距离相对较大基于这个思想,聚类过程中的聚类中心数目可以很直观的选取,离群点也能被自动检

系统 2019-08-12 01:32:30 3454

VMware

用vmware安装redhat 9出现“光盘无法被挂载”错

今天在用vmware安装redhat的时候,提示:redhat请插入第二张光盘后再继续加载后,点击确认,提示:光盘无法被挂载。以为光盘镜像出了问题。放弃,并删除安装了一大半的redhat虚拟文件,但没有删除镜像。晚上有空再试试,还是不行。从网上搜索,才发现不只我一个人有这个问题。该光盘无法被挂载vmware装redhat出现无法挂载光盘解决方法用VMWARE装REDHAT,到第二张时提示换盘,选择后确定提示:反复试都不行,最后找到方法,在VMWARE右下角

系统 2019-08-29 22:24:33 3452

编程技术

你是一个合格的程序员吗?

只会写程序的程序员,永远只是一名普通程序员。跳槽后的一个月,我把自己一个人关在房间里,思考:我毕业两年了,我都做了些什么。我该怎么继续做下去,怎么做得更好前两年,只是想混迹于软件的江湖中,成为江湖中人。现在亦然江湖大哥的我,彷徨的于各类洒家中..有些感悟,刻于此碑,共勉:(1)抓大放小:对一个国家是这样,做程序也是这样,别太纠结一些细节了。主要的逻辑结构啊,效率啊,都OK,那就OK,我们要的是材料是钢筋的就行有很好的健壮性,很好的性能就行,不是搞得跟花雕说

系统 2019-08-12 09:30:05 3452

编程技术

数据挖掘有关术语(Glossary)

数据挖掘有关术语(Glossary)人工神经网络(ArtificialNeuralNetworks)一种非线性预测模型,通过训练和在结构上模仿生物神经网络来学习。分类和衰退树(CARTClassificationandRegressionTrees)一种用于数据集分类决策树技术。它提供一套也可用于一个新的未分类的数据集的规则,以预测哪些记录将有一个给定的结果。通过创建一个两路分化对一个数据集进行分段。较CHAID技术,它需要较少的数据准备。正方自动交互发现

系统 2019-08-12 01:33:16 3452

IOS

iOS5:[UIDevice uniqueIdentifier]的替代方案

iOS5之后,原来获取iPhone的DeviceId的接口:[UIDeviceuniqueIdentifier]被废弃!这个改动会影响非常多的人,尤其是数据分析者。由于iPhone取IMEI困难(属于私有方法),所以大多数应用将DeviceId,也就是uniqueIdentifier作为IMEI来使用。如果这个接口被废弃,那么,我们就需要寻求一个新的方式来标识唯一的设备。官方推荐的方法是,每个应用内创建一个UUID来作为唯一标志,并将之存储,但是这个解决方

系统 2019-08-12 01:33:03 3452

Javascript

小矮人Javascript模块加载器

https://github.com/miniflycn/webkit-dwarf短小精悍的webkit浏览器Javascript模块加载器Why我们有许多仅基于webkit浏览器开发的应用无论是使用requirejs还是seajs都需要先加载完模块加载器本身之后才能加载其他模块无论出于首屏优化需要,还是手机2G优化需要,我们都需要一个足够小的模块加载器内置CDN失败回源策略AMD&CMDrequire([module],callback);这是AMD规范

系统 2019-08-12 01:33:03 3451

Tomcat

Tomcat启动错误及解决方法

错误信息:1.org.apache.commons.dbcp.SQLNestedException:CannotcreatePoolableConnectionFactory(NetworkerrorIOException:Connectionrefused:connect)2.Causedby:java.sql.SQLException:NetworkerrorIOException:Connectionrefused:connect3.Causedby

系统 2019-08-12 01:32:47 3451