搜索到与相关的文章
编程技术

MapReduce详解

转载请出自出处:http://eksliang.iteye.com/blog/2228705一.Hadoop1.0中MapReduce的组成1.从功能模块角度客户端:提交MapReduce作业;JobTracker:1.作业调度:将一个作业(Job)分成若干个子任务分发到taskTraker中去执行2.任务监控:TaskTracker发送心跳给JobTracker报告自己的运行状态,以让JobTracker能够监控到他3.资源管理:每个任务向JobTrac

系统 2019-08-12 09:30:36 3399

redis

对redis数据持久化的一些想法

数据持久化通俗讲就是把数据保存到磁盘上,保证不会因为断电等因素丢失数据。redis需要经常将内存中的数据同步到磁盘来保证持久化。redis支持两种持久化方式,一种是Snapshotting(快照)也是默认方式,另一种是Append-onlyfile(缩写aof)的方式。先介绍下这两种dump方式再讲讲自己遇到的一些现象和想法,前面的内容是从网上整理出来的。Snapshotting快照是默认的持久化方式。这种方式是就是将内存中数据以快照的方式写入到二进制文件

系统 2019-08-12 01:53:18 3399

redis

Redis主从服务器

配置主从服务器Redis主从服务器的搭建很简单,只要少许配置即可,为了演示的方便,我们就在一台服务器上配置:前提是你已经有了一台Redis服务器,如果没有可以参考我以前的文章安装。下面看看如何配置从服务器:假设主服务器的配置文件是:/etc/redis.conf,我们复制一份作为从服务器的配置文件:cp/etc/redis.conf/etc/redis_slave.conf并作修改:#vi/etc/redis_slave.confport6380dbfil

系统 2019-08-12 01:53:18 3399

SqlServer

SQL Server存储过程中的异常处理

编程的异常处理很重要,当然Sql语句中存储过程的异常处理也很重要,明确的异常提示能够快速的找到问题的根源,节省很多时间……编程的异常处理很重要,当然Sql语句中存储过程的异常处理也很重要,明确的异常提示能够快速的找到问题的根源,节省很多时间。下面,我就以一个插入数据为例来说明SqlServer中的存储过程怎么捕获异常的。1、环境数据库为SqlServer2008。表(Course)结构为:Nochar(10)primarykeyNamevarchar(20

系统 2019-08-12 01:52:43 3399

编程技术

T-SQL查询:语句执行顺序

读书笔记:《MicrosoftSQLServer2008技术内幕:T-SQL查询》===============T-SQL查询的执行顺序==============================T-SQL查询的示意图===============T-SQL查询:语句执行顺序

系统 2019-08-12 01:32:34 3399

各行各业

新版FAQ的变化——奖励机制的变化

对FAQ贡献者的奖励,在FAQ被审核通过后,将不再立即给与奖励,而在FAQ被阅读到一定次数,并且FAQ被一定次数的人评价为有用后,才会奖励。FAQ这部分的奖励,主要有两类人:1、FAQ整理者对FAQ整理者的奖励,是FAQ被审核通过,大众可以看到这个FAQ后,并且这个FAQ被阅读次数达到一定数量的时候,同时这个FAQ被一定百分比的人评价为有用后,才给与奖励。并且奖励不是满足这个条件就立即给与奖励的,这个奖励是一个定式程序定时运算的。一般会安排这个程序一个月算

系统 2019-08-12 01:32:34 3399

编程技术

Maven

搞了3天,终于搞定了maven+hudson+p4的集成配置。下面一一介绍下各个工具的使用。Maven:安装,解压缩,设置环境变量:C:\Users\tobrien>setM2_HOME=c:\ProgramFiles\maven-2.0.9C:\Users\tobrien>setPATH=%PATH%;%M2_HOME%\binMaven目录结构:StandardLocationDescriptionpom.xmlMaven’sPOM,whichisal

系统 2019-08-29 23:15:28 3398

Python

[Python知识图谱] 四.Python和Gephi实现中国知网合作关系知识图谱

该系列文章主要讲解知识图谱或关系图谱的构建方法,前文介绍了Neo4j图数据库和Jieba、PyLTP的基本用法。本篇文章主要采用Python和Gephi构建中国知网某个领域的作者合作关系和主题词共现的知识图谱,重点阐述了一种可操作的关系图谱构建方法,可用于论文发表、课程或企业可视化展示等。其基本步骤如下:1.在中国知网搜索“清水江”关键词,并导出论文Excel格式。2.使用Python处理文本,获取作者合作的共现矩阵及三元组。3.Gephi导入CSV节点及

系统 2019-09-27 17:54:13 3397

编程技术

通过Toad工具查看dmp里面的表

今天有同事要查看dmp里面的表是否有数据,虽然可以把单表数据通过exp导出查看,但还是稍显有点麻烦,要花时间。无意中发现toad工具可以直接查看dmp里面的表数据。第一步:Database-->Export-->ExportfileBrowse第二步:找到dmp文件第三步:查看表内容通过Toad工具查看dmp里面的表

系统 2019-08-12 01:33:45 3397