plugin(插件)为nutch提供了一些功能强大的部件，举个例子，HtmlParser就是使用比较普遍的用来分析nutch抓取的html文件的插件。为什么nutch要使用这样的plugin系统?有三个原因：1：可扩展性通过plugin，nutch允许任何人扩展它的功能，而我们要做的只是对给定的接口做简单的实现，举个例子：MSWordParser这个插件是用来分析wordwendang的，它就是一个对parser这个接口的实现2：灵活性因为每个人都可以根据
系统 2019-08-12 09:27:33 2422
原文:SQLServer安全性专题一：简介一、安全威胁与法则1、安全定义2、安全威胁3、安全法则安全定义：在SQLServer环境中，安全性可以认为是【数据保护】。包括：数据只能被已授权的用户访问。数据被安全地存储。数据要被安全地传输。数据可恢复以下是详解：1、数据只能被已授权的用户访问：必须使用一个强身份验证机制去确保数据被安全地访问。从2000开始（以前的没用过），允许SQL登录及Windows认证登录。其中Windows身份验证更为安全。2、
系统 2019-08-12 01:55:02 2422
oracle数据库中Date类型倒入到hive中出现时分秒截断问题解决方案1.问题描述：用sqoop将oracle数据表倒入到hive中，oracle中Date型数据会出现时分秒截断问题，只保留了‘yyyy-MM-dd',而不是’yyyy-MM-ddHH24:mi:ss'格式的，后面的‘HH24:mi:ss’被自动截断了，在对时间要求到秒级的分析处理中这种截断会产生问题。2.解决方案：在用sqoop倒入数据表是，添加--map-column-hive和--
系统 2019-08-12 01:54:36 2422
做oracle时配置的，goldengate是同步异构数据库最好的工具。这个是基于oracletooracle单向复制添加增量复制进程addextractprocess----Extractparameterfiletocapture--EXTRACTEIEX_EFSETENV(NLS_LANG="AMERICAN_AMERICA.AL32UTF8")SETENV(ORACLE_SID=erpdb)useridsystem@erpdb,PASSWORDer
系统 2019-08-12 01:53:30 2422
http://poj.org/problem?id=1095先打个表然后dfs一下#include#include#include#include#include#include#include#include#include#defineLLlonglongusingnamespacestd;constintN
系统 2019-08-12 01:53:29 2422
用CUBE汇总数据CUBE运算符生成的结果集是多维数据集。多维数据集是事实数据的扩展，事实数据即记录个别事件的数据。扩展建立在用户打算分析的列上。这些列被称为维。多维数据集是一个结果集，其中包含了各维度的所有可能组合的交叉表格。CUBE运算符在SELECT语句的GROUPBY子句中指定。该语句的选择列表应包含维度列和聚合函数表达式。GROUPBY应指定维度列和关键字WITHCUBE。结果集将包含维度列中各值的所有可能组合，以及与这些维度值组合相匹配的基础行
系统 2019-08-12 01:52:14 2422
读Linux内核中的vsprintf函数的时候遇到了C语言的可变参数调用，查了挺多资料还是这篇比较详细，而且自己验证了下，确实如此(一)写一个简单的可变参数的C函数下面我们来探讨如何写一个简单的可变参数的C函数.写可变参数的C函数要在程序中用到以下这些宏:voidva_start(va_listarg_ptr,prev_param);typeva_arg(va_listarg_ptr,type);voidva_end(va_listarg_ptr);va在
系统 2019-08-12 01:52:13 2422
overviewofthepgapga是在操作系统的进程或是线程特定的一块内存区域，它不是共享的。因为pga是进程指定的，因此它不会在sga中分配。pga是一个内存堆，其中包含了被专用服务器或是共享服务器金曾锁需要的一些会话变量信息。服务器进程需要在pga中分配一些所需的内存结构。一个比喻为，pga是一个临时的文件管理员的工作区域，这个文件管理员就是服务进程，她是为客户服务工作的（clientprocess），然后文件管理员把工作区域分为很多的区域，然后来
系统 2019-08-12 01:52:08 2422
本文设计的动静分离结构在本文中，我们将静态资源放在A主机的一个目录上，将动态程序放在B主机上，同时在A上安装Nginx并且在B上安装Tomcat。配置Nginx，当请求的是html、jpg等静态资源时，就访问A主机上的静态资源目录；当用户提出动态资源的请求时，则将请求转发到后端的B服务器上，交由Tomcat处理，再由Nginx将结果返回给请求端。提到这，可能有您会有疑问，动态请求要先访问A，A转发访问B，再由B返回结果给A，A最后又将结果返回给客户端，这是
系统 2019-08-12 01:33:43 2422
转自：http://www.mike.org.cn/blog/index.php?load=read&id=639###pp=0[rsync实现网站的备份，文件的同步，不同系统的文件的同步，如果是windows的话，需要windows版本cwrsync]一、什么是rsyncrsync，remotesynchronize顾名思意就知道它是一款实现远程同步功能的软件，它在同步文件的同时，可以保持原来文件的权限、时间、软硬链接等附加信息。rsync是用“rsyn
系统 2019-08-12 01:33:07 2422
