今天看Data-IntensiveTextProcessingwithMapReduce这本书的第三章的时候，里面有写到在map端优化wordcount。对数据密集型数据进行分布式处理的时候，影响数据处理速度的非常重要的一个方面就是map的输出中间结果，在传送到reduce的过程中，很多的中间数据需要进行交换以及包括一些相应的处理，然后再交给相应的reduce。其中中间数据需要在网络中传输，另外中间数据在发送到网络上之前还要写到本地磁盘上，因为网络带宽和磁
系统 2019-08-12 09:26:51 2746
1.带参数的存储过程setANSI_NULLSONsetQUOTED_IDENTIFIERONGOALTERPROCEDURE[dbo].[sp_select_gua]@numintASBEGIN--SETNOCOUNTONaddedtopreventextraresultsetsfrom--interferingwithSELECTstatements.SETNOCOUNTON;selectmeanfromtb_guawhereid=@numENDC#中
系统 2019-08-12 01:55:00 2746
目前在弄文件缓存的时候用到了判定文件存在与否，is_file()还是file_exists()呢？is_file和file_exists两者效率比较起来，谁的运行速度更快呢？还是做个测试吧：1234567891011121314151617181920212223
系统 2019-08-12 01:54:48 2746
1.您的缓冲区命中率是多少？缓冲区命中率select(1-(sum(decode(name,'physicalreads',value,0))/(sum(decode(name,'dbblockgets',value,0))+sum(decode(name,'consistentgets',value,0)))))*100"HitRatio"fromv$sysstat;2.您的数据字典命中率是多少？数据字典缓存命中率select(1-(sum(getmis
系统 2019-08-12 01:54:48 2746
1.job相关的功能。SQL>descdbms_job;ElementType---------------------------ANY_INSTANCECONSTANTISUBMITPROCEDURESUBMITPROCEDUREREMOVEPROCEDURECHANGEPROCEDUREWHATPROCEDURENEXT_DATEPROCEDUREINSTANCEPROCEDUREINTERVALPROCEDUREBROKENPROCEDURERUN
系统 2019-08-12 01:54:45 2746
临时需要将Mysql中一张表导出成Excel表格，有个phpexcel的插件可以用，我觉得有点麻烦，况且我是临时要备份的，就直接自己写了。
系统 2019-08-12 01:54:42 2746
sqoop从oracle定时增量导入数据到hive感谢：http://blog.sina.com.cn/s/blog_3fe961ae01019a4l.htmlhttp://f.dataguru.cn/thread-94073-1-1.htmlsqoop.metastore.client.record.passwordhttp://blog.csdn.net/ryantotti/article/details/14226635开启sqoopmetastor
系统 2019-08-12 01:54:36 2746
索引索引提供指针以指向存储在表中指定列的数据值，然后根据指定的排列次序排列这些指针。数据库使用索引的方式与使用书的目录很相似：通过搜索索引找到特定的值，然后跟随指针到达包含该值的行。一、什么是索引数据库中的索引与书籍中的目录类似，在一本书中，利用目录可以快速查找所需信息，无须阅读整本书。在数据库中，索引使数据库程序无须对整个表进行扫描，就可以在其中找到所需数据。书中的目录是一个词语列表，其中注明了包含各个词的页码。而数据库中的索引是某个表中一列或者若干列值
系统 2019-08-12 01:53:10 2746
通常情况下数据库引擎每访问一个数据块将产生至少一个逻辑读。而行预取与逻辑读息息相关。行预取是指当客户端从数据库获取数据时可以采用单行也可以采用多行方式返回数据。当采用多行方式时，则会预取多条记录存储在客户端内存中以避免后续多次该数据的请求所致的各种开销(LIO，PIO，NETIO)。一般预取行数越大，则所产生的开销越小，当达到临界值时其变化不大。一、演示1、创建演示表scott@CNMMBO>select*fromv$versionwhererownum<
系统 2019-08-12 01:52:08 2746
嵌套组件这些组件是针对Tocmat做的特定实现，他们的主要目的是使各种Tomcat容器可以完成各自的工作。1、阀（Valve）valve是处理元素，它可以被包含在每个Tomcat容器的处理路径中--如engine、host、context以及servelt包装器。若要增加Valve到Tomcat容器则需要在server.xml中使用标签。在server.xml中这些标签的执行顺序与其物理顺序相同。而在Tomcat中也分布这大量预先编译好的va
系统 2019-08-12 01:33:09 2746
