搜索到与相关的文章
Hive

Hive安装及使用攻略

前言Hive是Hadoop一个程序接口,Hive让数据分析人员快速上手,Hive使用了类SQL的语法,Hive让JAVA的世界变得简单而轻巧,Hive让Hadoop普及到了程序员以外的人。从Hive开始,让分析师们也能玩转大数据。1.Hive介绍Hive是建立在Hadoop上的数据仓库基础构架。它提供了一系列的工具,可以用来进行数据提取转化加载(ETL),这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive定义了简单的类SQL查询语

系统 2019-08-29 22:25:21 3419

Tomcat

Tomcat内存设置

-Xms512m-Xmx512m-XX:PermSize=256M-XX:MaxPermSize=256M-XX:NewSize=256m-server一定要作为第一个参数,在多个CPU时性能佳-Xms512m初始Heap大小,使用的最小内存,cpu性能高时此值应设的大一些-Xmx512mjavaheap最大值,使用的最大内存-XX:PermSize=256M设定内存的永久保存区域-XX:MaxPermSize=256M设定最大内存的永久保存区域-XX:N

系统 2019-08-12 01:32:18 3419

MySql

【原】mysql 视图

从为知笔记粘过来格式不太对,没有修改了视图是从一个或者多个表中导出来的表,是一种虚拟存在的表,视图就像一个窗口,通过它可以看到系统专门提供的数据。视图可以使用户的操作方便,保证并且数据库系统的安全。内容:视图的作用创建视图查看视图修改视图更新视图删除视图视图简介视图从已经存在的表中导出,还可以从已经存在的视图导出,数据库只保存视图的定义,而没有存放视图的数据。视图的数据还是保存在原来的表中。视图的数据依赖于原来的表,一旦原来的表发生改变,视图的数据也相应变

系统 2019-08-12 01:32:16 3419

Python

python 字符串替换功能 string.replace()可以用正则表达式

说起来不怕人笑话,我今天才发现,python中的字符串替换操作,也就是string.replace()是可以用正则表达式的。之前,我的代码写法如下,粗笨:自从发现了正则表达式也生效后,代码变得优雅简洁:备注:上图中的base_info是pandas里的dataframe数据结构,可以用上述方法使用string的replace方法。

系统 2019-09-27 17:45:25 3417

各行各业

NASA World Wind开源项目配置详解

NASAWorldWind是C#开发的个人电脑上的开源的3D图形虚拟地球系统。它结合了美国国家航空航天局(NASA)从卫星拍摄的图像,这些图像应用于BlueMarble,Landsat7,SRTM,MODIS以及其它更多的地方。用户可以到这里下载.net源码http://worldwind.arc.nasa.gov/下载后,打开解决方案,使用的是.net2.0,一共有16个项目组成。编译整个项目,发现缺少几个程序集的引用。PluginSDK项目需三个引用:

系统 2019-08-12 01:33:36 3417

Python

python连接hive

前言之前在读hive数据的时候,经常使用读hdfsparquet文件的方法,虽然封装函数一样,调用起来也方便,但是总觉得不得劲,既然我需要的是hive数据,为何不直接读hive呢?刚好今天又遇到了这个问题,就花了两个小时,研究了不同的方法,mark一下,以便查阅。好了,进入正题,下面列出了两种方法,但大体上差不多,可根据需要选择。另外,还看到使用impala操作hive的方法,没有详细研究,有空再看看。pyhive在网上查了一下,使用比较多的是pyhs2和

系统 2019-09-27 17:51:36 3416

PostgreSql

redhat6.5安装postgresql8.4数据库

Redhat6.5安装postgresql8.4数据库step1先移除原有的postgresql数据库(如果有),否则直接跳过rpm-qa|greppostgresql*rpm-evrpmNamestep2下载新的postgresqlrpm安装包网址:http://mirrors.sohu.com/centos/6.6/os/x86_64/Packages/wgethttp://mirrors.sohu.com/centos/6.6/os/x86_64/P

系统 2019-08-12 01:54:05 3416

操作系统

XP的定时关机命令?

WindowsXP的关机是由Shutdown.exe程序来控制的,位于Windows/System32文件夹中。如果想让Windows2000也实现相同的效果,能够把Shutdown.exe拷贝到系统文件夹下。比方你的电脑要在22:00关机,能够选择“開始→执行”,输入“at22:00Shutdown-s”,这样,到了22点电脑就会出现“系统关机”对话框,默认有30秒钟的倒计时并提示你保存工作。假设你想以倒计时的方式关机,能够输入“Shutdown.exe

系统 2019-08-12 01:32:27 3416