CentOS7+Hadoop2.7.2(HA高可用+Federation联邦)+Hive1.2.1+Spark2.1.0 完全分布式集群安装详解

  本文档主要记录了Hadoop+Hive+Spark集群安装过程,并且对NameNode与ResourceManager进行了HA高可用配置,以及对NameNode的横向扩展(Federation联邦) &n...

HIVE开发总结详解

  基本数据类型... 3 查看所有函数... 3 搜索函数... 3 搜索表... 4 查看函数使用方法... 4 关键字补全... 4 显示表头... 4 S...

hadoop2.7.3编译,支持snappy、bzip2本地压缩详解

软件包: apache-ant-1.9.9-bin.tar.gz apache-maven-3.3.9-bin.tar.gz apache-tomcat-6.0.44.tar.gz...

大数据学习环境搭建(CentOS6.9+Hadoop2.7.3+Hive1.2.1+Hbase1.3.1+Spark2.1.1)详解

@font-face { font-family: 宋体 } @font-face { font-family: 宋体 } @font-face { font-family: Calibri } @font-face { font-f...

Hadoop社区版搭建详解

1.环境准备 1.1 硬件配置 设备名 参数 数量 6台 系统 centos6.5 内存 64G...

Hadoop项目开发笔录详解

1.概要 我打算分享一下,我开发Hadoop的一些心得,对于即将步入Hadoop行业的童鞋,希望我整理的这些博文对您有帮助,我打算分为以下几部分来描述。 2.步骤   注:点击链接可直接跳到指定位置 Hadoop社区...

Hive的安装部署详解

1.环境准备 1.1软件版本 hive-0.14 下载地址 2.配置 安装hive的前提,必需安装好hadoop环境,可以参考我之前Hadoop社区版搭建,先搭建好hadoop环境;接下来我们开始配置hive 2.1环境变量...

SQOOP安装部署详解

1.环境准备 1.1软件版本 sqoop-1.4.5 下载地址 2.配置 sqoop的配置比较简单,下面给出需要配置的文件 2.1环境变量 sudo vi /etc/profile SQOOP_HOME=/ho...

hadoop家族成员详解

1.概述   使用hadoop已经有一段时间了,从最开始懵懂到迷茫,再到各种阅读与写作,再到如今各种组合应用,逐渐已经离不开hadoop了,hadoop在大数据行业的成功,加速了它本身的发展,各大社区都能见到hadoop的身影。现在had...

hbase和zookeeper的安装和部署详解

1.概要 1.1HBase的使用场景  大数据量 (100s TB级数据) 且有快速随机访问的需求。  例如淘宝的交易历史记录。数据量巨大无容置疑,面向普通用户的请求必然要即时响应。  容量的优雅扩展。  大数据的驱使,动...