Hadoop 2.0 HA 3节点高可用集群搭建 发表于 2018-10-22 | 分类于 大数据 | | 阅读次数: 概览1.集群规划2.准备3.修改Hadoop配置文件4.复制内容5.启动集群6.查看jps7.测试 阅读全文 »
Combiners编程 发表于 2018-10-19 | 分类于 大数据 | | 阅读次数: 这个Combiners编程示范是基于 MapReduce对手机上网记录的简单分析和Partitioner分区 阅读全文 »
Zookeeper的安装 发表于 2018-10-19 | 分类于 大数据 | | 阅读次数: 概览1.Zookeeper简介2.Zookeeper的安装3.Zookeeper的配置4.启动集群5.数据同步测试 阅读全文 »
将MapReduce分析手机上网记录的结果进行排序操作 发表于 2018-10-19 | 分类于 大数据 | | 阅读次数: 上次我们说过了MapReduce对手机上网记录的简单分析和Partitioner分区这次我们介绍一下如何将手机上网记录根据总流量的多少进行排序 阅读全文 »
MapReduce对手机上网记录的简单分析和Partitioner分区 发表于 2018-10-19 | 分类于 大数据 | | 阅读次数: 概览1.MapReduce处理手机上网记录2.Partitioner分区 阅读全文 »
MapReduce的执行流程和原理 发表于 2018-10-18 | 分类于 大数据 | | 阅读次数: 概览1.MapReduce简介2.MapReduce的执行流程3.MapReduce的原理4.测试MapReduce5.Java代码实现 阅读全文 »
Hadoop之简单的hdfs上文件的上传删除及查询 发表于 2018-10-18 | 分类于 大数据 | | 阅读次数: 概览1.Linux上进行上传下载查询操作2.Java代码实现上传下载查询操作 阅读全文 »
Hadoop集群版搭建 发表于 2018-10-17 | 分类于 大数据 | | 阅读次数: 概览1.规划2.克隆虚拟机3.在hosts文件修改ip映射4.修改hadoop配置文件5.更改slaves文件6.集群版ssh免密钥登录7.重新格式化namenode8.启动hadoop并验证是否成功9.若slave的datanode没有启动 阅读全文 »
Hadoop集群单机版搭建 发表于 2018-10-16 | 分类于 大数据 | | 阅读次数: 概览1.CentOS的安装2.设置Linux静态ip3.JDK的安装4.修改主机名和ip映射5.安装hadoop并修改配置文件6.格式化namenode7.启动hadoop8.验证是否启动成功9.设置ssh免密登录 阅读全文 »