欢迎您的访问
专注于Java技术系列文章的Java技术分享网站

Hadoop 教程

Hadoop教程,Hadoop面试题,Hadoop源码解析,Hadoop安装,Hadoop性能调优

专栏汇总:Hadoop 教程

站长阅读(602)评论(0)赞(62)

一、Hadoop 关于 二、Hadoop 简介 三、Hadoop 写文件 四、Hadoop 读文件 五、Hadoop 可靠性 六、Hadoop 命令工具 七、Hadoop ResourceManager 八、Hadoop NodeManag...

二十一、Hadoop 参考

站长阅读(785)评论(0)赞(77)

文章永久连接:https://tech.souyunku.com/?p=7984 Hadoop – 参考 Yahoo教程 细细品味Hadoop HDFS 原理、架构与特性介绍 Hadoop MapReduce开发最佳实践 Map...

二十、Hadoop 监控

站长阅读(810)评论(0)赞(77)

文章永久连接:https://tech.souyunku.com/?p=7986 Hadoop 监控 Log yarn.log-aggregation-enable=true如果显示错误,则日志存储在节点管理器运行节点上。当聚集启用时所有日...

十九、Hadoop 配置

站长阅读(826)评论(0)赞(70)

文章永久连接:https://tech.souyunku.com/?p=7988 Hadoop配置 有两种配置文件: 一种是__-default.xml(只读,默认的配置) 一种是#x662F;__-...

十八、Hadoop 安装

站长阅读(829)评论(0)赞(69)

文章永久连接:https://tech.souyunku.com/?p=7990 Hadoop安装 单节点安装 所有服务运行在一个JVM中,适合调试、单元测试 伪集群 所有服务运行在一台机器中,每个服务都在独立的JVM中,适合做简单、抽样测...

十七、Hadoop 测试

站长阅读(789)评论(0)赞(86)

文章永久连接:https://tech.souyunku.com/?p=7992 Hadoop 测试 MRUnit单元测试Mapper和Reducer类在内存上独立运行, PipelineMapReduceDriver单线程运行. Loca...

十六、Hadoop IO

站长阅读(815)评论(0)赞(73)

文章永久连接:https://tech.souyunku.com/?p=7994 Hadoop – IO 1、 输入文件从HDFS进行读取. 2、 输出文件会存入本地磁盘. 3、 Reducer和Mapper间的网络I/O,从M...

十五、Hadoop 编程

站长阅读(819)评论(0)赞(97)

文章永久连接:https://tech.souyunku.com/?p=7996 MapReduce – 编程 处理 1、 select:直接分析输入数据,取出需要的字段数据即可 2、 where: 也是对输入数据处理的过程中进...

十四、Hadoop Shuffle

站长阅读(805)评论(0)赞(77)

文章永久连接:https://tech.souyunku.com/?p=7998 MapReduce – Shuffle 对Map的结果进行排序并传输到Reduce进行处理 Map的结果并不#x662F;直接存放到硬盘,...

一个专注于Java技术系列文章的技术分享网站