欢迎您的访问
一个专注于Java技术系列文章的技术分享网站
关注我们

—— 加入社群 ——
「十大城市」工作内推
「微信/QQ」技术讨论
「面试真题」随时领取
公众号名称:搜云库技术团队  公众号ID:souyunku
关注公众号后发送 口令 获取关闭弹窗地址
公众号每天中午 12:20 为你推送一篇技术文章

Hadoop

Hadoop教程,Hadoop面试题,Hadoop源码解析,Hadoop安装,Hadoop性能调优

专栏汇总:Hadoop 教程

souyunku阅读(30)评论(0)赞(0)

一、Hadoop 关于 二、Hadoop 简介 三、Hadoop 写文件 四、Hadoop 读文件 五、Hadoop 可靠性 六、Hadoop 命令工具 七、Hadoop ResourceManager 八、Hadoop NodeManag...

二十一、Hadoop 参考

souyunku阅读(12)评论(0)赞(0)

文章永久连接:https://tech.souyunku.com/?p=7984 Hadoop – 参考 Yahoo教程 细细品味Hadoop HDFS 原理、架构与特性介绍 Hadoop MapReduce开发最佳实践 Map...

二十、Hadoop 监控

souyunku阅读(12)评论(0)赞(0)

文章永久连接:https://tech.souyunku.com/?p=7986 Hadoop 监控 Log yarn.log-aggregation-enable=true如果显示错误,则日志存储在节点管理器运行节点上。当聚集启用时所有日...

十九、Hadoop 配置

souyunku阅读(12)评论(0)赞(0)

文章永久连接:https://tech.souyunku.com/?p=7988 Hadoop配置 有两种配置文件: 一种是__-default.xml(只读,默认的配置) 一种是#x662F;__-...

十八、Hadoop 安装

souyunku阅读(12)评论(0)赞(0)

文章永久连接:https://tech.souyunku.com/?p=7990 Hadoop安装 单节点安装 所有服务运行在一个JVM中,适合调试、单元测试 伪集群 所有服务运行在一台机器中,每个服务都在独立的JVM中,适合做简单、抽样测...

十七、Hadoop 测试

souyunku阅读(14)评论(0)赞(0)

文章永久连接:https://tech.souyunku.com/?p=7992 Hadoop 测试 MRUnit单元测试Mapper和Reducer类在内存上独立运行, PipelineMapReduceDriver单线程运行. Loca...

十六、Hadoop IO

souyunku阅读(16)评论(0)赞(0)

文章永久连接:https://tech.souyunku.com/?p=7994 Hadoop – IO 1、 输入文件从HDFS进行读取. 2、 输出文件会存入本地磁盘. 3、 Reducer和Mapper间的网络I/O,从M...

十五、Hadoop 编程

souyunku阅读(18)评论(0)赞(0)

文章永久连接:https://tech.souyunku.com/?p=7996 MapReduce – 编程 处理 1、 select:直接分析输入数据,取出需要的字段数据即可 2、 where: 也是对输入数据处理的过程中进...

十四、Hadoop Shuffle

souyunku阅读(10)评论(0)赞(0)

文章永久连接:https://tech.souyunku.com/?p=7998 MapReduce – Shuffle 对Map的结果进行排序并传输到Reduce进行处理 Map的结果并不#x662F;直接存放到硬盘,...

一个专注于Java技术系列文章的技术分享网站