Hadoop

2019-03-02chenssy阅读(5131)评论(2)赞(10)

小编从今年开始就学习大数据了，但是除了 《Hadoop 权威指南》 之外并没有找到很好的入门资料，这个系列文章是小编在查询大数据相关资料的时候无意中发现的，稍微浏览了下，真是一个大数据入门的全系列文章，于是小编一口气把他看完，然后配上 ...

2019-03-02chenssy阅读(1043)评论(0)赞(1)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 求所有两两用户之间的共同好友 数据格式 A:B,C,D,F,E,O B:A,C,E,K C:F,A...

2019-03-02chenssy阅读(691)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 第一题 下面是三种商品的销售数据  要求：根据以上数据，用 MapReduce 统计出如下数据： ...

2019-03-02chenssy阅读(778)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 数据及需求 数据格式 movies.dat　　3884条数据 1::Toy Story (1995...

2019-03-02chenssy阅读(860)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 学生成绩---增强版 数据信息 1 computer,huangxiaoming,85,86,41...

2019-03-02chenssy阅读(870)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html YARN 1.1、YARN 概述 YARN（Yet Another Resource Negoti...

2019-03-02chenssy阅读(663)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 概述 1、MapReduce 中，mapper 阶段处理的数据如何传递给 reducer 阶段，是...

2019-03-02chenssy阅读(714)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html MapReduce的输入 作为一个会编写MR程序的人来说，知道map方法的参数是默认的数据读取组件...

2019-03-02chenssy阅读(788)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html MapReduce Join 对两份数据data1和data2进行关键词连接是一个很通用的问题，如...

2019-03-02chenssy阅读(641)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 前言 在Hadoop中，排序是MapReduce的灵魂，MapTask和ReduceTask均会对...

2019-03-02chenssy阅读(804)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 流量统计项目案例 样本示例 需求 1、 统计每一个用户（手机号）所耗费的总上行流量、总下行流量，总...

2019-03-02chenssy阅读(798)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 对combiner的理解 combiner其实属于优化方案，由于带宽限制，应该尽量map和redu...

2019-03-02chenssy阅读(648)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html Partitioner分区类的作用是什么？ 在进行MapReduce计算时，有时候需要把最终的输出...

2019-03-02chenssy阅读(685)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html MapReduce 多 Job 串联 需求 一个稍复杂点的处理逻辑往往需要多个 MapReduce...

2019-03-02chenssy阅读(662)评论(0)赞(0)

作者：扎心了，老铁 出处：https://www.cnblogs.com/qingyunzong/category/1169344.html 概述 一个完整的 MapReduce 程序在分布式运行时有两类实例进程： 1、MRAppMaste...