大数据

来源:互联网 发布:山东恒邦网络 编辑:程序博客网 时间:2024/05/01 14:54

认识Map-Reduce
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
根据哈希函数的性质,我们知道,单词相同的任务会被分在一起。

reduce阶段
这里写图片描述

Map-Reduce的优势在于大数据处理。

常见海量处理题目解题关键
这里写图片描述

案例1
请对10亿个IPV4的ip地址进行排序,每个ip只会出现一次。
思路:先转为整数,再排序
这里写图片描述
下介绍更省空间的方法
这里写图片描述
没明白!!
这里写图片描述

案例2
请对10亿人的年龄进行排序
这里写图片描述

大数据题目多为面试题,重点是展现个人思维能力

原创粉丝点击