您现在的位置是:首页 >技术杂谈 >大数据Mapreduce实验网站首页技术杂谈
大数据Mapreduce实验
简介大数据Mapreduce实验
1.使用课堂讲解的Hadoop mapreduce,编写map类和reduce类。(至少完成2项)
(1)对天气数据,计算每个城市id的最高气温(最大值)
(2)对天气数据,计算每个城市id的最低气温(最小值)
(3)对天气数据,计算每个城市id的气温次数(计数)
(4)对天气数据,计算每个城市id的平均气温(平均值)
2.对一个包含大量整数的文件进行统计分析,将尾数相同的数字放在同一个文件中(用分区实现)。
咱也不整虚的,先上一波实现以后的效果叭,然后给大家讲这究竟是咋整的。
1、
2、
那怎么实现这个效果嘞,咱心急吃不了热豆腐哈,没有配置好环境的用不了,没有把要处理的文件放在hdfs指定路径下的用不了。
1、我的环境
hadoop-3.3.
风语者!平时喜欢研究各种技术,目前在从事后端开发工作,热爱生活、热爱工作。