您现在的位置是:首页 >技术杂谈 >大数据Mapreduce实验网站首页技术杂谈

大数据Mapreduce实验

凌夙ls 2024-09-26 00:01:03
简介大数据Mapreduce实验

1.使用课堂讲解的Hadoop mapreduce,编写map类和reduce类。(至少完成2项)

(1)对天气数据,计算每个城市id的最高气温(最大值)

(2)对天气数据,计算每个城市id的最低气温(最小值)

(3)对天气数据,计算每个城市id的气温次数(计数)

(4)对天气数据,计算每个城市id的平均气温(平均值)

2.对一个包含大量整数的文件进行统计分析,将尾数相同的数字放在同一个文件中(用分区实现)。

咱也不整虚的,先上一波实现以后的效果叭,然后给大家讲这究竟是咋整的。

1、

2、

那怎么实现这个效果嘞,咱心急吃不了热豆腐哈,没有配置好环境的用不了,没有把要处理的文件放在hdfs指定路径下的用不了。

1、我的环境

hadoop-3.3.

风语者!平时喜欢研究各种技术,目前在从事后端开发工作,热爱生活、热爱工作。