小编Ash*_*hok的帖子

如何使用hadoop mapreduce程序在单个文件中删除重复值


如何使用hadoop mapreduce程序

在单个文件中消除重复值在输出中我需要唯一的值

例如:在文件

行1:嗨这是Ashok

第2

行:hadoop框架第3行的基础知识:这是Ashok

来自这个例子需要输出唯一的值,即它应该打印第1行和第3行...如何做...

hadoop mapreduce map

1
推荐指数
1
解决办法
904
查看次数

标签 统计

hadoop ×1

map ×1

mapreduce ×1