本文主要是介绍Hadoop之sequencefile与text类型转化,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
sequencefile格式转text格式
这里仅针对输入格式为<\Text, IntWritable>的键值对sequencefile文件,可根据实际需要修改,最终输出文本格式。
package org.apache.hadoop.examples;import java.io.IOException;
import java.util.Iterator;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
import org.apache.hadoop.mapreduce.lib.input.SequenceFileInputFormat;
import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;
import org.apache.hadoop.util.GenericOptionsParser;public class SequencefileToText {public static class ReaderMapper extends Mapper<Text, IntWritable, Text, Text> {protected void map(Text key, IntWritab
这篇关于Hadoop之sequencefile与text类型转化的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!