Quiero acces el valor myCounter.my en reductor:cómo acceder al valor del contador de Mapper en un Reducer?
public static class Map extends Mapper<LongWritable, Text, ImmutableBytesWritable, ImmutableBytesWritable>
{
public static enum myCounter{my};
@Override
public void map(LongWritable key, Text value, Context context)
{
context.getCounter(myCounter.my).increment(1);
context.write(new ImmutableBytesWritable (),new ImmutableBytesWritable());
}
}
public static class Reduce extends Reducer<ImmutableBytesWritable, ImmutableBytesWritable, Text, Text>
{
@Override
public void reduce(ImmutableBytesWritable key,Iterable<ImmutableBytesWritable> result,Context context)
{
}
}
Accessing a mapper's counter from a reducer(for old API is given) cómo hacer que funcione para nueva API?
O
Quiero saber el número total de la producción asignador? Hay alguna forma mejor ? (No soy capaz de acceder a la receta en Reductor:
Group Name->org.apache.hadoop.mapred.Task$Counter Counter Name->MAP_OUTPUT_RECORDS
)
Gracias
¿qué versión de hadoop estás usando? – faizan
Hadoop 0.20.0 API –
@faizan: Hadoop 0.20.0 API –