Примеры Hadoop Отказоустойчивость

Question

В hadoop-examples.jar, Я знаю, что для TeraSort мы можем использовать TeraValidate для проверки вывода. Есть ли аналогичный способ проверки вывода примера Sort?

Кроме того, я попытался с TeraValidate проверить валидность сортировки, но это дает мне ошибку.

Ниже приводится выход TeraValidate,

> error misorder in part-00001 last: ';:widdl' current: ')(winga' 
> error misorder in part-00001 last: 'scrat bact' current: 'FEBassa' 
> error misorder in part-00001 last: 'FEBassa' current: '?>Fouqu' 
> error misorder in part-00001 last: '?>Fouqu' current: '=<Itali' 
> error misorder in part-00001 last: 'shola spec' current: 'XWLemur' 
> error misorder in part-00001 last: 'biventer L' current: '43Mesua' 
> error misorder in part-00001 last: 'ploration ' current: 'pinulus ar' 
> error misorder in part-00001 last: 'pinulus ar' current: 'hgShiah' 
> error misorder in part-00001 last: 'pendulant ' current: '/.Tamil' 
> error misorder in part-00001 last: '`_Whilk' current: '54Yanni' 
> error misorder in part-00001 last: 'ribaldrous' current: 'cinque cha' 

Answer 1

Я только что проверил teravalidate работает только для terasort. Нет стандартного задания для проверки вывода Sort.

Именно поэтому TeraSort используется для большинства этапов бенчмаркинга, потому что там есть все TeraGen, TeraSort, TeraValidate для себя.