Os resultados finais de uma operação de redutor de mapa são indexados?

Question

Estou tentando descobrir como posso iterar nos resultados finais de uma operação de redução de mapa, então acho que deve haver algum tipo de índice nos resultados do mapa?

Answer 1

Para o Hadoop MapReduce, a saída do estágio de redução é um arquivo classificado por chave. Para iterar os resultados de um trabalho MapReduce no Hadoop, você precisaria escrever seu próprio código para ler esses arquivos ou usar outro trabalho MapReduce. Isso dependeria do que você deseja fazer com os resultados.

O tipo de arquivo que o trabalho criará é configurável, portanto, pode ser um arquivo de texto simples ou arquivos de sequência.