MongoDB
 sql >> Base de Dados >  >> NoSQL >> MongoDB

Saída do Hadoop HDFS MapReduce no MongoDb


Você quer «MongoDB Connector for Hadoop» . Os exemplos .

É tentador apenas adicionar código em seu Redutor que, como efeito colateral, insere dados em seu banco de dados. Evite esta tentação. Um motivo para usar um conector em vez de apenas inserir dados como um efeito colateral de sua classe redutora é a execução especulativa:o Hadoop às vezes pode executar duas das mesmas tarefas de redução em paralelo, o que pode levar a inserções estranhas e dados duplicados.