Hadoop é uma opção para criar índices SOLR. Eu não fiz isso em primeira mão, mas ouvi de pessoas como etsy quem é.

Neste neste curso na revolução lucene eles falaram sobre o uso do hadoop para atualizar os índices em alguns núcleos SOLR. Infelizmente, não acho que o material do curso esteja disponível publicamente.

E nesta esta palestra o palestrante falou sobre o suporte ao mongo/hadoop.

Outros links relacionados:

• Indexação de arquivos via Solr e Java MapReduce
• Usando o Hadoop para criar o Solr Índices
• Conector Mongo-Hadoop