mapreduce

9La chaleur

2Répondre

Amazon MapReduce aucun travail de réduction

Je suis en train de créer un travail de mappeur uniquement via AWS (un travail de streaming). Le champ réducteur est requis, donc je donne un exécutable fictif, et en ajoutant -jobconf mapred.map.task

1La chaleur

3Répondre

Netezza, Teradata, DB2 Parallèle/Entreprise, ... par rapport à Hadoop ou autres?

Je cherche à construire une infrastructure d'entreposage et d'interrogation de données, en plus des solutions Map/Reduce comme Hadoop. Cependant, il me semble que tout le travail de M/R ne fait que ré

10La chaleur

5Répondre

Erreur dans Hadoop MapReduce

Lorsque j'exécute un programme mapreduce utilisant Hadoop, j'obtiens l'erreur suivante. 10/01/18 10:52:48 INFO mapred.JobClient: Task Id : attempt_201001181020_0002_m_000014_0, Status : FAILED ja

22La chaleur

5Répondre

Exécution d'un travail Hadoop sans utiliser JobConf

Je ne trouve pas un seul exemple de soumission d'un travail Hadoop qui n'utilise pas la classe obsolète JobConf. JobClient, qui n'a pas été déprécié, prend toujours en charge uniquement les méthodes q

3La chaleur

2Répondre

Mapreduce avec Riak

Est-ce que quelqu'un a un exemple de code pour mapreduce pour Riak qui peut être exécuté sur un seul noeud Riak.

0La chaleur

2Répondre

Mot clé STREAM dans un script cochon qui s'exécute dans Amazon Mapreduce

J'ai un script cochon qui active un autre programme python. J'ai été capable de le faire dans mon propre environnement hadoop, mais j'échoue toujours lorsque je lance mon script dans Amazon map. Le jo

2La chaleur

3Répondre

Hadoop rechercher des mots d'un fichier dans un autre fichier

Je veux construire une application hadoop qui peut lire les mots d'un fichier et chercher dans un autre fichier. Si le mot existe - il doit écrire dans un fichier de sortie Si le mot n'existe pas - il

0La chaleur

1Répondre

Efficace MapReduce lorsque vous traitez des flux vers des requêtes vers le même ensemble de données

J'ai un ensemble de données massif et statique et j'ai une fonction à appliquer. F est sous la forme reduce (map (f, dataset)), donc j'utiliserais le squelette MapReduce. Cependant, je ne veux pas dis

4La chaleur

2Répondre

Trouver des lignes correspondantes avec Hadoop/MapReduce

Je joue avec Hadoop et j'ai mis en place un cluster à deux nœuds sur Ubuntu. L'exemple WordCount fonctionne très bien. Maintenant, je voudrais écrire mon propre programme MapReduce pour analyser des d

4La chaleur

3Répondre

Carte réduire les algorithmes sur téraoctets de données?

Cette question n'a pas une seule "bonne" réponse. Je suis intéressé par l'exécution d'algorithmes Map Reduce, sur un cluster, sur des téraoctets de données. Je veux en savoir plus sur le temps de fonc