Je m'intéresse aux techniques d'apprentissage pour l'informatique distribuée. En tant que développeur Java, je suis probablement prêt à commencer par Hadoop. Pourriez-vous s'il vous plaît recommander des livres/tutoriels/articles pour commencer?Où puis-je commencer avec l'informatique distribuée?
Peut-être pouvez-vous lire d'abord des articles liés à MapReduce et à l'informatique distribuée, afin de mieux les comprendre. Voici quelques-uns, je voudrais recommand:
MapReduce: simplifié de traitement des données sur les grands clusters, http://www.usenix.org/events/osdi04/tech/full_papers/dean/dean_html/
BigTable: un système de stockage distribué pour les données structurées, http://www.usenix.org/events/osdi06/tech/chang/chang_html/
Dryade: Distribué programmes parallélisés de données à partir de blocs de construction séquentiels, http://pdos.csail.mit.edu/6.824-2007/papers/isard-dryad.pdf
Le paysage des computi parallèles ng recherche: Une vue de berkeley, http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.67.8705&rep=rep1&type=pdf
D'autre part, si vous voulez mieux connaître Hadoop, vous pouvez peut-être commencer à lire le code source framework Hadoop MapReduce.
Voici quelques ressources de Yahoo! Developer Network
un tutoriel:
http://developer.yahoo.com/hadoop/tutorial/
un cours d'introduction (nécessite Siverlight, soupir):
Actuellement, BookWise je vérifierais - Hadoop A Definitive Guide. Il est écrit par Tom White qui travaille depuis longtemps sur Hadoop et travaille chez Cloudera avec Doug Cutting (créateur Hadoop).
Toujours sur le côté libre, Jimmy Lin de l'UMD a écrit un livre intitulé: Data-Intensive Text Processing with MapReduce. Voici un lien vers la version finale de la pré-production (lien fourni par l'auteur sur son website).
Le podcast All Things Hadoop http://allthingshadoop.com/podcast a du bon contenu et de bons clients. Une grande partie est destinée à démarrer avec l'informatique distribuée.
MIT 6.824 est le meilleur choix. Il ne suffit pas de lire des documents Google relatifs à Hadoop. Un apprentissage systématique des cours est nécessaire si vous voulez aller plus loin.
Hadoop n'est pas nécessairement le meilleur outil pour tous les problèmes de calcul distribué. Malgré sa puissance, il a également une courbe d'apprentissage assez raide et le coût de propriété. Vous pourriez vouloir clarifier vos besoins et chercher des alternatives appropriées dans le monde Java, comme HTCondor, JPPF ou GridGain (mes excuses à ceux que je ne mentionne pas).
Si vous cherchez à apprendre une plate-forme informatique distribuée qui est moins compliquée que Hadoop, vous pouvez essayer Zillabyte. Vous avez seulement besoin de connaître Ruby ou Python pour créer des applications sur la plate-forme.Comme LoLo l'a dit, Hadoop est une solution puissante, mais peut être difficile à utiliser pour commencer.
Pour les matériaux à apprendre sur l'informatique distribuée, essayez http://ocw.mit.edu/courses/electrical-engineering-and-computer-science/6-824-distributed-computer-systems-engineering-spring-2006/syllabus/. Il y a plusieurs ressources recommandées par le cours aussi.