¿Cómo practicar la programación de Hadoop?

Question

Acabo de comenzar a revisar los videos de introducción de Hadoop. ¿Cómo practicarlo por su cuenta? ¿Hay una forma recomendada de instalar en local para practicar?

Answer 1

me encontré con que la descarga e instalación de Hadoop, jugar con él por medio de ejemplos de trabajo, lo que hace un montón de errores y estar bien con eso funcionó bien para la práctica.

Por "instalar en locales" si usted está diciendo "¿cómo lo instalo en mi máquina local sin necesidad de utilizar HDFS?", Hay una excellent guide here.

Answer 2

Si quieres aprender sobre Hadoop y bigdata, mira en bigdatauniversity.com. Es gratis y dan instrucciones sobre cómo instalar Hadoop localmente en una máquina virtual y/o en los servicios web de Amazon. BigDataUniversity proporciona laboratorios e instrucciones para ayudar a guiar su práctica. Lo encontré útil hasta ahora.

Answer 3

... Me gustó bigdatauniversity.com y también me di cuenta de que MapR, Hortonworks y Cloudera ofrecen un entorno descargable que puede utilizar para familiarizarse con el paradigma operativo de Hadoop.

De hecho, si está estudiando esto con miras a trabajar con Hadoop en una escala Enterprise, es una buena idea explorar los productos que se están implementando en ese nivel.

que he tenido un poco de oportunidad ahora para explorar práctica con el medio ambiente Hadoop de MapR y poder recomendarla como una buena manera de mirar en la materia.

--- v

Answer 4

Recientemente Cloudera puso en marcha una nueva plataforma en línea donde se puede jugar con Hadoop y su ecosistema tanto como want.Here que vaya - cloudera.com/live

Answer 5

Yo sugeriría https://developer.yahoo.com/hadoop/tutorial/ para hadoop Estudio autodidacta Es una guía muy completa, paso a paso, desde nivel principiante hasta avanzado.

Answer 6

puede instalar una caja virtual que tiene Hadoop incluido pero puede encontrar algunos problemas con ella. Lo hice primero cuando comencé a aprender Hadoop y después de varios problemas (IP, Internet, diferentes configuraciones) decidí aprender con una instalación de Linux.

se puede encontrar un tutorial aquí: http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-single-node-cluster/

Answer 7

He estado entrenando personas en Hadoop durante 2 años. Aquí están mis dos centavos.

Para la parte de aprendizaje, recomiendo las siguientes fuentes (como han mencionado otros demasiado arriba):

1. Yahoo Blog
2. Hadoop Definitive Guide
3. HortonWorks Practice Tutorials

Y para la práctica, tradicionalmente la gente ha estado usando Hadoop Virtual Machines pero este enfoque tiene sus desventajas:

1. El VM son enormes en tamaño para VM ejemplo Hortonworks' es 9,9 GB.
2. Es posible que deba actualizar su RAM a 8 GB.
3. Algunos BIOS no permiten la virtualización. Es posible que tenga cambiar la configuración de BIOS.
4. Es posible que algunas máquinas como computadoras de escritorio/portátiles de Office no permitan las instalaciones.

Mis alumnos y yo también nos enfrentamos a estos problemas. Por lo tanto, configuramos un clúster para que nuestros alumnos practiquen Hadoop, Spark y tecnologías relacionadas. Y lo llamamos CloudxLab.com.