¿Qué significa hadoop? ¿Qué tiene que ver con los grandes datos?
Hadoop es un framework específico de código abierto y una herramienta para almacenar y calcular datos masivos.
2. La relación entre hadoop y big data
En primer lugar, el big data en sí implica un enorme sistema técnico. Desde la perspectiva de las disciplinas, se trata de matemáticas, estadística, informática, sociología, economía, medicina y otras disciplinas, por lo que el conocimiento de big data en sí es todavía muy amplio.
A juzgar por la cadena industrial actual en el campo de big data, el campo de big data implica la recopilación de datos, el almacenamiento de datos, el análisis de datos y la aplicación de datos. Diferentes enlaces requieren diferentes tecnologías, pero estos enlaces a menudo dependen de ellas. Big Data, Hadoop es una de las plataformas de big data más populares actualmente.
Después de años de desarrollo, la plataforma Hadoop ha formado un ecosistema relativamente completo y, debido a que la plataforma Hadoop es de código abierto, muchas plataformas comerciales de big data también se crean en base a Hadoop, por lo que para aquellos que son nuevos en big data Para los técnicos, comenzar a aprender Hadoop es una buena opción.
Actualmente, las funciones de la plataforma Hadoop mejoran constantemente, no solo en lo que respecta al almacenamiento de datos, sino también al análisis de datos y las aplicaciones de datos. Por lo tanto, para los desarrolladores actuales de aplicaciones de big data, la estructura general del conocimiento a menudo se organiza en torno a la plataforma de big data. A medida que las plataformas de big data comiencen a implementarse gradualmente en las industrias tradicionales, los técnicos de big data dependerán cada vez más de las plataformas de big data.
El trabajo actual dedicado al desarrollo de big data se puede dividir en dos categorías. Uno es el desarrollo de plataformas de big data, que suele ser un trabajo de nivel I+D. No solo el valor agregado del trabajo es relativamente alto, sino que el espacio de desarrollo futuro también es relativamente grande, sino que el desarrollo de plataformas de big data tiene requisitos relativamente altos para los profesionales. Actualmente, muchos estudiantes de posgrado se dedicarán al desarrollo de plataformas de big data después de graduarse.
La otra categoría son los puestos de desarrollo de aplicaciones de big data, cuya tarea es desarrollar aplicaciones industriales basadas en plataformas de big data (Hadoop, etc.). En la era de Internet industrial, el número de puestos de desarrollo de aplicaciones de big data sigue siendo relativamente grande y los requisitos para los puestos de desarrollo de aplicaciones de big data para los profesionales son relativamente bajos.