La tecnología está provocando cambios sísmicos en todos los aspectos de nuestras vidas y 2018 será el año en el que veremos robots chefs e IA. médicos, coches autónomos y entregas realizadas mediante drones. El recientemente lanzado Robert Half 2018 Guía salarial para tecnología Profesionales menciona que el 67% de los ejecutivos de tecnología consideran Big Data, Data science Iniciativas de marketing digital, móvil y en la nube como los factores que más contribuyeron a la contratación en 2018. La revolución del “Big Data” ya está aquí y es seguro decir que las carreras en nuevas tecnologías más importantes y lucrativas en diversas industrias pertenecen a profesionales que saben cómo trabaje con big data utilizando herramientas como Hadoop y Spark (dos de los principales marcos de big data utilizados por las empresas Fortune 500).
Según Gartner, muchas organizaciones han invertido en diversos proyectos de big data, pero están estancadas en la etapa piloto porque la curva de aprendizaje y el nivel requerido de experiencia por industria y caso de uso es un desafío para los profesionales de TI. Los trabajos de big data están al rojo vivo y los profesionales deberían considerar una carrera en este campo de TI de vanguardia. Los empleadores están reconociendo el valor de las habilidades de Hadoop y Spark mientras luchan por cubrir múltiples puestos vacantes. Hay mucha discusión dentro de la comunidad de big data sobre las tecnologías emergentes de big data como Hadoop, Spark, Kafka y más. La demanda de estas tecnologías está dejando a los profesionales confundidos sobre cuáles son las opciones profesionales más gratificantes disponibles para cualquiera que tenga Big Data. de Padi en su currículum. Hay varias trayectorias profesionales que puede tomar y una multitud de puestos laborales de big data que utilizan estas habilidades; solo considere uno de estos 5 trabajos principales centrados en datos para una carrera gratificante en big data:
1) Desarrollador de Hadoop
Un puesto de trabajo de desarrollador de Hadoop es sinónimo de desarrollador de software, pero en el dominio de big data. El desarrollador de Hadoop en realidad codifica o programa aplicaciones de big data. Un desarrollador de Hadoop sabe qué componente de Hadoop elegir para la tarea deseada y es responsable de configurar y mantener el entorno de desarrollo de Hadoop. Las funciones laborales de los desarrolladores de Hadoop implican definir flujos de trabajo de Hadoop, administrar archivos de registro de Hadoop, desarrollar esquemas y crear tablas de Hive, implementar clústeres de HBase, crear nuevos clústeres de Hadoop, solucionar problemas y depurar cualquier error de tiempo de ejecución y garantizar la seguridad de los clústeres de Hadoop.
El salario promedio de un desarrollador de Hadoop en el Área de la Bahía es de $ 139,000 y los desarrolladores senior de Hadoop pueden ganar un promedio de $ 178,000. Tener una certificación de Hadoop ayudará a los profesionales a ascender en la carrera profesional de desarrollador de Hadoop y a ascender rápidamente desde bases especializadas distintivas. 2018 es el mejor momento para que los profesionales obtengan un Certificación Hadoop y conseguir uno de los trabajos de big data mejor pagados de la actualidad.
Conjunto de habilidades necesarias para convertirse en desarrollador de Hadoop
- Capacidad para escribir trabajos de MapReduce o experiencia en la redacción de scripts Pig o Hive.
- Familiaridad con herramientas de carga de datos como Sqoop y Flume.
- Gestión e implementación de HBase.
- Conocimiento de programadores de flujo de trabajo como Oozie.
2) Ingeniero de Big Data
Los roles laborales de los ingenieros de Big Data implican la creación de soluciones de Big Data diseñadas por un arquitecto. Un ingeniero de big data es responsable de desarrollar, mantener, probar y evaluar soluciones de big data dentro de la empresa. La mayoría de las veces, un ingeniero de big data también puede participar en el diseño de soluciones de big data debido a la experiencia que tiene con tecnologías basadas en Hadoop como Hive, HBase, MongoDB, Cassandra, etc. En otras palabras, los ingenieros de big data son producto de décadas de experiencia y formación rigurosa. El salario inicial promedio de un ingeniero de big data es de $130,000 en el extremo inferior y puede llegar hasta $190,000.
Habilidades necesarias para un ingeniero de Big Data
- Competencia con Hadoop
- Bien versado en la gestión de un clúster de Hadoop y capaz de resolver cualquier problema continuo dentro de un clúster de Hadoop operativo.
- Conocimiento de herramientas de consulta como Pig, Hive e Impala.
- Conocimiento de sistemas de mensajería como Kafka.
- Experiencia en integración de datos de múltiples fuentes.
- Experiencia en codificación de algún tipo en cualquiera de los lenguajes de programación como Python, SQL, R o Scala.
3) Arquitecto de Big Data
El puesto de trabajo de un arquitecto de big data es sinónimo del de arquitecto de soluciones o arquitecto empresarial, ya que son quienes diseñan y crean aplicaciones de big data eficientes pero rentables para ayudar a los clientes a responder preguntas comerciales. Un arquitecto de big data debe amar los datos (buenos y malos) y debe analizar los problemas tradicionales de procesamiento de datos desde diversos lentes. Los arquitectos de big data deben ser prudentes a la hora de seleccionar las herramientas de big data adecuadas y deben ser capaces de adoptar tecnologías novedosas de código abierto. El salario medio de un arquitecto de big data oscila entre 111,750 y 184,000 dólares.
Conjunto de habilidades necesarias para convertirse en un arquitecto de Big Data
- Habilidades profundas en de código abierto herramientas de big data como Hadoop y Spark.
- Conocimiento de herramientas de modelado y minería de datos como Oozie, Mahout, Sqoop, Flume y Zookeeper.
- Conocimientos de programación ya sea en PHP, Python, Java o Linux.
- Comprensión de herramientas de visualización de datos como R Studio, Chartio, Zeppelin y Tableau.
4) Administrador de Hadoop
Un administrador de hadoop es responsable de administrar y gestionar el entorno empresarial de hadoop. Algunas de las actividades diarias de un administrador de Hadoop incluyen: configurar una máquina en Virtual Box, formatear NameNodes, iniciar comandos de administración, realizar copias de seguridad de datos y solucionar problemas del clúster de Hadoop. El salario medio de un administrador de Hadoop oscila entre 104,000 y 156,000 dólares.
Conjunto de habilidades necesarias para convertirse en administrador de Hadoop
- Experiencia en sistema operativo UNIX o LINUX porque Hadoop se ejecuta en Linux.
- Competencia para trabajar con herramientas de monitoreo de clústeres de hadoop como Ganglia o Ambari.
- Una chuchería de todos los componentes del ecosistema hadoop.
- Excelentes habilidades de resolución de problemas.
5) Analista de Big Data
Un analista de big data recopila, procesa y realiza análisis estadísticos de datos para obtener información sobre los datos que se pueden utilizar para responder preguntas comerciales importantes y resolver cualquier problema desafiante. Si tiene habilidades de comunicación excepcionales y disfruta descubriendo y resolviendo problemas de datos, esta es la opción profesional ideal para usted.
El salario medio de un analista de big data oscila entre 77,500 y 118,500 dólares.
Conjunto de habilidades necesarias para convertirse en analista de Big Data
- Un analista de big data debe sentirse cómodo con uno o más lenguajes de programación: Java, Python, R, SQL, Hive, Julia y Scala.
- Debe tener conocimientos de bases de datos tanto relacionales como no relacionales como MySQL, DB2, Oracle, MongoDB, Cassandra, etc.
- Una buena comprensión de los marcos computacionales de big data como Hadoop y Spark.
- Base sólida de estadística y álgebra lineal.
Como puede ver, big data es un campo en crecimiento lleno de potencial, así que no se lo pierda. Los trabajos de Big Data vienen en todas las formas y tamaños con diferentes conjuntos de habilidades; es solo cuestión de encontrar el mejor trabajo de Big Data que mejor se adapte a sus intereses y habilidades. Cualquiera que desee realizar una transición completa a un puesto laboral de big data debe desarrollar su currículum aprendiendo algunas nuevas habilidades de big data (como Hadoop, Spark) que le permitirán adaptarse cómodamente al nuevo puesto. La certificación de big data ayudará a superar a los demás y obtener una ventaja competitiva. Ahora es el momento de realizar un curso de big data y obtener una certificación de big data para dar un paso profesional excepcional. Si realmente quiere convertirse en una parte integral de la comunidad de big data, también debería conocer a personas con ideas afines que comparten los mismos objetivos profesionales asistiendo a hackatones centrados en datos u obteniendo tutoría técnica.