A technológia szeizmikus változásokat hoz életünk minden területén, és 2018 lesz az az év, amikor robotszakácsokat, mesterséges intelligenciát fogunk látni. orvosok, önvezető autók és drónokkal történő szállítások. A nemrég megjelent Robert Half 2018 fizetési útmutató a technológiához A Professionals megemlíti, hogy a technológiai vezetők 67%-a gondolja a Big Data-t, Data Science A felhő, a mobil és a digitális marketing kezdeményezések, mint a 2018-as munkaerő-felvétel legnagyobb tényezői. A „Big Data” forradalom itt van, és nyugodtan kijelenthetjük, hogy a különböző iparágakban a legfontosabb és legjövedelmezőbb új technológiai karrier olyan szakembereké, akik tudják, hogyan nagy adatokkal dolgozzon olyan eszközökkel, mint a Hadoop és a Spark (a Fortune 500-as cégek által használt vezető big data keretrendszer).
A Gartner szerint sok szervezet fektetett be különféle big data projektekbe, de még a kísérleti szakaszban rekedtek, mert a tanulási görbe, valamint az iparágonként és használati esetenként szükséges szakértelem kihívást jelent az informatikai szakemberek számára. A nagy adathalmazokkal kapcsolatos munkák forróak, és a szakembereknek meg kell fontolniuk, hogy ezen az élvonalbeli IT-területen keressenek karriert. A munkaadók felismerik a Hadoop és a Spark készségek értékét, miközben több nyitott pozíciót is betöltenek. Sok vita folyik a big data közösségen belül az olyan feltörekvő big data technológiákról, mint a Hadoop, a Spark, a Kafka és még sok más. Az e technológiák iránti kereslet zavarba ejti a szakembereket afelől, hogy melyek a legkifizetődőbb karrierlehetőségek bárki számára, akinek van Big Data. Tanúsítvány az önéletrajzukban. Számos karrierutat választhatsz, és sokféle big data munkakör is felhasználja ezeket a készségeket, csak fontolja meg az 5 legjobb adatközpontú állás egyikét egy kifizetődő big data karrierhez –
1) Hadoop fejlesztő
A hadoop fejlesztői munkakör szinonimája a szoftverfejlesztőinek, de a big data tartományban. A Hadoop fejlesztője valójában big data alkalmazásokat kódol vagy programoz. A hadoop fejlesztő tudja, hogy melyik hadoop összetevőt válassza ki a kívánt feladathoz, és felelős a Hadoop fejlesztői környezet konfigurálásáért és karbantartásáért. A Hadoop fejlesztői feladatkörei közé tartozik a hadoop munkafolyamatok meghatározása, a hadoop naplófájlok kezelése, a sémák fejlesztése és a hive táblák létrehozása, a HBase-fürtök telepítése, az új hadoop-fürtök építése, a futásidejű hibák hibaelhárítása és hibakeresése, valamint a hadoop-fürtök biztonságának biztosítása.
A Bay Area-i Hadoop fejlesztők átlagos fizetése 139,000 178,000 dollár, a vezető hadoop fejlesztők pedig átlagosan 2018 XNUMX dollárt kereshetnek. A Hadoop-tanúsítvány megszerzése segít a szakembereknek felkapaszkodni a hadoop-fejlesztői karrier útján, és gyorsan felemelkedni a jellegzetes speciális alapokról. XNUMX a legjobb időszak a szakemberek számára, hogy a Hadoop tanúsítás és a jelenlegi idők egyik legjobban fizetett big data munkája.
Hadoop fejlesztővé váláshoz készségkészlet szükséges
- Képesség MapReduce munkák írására vagy Pig vagy Hive szkriptek írásában szerzett tapasztalat.
- Ismerkedjen az adatbetöltő eszközökkel, mint például a Sqoop és a Flume.
- A HBase kezelése és telepítése.
- Munkafolyamat-ütemezők, például Oozie ismerete.
2) Big Data Engineer
A Big Data mérnökök feladatai közé tartozik az építész által tervezett big data megoldások kiépítése. A big data mérnök feladata a vállalaton belüli big data megoldások fejlesztése, karbantartása, tesztelése és értékelése. A legtöbb esetben egy big data mérnök is részt vehet a big data megoldások tervezésében, mert tapasztalataik vannak a Hadoop alapú technológiákkal, mint például a Hive, HBase, MongoDB, Cassandra stb. Más szóval, a big data mérnökök több évtizedes tapasztalat és szigorú képzés termékei. Egy big data mérnök átlagos kezdő fizetése 130,000 190,000 dollár a legalacsonyabb szinten, és akár XNUMX XNUMX dollár is lehet.
Szükséges készségek egy Big Data mérnök számára
- Hadoop jártasság
- Jól ismeri a Hadoop-fürt kezelését, és képes megoldani minden folyamatban lévő problémát egy működő Hadoop-fürtön belül.
- Olyan lekérdező eszközök ismerete, mint a Pig, Hive és Impala.
- Az olyan üzenetküldő rendszerek ismerete, mint a Kafka
- Több forrásból származó adatok integrálásában szerzett tapasztalat.
- Valamilyen kódolási szakértelem bármelyik programozási nyelvben, például – Python, SQL, R vagy Scala.
3) Big Data Architect
A big data építészek munkaköre a Solution Architects vagy Enterprise Architects szinonimája, mivel ők azok, akik hatékony, de költséghatékony big data alkalmazásokat terveznek és készítenek, hogy segítsenek az ügyfeleknek megválaszolni az üzleti kérdéseket. Egy big data építésznek szeretnie kell az adatokat (a jót és a rosszat), és a hagyományos adatfeldolgozási problémákat sokféle objektívből kell szemlélnie. A Big Data építészeinek megfontoltan kell kiválasztaniuk a megfelelő big data eszközöket, és képesnek kell lenniük az új, nyílt forráskódú technológiák befogadására. Egy big data építész átlagos fizetése 111,750 184,000 és XNUMX XNUMX dollár között mozog.
Ahhoz, hogy Big Data Architect lehessen, készségkészletre van szükség
- Mély készségek nyílt forráskódú big data eszközök, például a Hadoop és a Spark.
- Az olyan adatmodellező és adatbányászati eszközök ismerete, mint az Oozie, a Mahout, a Sqoop, a Flume és a Zookeeper.
- Programozási ismeretek PHP, Python, Java vagy Linux nyelven.
- Az adatvizualizációs eszközök, például az R Studio, a Chartio, a Zeppelin és a Tableau ismerete.
4) Hadoop rendszergazda
A hadoop rendszergazda felelős a hadoop vállalati környezet felügyeletéért és kezeléséért. A Hadoop-adminisztrátorok napi tevékenységei közé tartozik – egy gép beállítása a Virtual Boxban, a NameNodes formázása, az adminisztrátori parancsok indítása, az adatok biztonsági mentése és a hadoop-fürt hibaelhárítása. A Hadoop rendszergazdák átlagos fizetése 104,000 156,000 és XNUMX XNUMX dollár között mozog.
Hadoop-adminisztrátorrá váláshoz készségkészlet szükséges
- Szakértelem UNIX vagy LINUX operációs rendszerben, mert a Hadoop Linuxon fut.
- Jártasság a hadoop-fürtfigyelő eszközökkel, mint például a Ganglia vagy az Ambari.
- A hadoop ökoszisztéma összes összetevőjének trükkje.
- Kiváló hibaelhárítási készség.
5) Big Data Analyst
Egy big data elemző gyűjti, dolgozza fel és statisztikai elemzést végez az adatokból, hogy betekintést nyerjen az adatokba, amelyek segítségével megválaszolhatja a fontos üzleti kérdéseket és megoldhat bármilyen kihívást jelentő problémát. Ha kivételes kommunikációs készségekkel rendelkezik, és szereti az adatproblémák felfedezését és megoldását, akkor ez az ideális pályaválasztás az Ön számára.
Egy big data elemző átlagos fizetése 77,500 118,500 és XNUMX XNUMX dollár között mozog
A Big Data elemzővé váláshoz szükséges készségkészlet
- A big data elemzőnek kényelmesnek kell lennie egy vagy több programozási nyelvvel – Java, Python, R, SQL, Hive, Julia és Scala.
- Ismernie kell mind a relációs, mind a nem relációs adatbázisokat, mint például a MySQL, DB2, Oracle, MongoDB, Cassandra stb.
- A számítási big data keretrendszerek, például a Hadoop és a Spark alapos ismerete.
- A statisztika és a lineáris algebra erős alapjai
Amint látja, a big data egy növekvő terület, tele potenciállal – ezért ne hagyja ki. A Big Data munkák mindenféle formában és méretben elérhetők, különböző készségekkel, csak az a kérdés, hogy megtalálja az érdeklődési körének és készségeinek leginkább megfelelő big data munkát. Mindenkinek, aki teljesen át szeretne váltani egy big data munkakörbe, fel kell építenie önéletrajzát néhány új big data készség elsajátításával (mint például a Hadoop, a Spark), amelyek lehetővé teszik, hogy kényelmesen bekerülhessen az új pozícióba. A Big Data tanúsítása segít átugrani a többieket, és versenyelőnyre tesz szert. Itt az ideje, hogy részt vegyen egy big data tanfolyamon, és megszerezze a Big Data minősítést, hogy kivételes karrierlépést tegyen. Ha komolyan szeretnél a big data közösség szerves részévé válni, akkor találkozhatsz hasonló gondolkodású emberekkel is, akiknek ugyanazok a karriercéljai, ha adatközpontú hackathonokon veszel részt, vagy technikai mentorálást szerezhetsz.