テクノロジーは私たちの生活のあらゆる側面に劇的な変化をもたらしており、2018 年はロボットシェフや AI が登場する年となるでしょう。 医師、自動運転車やドローンによる配達が行われています。最近発売されたのは Robert Half 2018 テクノロジー部門給与ガイド 専門家は、テクノロジー企業幹部の 67% がビッグ データを考慮していると述べています。 データサイエンス クラウド、モバイル、デジタル マーケティングへの取り組みが 2018 年の採用に最も貢献した要因です。「ビッグデータ」革命が到来しており、さまざまな業界で最も重要で収益性の高い新しいテクノロジ関連のキャリアは、その方法を知っている専門家が担っていると言っても過言ではありません。 Hadoop や Spark (フォーチュン 500 企業が使用する主要なビッグ データ フレームワークの XNUMX つ) などのツールを使用してビッグ データを操作します。
Gartner によると、多くの組織が多様なビッグデータ プロジェクトに投資してきましたが、業界やユースケースごとに学習曲線と必要な専門知識レベルが IT プロフェッショナルにとって困難であるため、まさにパイロット段階で立ち往生しています。ビッグデータの仕事は非常に人気があり、専門家はこの最先端の IT 分野でのキャリアを検討する必要があります。雇用主は、複数の空席を争って補充しようとしているため、Hadoop と Spark のスキルの価値を認識しています。ビッグデータ コミュニティ内では、Hadoop、Spark、Kafka などの新興ビッグデータ テクノロジーについて多くの議論が行われています。これらのテクノロジーへの需要により、専門家は、ビッグデータを扱う人にとって最もやりがいのあるキャリアの選択肢は何かについて混乱しています。 認証 彼らの履歴書に。選択できるキャリア パスはいくつかあり、これらのスキルを活用するビッグ データ関連の仕事も多数あります。やりがいのあるビッグ データ キャリアを実現するには、これらのデータ中心の仕事の上位 5 つのうち XNUMX つを検討してください。
1) Hadoop開発者
Hadoop 開発者の職務はソフトウェア開発者の職務と同義ですが、ビッグ データ ドメインに属します。 Hadoop 開発者は、実際にビッグ データ アプリケーションをコーディングまたはプログラミングします。 Hadoop 開発者は、目的のタスクにどの Hadoop コンポーネントを選択すればよいかを知っており、Hadoop 開発環境の構成と保守を担当します。 Hadoop 開発者のジョブ ロールには、Hadoop ジョブ フローの定義、Hadoop ログ ファイルの管理、スキーマの開発とハイブ テーブルの作成、HBase クラスターのデプロイ、新しい Hadoop クラスターの構築、ランタイム エラーのトラブルシューティングとデバッグ、Hadoop クラスターのセキュリティの確保が含まれます。
ベイエリアの Hadoop 開発者の平均給与は 139,000 ドルで、上級 Hadoop 開発者は平均 178,000 ドルを稼ぐことができます。 Hadoop 認定資格を取得すると、専門家が Hadoop 開発者のキャリア パスを登り、独特の専門的な基盤から素早く立ち上がるのに役立ちます。 2018 年は専門家にとって資格を取得するのに最適な時期です Hadoop 認定 そして、現時点で最も高収入のビッグデータ関連の仕事の 1 つを獲得しています。
Hadoop 開発者になるために必要なスキルセット
- MapReduce ジョブを作成できる能力、または Pig または Hive スクリプトを作成した経験。
- Sqoop や Flume などのデータ読み込みツールに精通していること。
- HBase の管理と展開。
- Oozie などのワークフロー スケジューラに関する知識。
2) ビッグデータエンジニア
ビッグ データ エンジニアの職務には、アーキテクトによって設計されたビッグ データ ソリューションの構築が含まれます。ビッグ データ エンジニアは、社内のビッグ データ ソリューションの開発、保守、テスト、評価を担当します。ほとんどの場合、ビッグ データ エンジニアは、Hive、HBase、MongoDB、Cassandra などの Hadoop ベースのテクノロジーの経験があるため、ビッグ データ ソリューションの設計にも関与することがあります。言い換えれば、ビッグデータ エンジニアは数十年の経験と厳しいトレーニングの賜物です。ビッグデータ エンジニアの平均初任給は、下限で 130,000 ドル、最高で 190,000 ドルに達する場合もあります。
ビッグデータエンジニアに必要なスキル
- Hadoop の習熟度
- Hadoop クラスターの管理に精通しており、運用中の Hadoop クラスター内で進行中の問題を解決できます。
- Pig、Hive、Impala などのクエリ ツールに関する知識。
- Kafka などのメッセージング システムに関する知識
- 複数のソースからのデータを統合した経験。
- Python、SQL、R、Scala などのプログラミング言語のいずれかにおける、何らかのコーディングの専門知識。
3) ビッグデータアーキテクト
ビッグ データ アーキテクトの仕事の役割は、クライアントがビジネス上の質問に答えるのを支援するために、効率的でコスト効率の高いビッグ データ アプリケーションを設計および構築する役割であるため、ソリューション アーキテクトまたはエンタープライズ アーキテクトの役割と同義です。ビッグ データ アーキテクトは、データ (良くも悪くも) に対する愛を持っていなければならず、従来のデータ処理の問題をさまざまな視点から見る必要があります。ビッグ データ アーキテクトは、適切なビッグ データ ツールを慎重に選択する必要があり、新しいオープンソース テクノロジを採用できる必要があります。ビッグデータアーキテクトの平均給与は、111,750 ドルから 184,000 ドルの範囲です。
ビッグデータアーキテクトになるために必要なスキルセット
- 深いスキル オープンソース Hadoop や Spark などのビッグ データ ツール。
- Oozie、Mahout、Sqoop、Flume、Zookeeper などのデータ モデリングとデータ マイニング ツールに関する知識。
- PHP、Python、Java、または Linux のいずれかのプログラミング知識。
- R Studio、Chartio、Zeppelin、Tableau などのデータ視覚化ツールについての理解。
4) Hadoop管理者
Hadoop 管理者は、Hadoop エンタープライズ環境の管理を担当します。 Hadoop 管理者の日常的なアクティビティには、Virtual Box でのマシンのセットアップ、NameNode のフォーマット、管理コマンドの開始、データのバックアップ、Hadoop クラスターのトラブルシューティングなどがあります。 Hadoop 管理者の平均給与は 104,000 ドルから 156,000 ドルの範囲です。
Hadoop 管理者になるために必要なスキルセット
- Hadoop は Linux 上で実行されるため、UNIX または LINUX オペレーティング システムに関する専門知識。
- Ganglia や Ambari などの Hadoop クラスター監視ツールの操作に習熟していること。
- Hadoop エコシステム内のすべてのコンポーネントのコツ。
- 優れたトラブルシューティングスキル。
5) ビッグデータアナリスト
ビッグ データ アナリストは、データの収集、処理、統計分析を実行して、重要なビジネス上の質問に答え、困難な問題を解決するために使用できるデータに関する洞察を収集します。優れたコミュニケーション スキルがあり、データの問題を発見して解決することに興味がある場合、これはあなたにとって理想的なキャリアの選択です。
ビッグデータアナリストの平均給与は77,500ドルから118,500ドルの範囲です
ビッグデータアナリストになるために必要なスキルセット
- ビッグ データ アナリストは、Java、Python、R、SQL、Hive、Julia、Scala などの 1 つ以上のプログラミング言語に精通している必要があります。
- MySQL、DB2、Oracle、MongoDB、Cassandra などのリレーショナル データベースと非リレーショナル データベースの両方の知識が必要です。
- Hadoop や Spark などの計算ビッグ データ フレームワークについてよく理解していること。
- 統計と線形代数の強力な基礎
ご覧のとおり、ビッグデータは可能性に満ちた成長分野ですので、ぜひお見逃しなく。ビッグデータの仕事にはさまざまな形や規模があり、さまざまなスキルセットが備わっています。自分の興味やスキルに最も適したビッグデータの仕事を見つけるだけで十分です。ビッグ データの仕事に完全に移行したい人は、新しいポジションにスムーズに就くことができる、新しいビッグ データ スキル (Hadoop、Spark など) を学習して履歴書を作成する必要があります。ビッグデータ認定は、他の企業を飛び越えて競争上の優位性を獲得するのに役立ちます。今こそ、ビッグ データ コースを受講し、ビッグ データ認定資格を取得して、優れたキャリアアップを実現する時期です。ビッグデータ コミュニティに不可欠な一員になることを真剣に考えている場合は、データに焦点を当てたハッカソンに参加したり、技術的な指導を受けたりして、同じキャリア目標を共有する志を同じくする人々に出会うことも必要です。