Show more filters
Banner image for LY Corporation

データプラットフォームエンジニア / Data Platform

LY Corporation

3.8
16 reviews
LY Corporation
Job Type   /   Job Level
Full-time   /   Others/Any
Job Location
Tokyo, Japan
A free Jobstore account is required to proceed to the employer site.
ポジション概要

LINEヤフーでは、日々大量のデータが発生し、大量のデータがデータプラットフォームに蓄積されています。トータルでは数百PB以上のデータを蓄積・処理し、データ利活用に役立てています。この膨大なデータを安定して収集・蓄積・処理するために、専用のデータセンターを活用し、数千台のサーバーを用いて分散システム基盤を構築・運用しています。

私たちのデータプラットフォームは、代表的なものとして以下のような技術スタックを活用しています。

  • 分散処理フレームワーク:Apache Hadoop
  • 分散メッセージングシステム:Apache Kafka
  • 分散ストリーム処理システム:Flink
  • 分散SQLエンジン:Trino
  • 分散データストア:Druid

これらの技術を駆使して、ビッグデータを安全かつ効率的に活用するためのインフラを提供しています。また、データサイエンティストが簡単にAI活用できることを目指して、機械学習プラットフォーム(AIプラットフォーム)も独自で構築し提供しています。

主な業務内容

具体的には以下の業務を想定しています。

  • データ収集と統合:異なるデータソースからのデータを効率的に収集し、統合するためのETLパイプラインの設計・実装。
  • リアルタイムデータ処理:Apache KafkaやFlinkを用いたリアルタイムデータ処理の最適化と運用。
  • スケーラビリティとパフォーマンス:ネットワークの設計やハードウェアの選定など専門チームと協業しながらスケーラブルなインフラの設計・実装、パフォーマンスの最適化。
  • データ品質とガバナンス:データの一貫性、正確性、完全性を確保するためのツールやプロセスの導入。
  • データセキュリティとプライバシー:データの暗号化、アクセス制御、コンプライアンス対応。
  • AI/MLの統合と運用:機械学習プラットフォームの構築・運用、MLOpsの導入。

※変更の範囲:会社の定める全ての業務への配置転換の可能性あり

組織や人を知る



  • 数百ペタバイトという大規模なデータ基盤を強みに。CBUリードが見据えるプラットフォームの進化



    求める人物像

    • 正解のない問題解決を楽しみ、スピード感を持って品質高く解決に導ける方
    • 複数のステークホルダーの要求のなかで課題の優先順位をつけながら解決できる方
    • 結果にこだわり最後までやり抜く力がある方

    必要な経験/スキル

    • 分散システムを利用したデータ基盤の構築、運用の経験(1年以上)
    • Python・Java・Goいずれかのプログラミング業務経験(1年以上)
    • Kubernetes、Dockerを使ったミドルウェアやサービスの開発と運用の経験

    あると望ましい経験/スキル

    • 100台規模以上の分散システムにおけるソフトウェア エンジニアリングまたはシステム エンジニアリングの経験
    • Apache Hadoop、Apache Kafka、Apache Flink、Apache Druidなどを利用したアプリケーションの開発・運用の経験
    • Apache Hadoop、Apache Kafka、Apache Flink、Apache Druidなどエコシステムの運用保守設計、および運用改善経験
    • KubernetesのClusterやエコシステムの設計、構築、運用経験
    • Web Applicationの開発・運用の経験
    • CI/CDなどによるシステム自動化の経験
    • 機械学習のシステム開発やプログラムの実装経験
    • Google Cloud Platform、Amazon Web ServicesでのAI開発経験
    • オープンソースへの貢献

    報酬

    想定年収:800万円~1,800万円

    賃金形態:月給制(固定残業代含む)

    基準給与:534,000円~1,200,000円

    (基準給与の内訳)

    ―基礎給与 :414,000円~934,000円

    ―固定時間外手当:119,000円~267,000円

    ※時間外労働の有無に関わらず、35時間分の固定時間外手当を支給

    ※固定時間の超過分は、超過勤務手当を別途支給

    ※月給の各項目名はグレードにより異なります

    賞与:年2回を上限に、会社や所属部署の業績を踏まえて支給

    諸手当

    時間外手当、通勤手当 ※1、LINEヤフー Working Style手当 ※2、など

    ※1所属オフィスに出社した日数に応じて実費を支給。月額上限150,000円。

    ※2リモートワークにおいて働く環境を整備するための手当。月額11,000円。

    雇用形態・雇用期間

    正社員(雇用期間の定めなし、3ヶ月の試用期間あり)

    ※試用期間中の労働条件変更なし

    勤務地

    紀尾井町オフィス(東京都千代田区紀尾井町1-3 東京ガーデンテラス紀尾井町 紀尾井タワー)

    ※配属部署により、赤坂オフィス(東京都港区赤坂2-17-22 赤坂トラストタワー)での勤務となる可能性があります。 (詳細は選考過程でご説明します)

    ※業務上の指示により所属オフィスへの出社が必要になることがあります。出社する際のオフィスは雇入れ直後は配属拠点となります。その後は会社の定めるすべての事業所に配置転換の可能性があります。

    ※車いすの方でも勤務が可能なオフィスです。

    ※受動喫煙対策の状況:屋内禁煙

    就業時間

    • フレックスタイム制:標準労働時間7時間45分(コアタイムなし)
      • 始業および終業の時刻は個人に委ねます。 但し、標準時間として始業時刻は9:30、終業時刻は18:15となります。
    • 育児・介護による時短勤務制度あり。
    ※部署により通常勤務(9:30~18:15)、シフト勤務あり。

    休日・休暇

    • 休日:完全週休2日制(土日 ※1)、国民の祝日、年末年始(12月29日から1月4日まで)
    • 休暇:有給休暇、特別有給休暇(慶弔、マタニティ、子の看護、介護、法定伝染病など)、ハッピーフライデー ※2、サバティカル休暇制度

    ※1 部署により異なります。

    ※2 祝日が土曜日にあたった場合、前労働日を振り替え特別休日としています。

    福利厚生

    各種社会保険完備(健康保険、介護保険、厚生年金保険、雇用保険、労災保険)、選択型確定拠出年金制度、総合福祉団体定期保険、長期所得補償制度、財形貯蓄制度、株式累積投資制度、定期健康診断・人間ドック二次検査の費用補助、社内マッサージ室、サークル、懇親会費補助など

    ※制度の適用には条件があります。詳細は、福利厚生 をご確認ください。

    人材育成・支援制度

    社員向け研修制度、語学研修、マネジメント研修、LINEヤフー Job Challenge、サバティカル休暇、社会人ドクター進学支援など

    ※制度の適用には条件があります。詳細は、人材育成・支援制度 をご確認ください。

    選考プロセス

    • Step1

    書類選考

    • Step2

    課題選考/適性検査

    • Step3

    面接(複数回)/コンプライアンスチェック・リファレンスチェック

    • Step4

    内定

    ※ただし、ポジションにより選考内容が変更となる可能性があります。

    応募

    応募フォームに必要事項をご入力のうえご応募ください。採用の適否を判断するために必要な個人情報を入力していただきます。これらは採用以外の目的には一切使用しません。なお、ご提出いただいた履歴書などは返却いたしません。あらかじめご了承ください。

    書類選考

    選考結果は合否にかかわらず2週間以内に、応募フォームに入力されたメールアドレスにご連絡いたします。ゴールデンウィークや年末年始等を挟む場合は、さらに1週間程度を要する場合があります。

    面接、適性検査、技術試験、コンプライアンスチェック・リファレンスチェック

    書類選考に合格された方には、ポジションにより実施内容が異なりますが、複数回の面接と適性検査/技術試験、コンプライアンスチェック・リファレンスチェックを実施いたします。

    選考結果は合否にかかわらず2週間以内に、応募フォームに入力されたメールアドレスにご連絡いたします。

    面接などのスケジュールによって変わりますが、順調に進んだ場合、応募から1カ月~1カ月半程度で内定となります。なお、選考の内容や基準、結果の理由に関してのお問い合わせには、合否にかかわらず回答いたしかねます
A free Jobstore account is required to proceed to the employer site.
Jobs in Japan   »   Jobs in Tokyo   »   データプラットフォームエンジニア / Data Platform

More jobs

People also search