【リモート・Python】データ分析業務

開発・業務系
作業工程 基本設計
技術分野 Python
雇用形態 業務委託
勤務地 秋葉原 ※原則在宅ワーク
契約期間 即日~
報酬 70万
面談 1回
業務内容 某ゲーム会社様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行。
Google Cloud環境では、DWHとしてBigQueryを利用し、
データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定。

1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証)

必須スキル

・SQL に関する設計・実装経験
・Python3 に関する設計・実装経験
・Gitの使用経験
・パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
・Google Cloud Data Analyticsサービス(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識
・プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験

尚可スキル ・Shell に関する設計・実装経験
・Java(Spling Boot)開発経験
・Apache Airflowの開発利用経験
・Apache Spark/Hadoopに関する知識
・YAMLの開発利用経験
・Terraformの開発利用経験
・Web APIの開発利用経験
・JP1の開発利用経験
・AWS Redshiftの開発利用経験
・Google Cloudを使用したデータ分析系基盤開発経験
備考

応募する

関連求人

  1. 開発・業務系

    【リモート・java】証券系システム開発

  2. 開発・業務系

    【リモート・SV/NW】インフラ保守業務

  3. サーバ,ネットワーク,運用保守

    【サーバー・リモート併用】インフラ構築・運用保守

  4. 開発・業務系

    【Ruby・リモート併用】旅行サイトのエンハンス対応

  5. 開発・業務系

    【インフラ・リモート可】エンタメ会社向けPCキッティングおよびインフラ作業

  6. 開発・業務系

    ショッピングサイトのバナー制作・デザイン

  7. 先端技術,DB,オープン系,汎用機,保守

    地方自治体向けパッケージカスタマイズ製造作業

  8. 開発・業務系

    【リモート・Java】某大手情報サービス企業の基盤開発PJ

  9. 開発・業務系

    サイトリスクテクノロジーを利用したサービス開発(PHP)