【リモート・Python】データ分析業務

開発・業務系
作業工程 基本設計
技術分野 Python
雇用形態 業務委託
勤務地 秋葉原 ※原則在宅ワーク
契約期間 即日~
報酬 70万
面談 1回
業務内容 某ゲーム会社様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行。
Google Cloud環境では、DWHとしてBigQueryを利用し、
データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定。

1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証)

必須スキル

・SQL に関する設計・実装経験
・Python3 に関する設計・実装経験
・Gitの使用経験
・パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
・Google Cloud Data Analyticsサービス(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識
・プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験

尚可スキル ・Shell に関する設計・実装経験
・Java(Spling Boot)開発経験
・Apache Airflowの開発利用経験
・Apache Spark/Hadoopに関する知識
・YAMLの開発利用経験
・Terraformの開発利用経験
・Web APIの開発利用経験
・JP1の開発利用経験
・AWS Redshiftの開発利用経験
・Google Cloudを使用したデータ分析系基盤開発経験
備考

応募する

関連求人

  1. 先端技術,DB,オープン系,汎用機,保守

    航空会社予約システムSQL運用案件(SQL)

  2. サーバ,ネットワーク,運用保守

    Linux/Windows基盤インフラシステム更改構築・運用保守

  3. サーバ,ネットワーク,運用保守

    【VMware・リモート可】大手素材会社での構築・運用保守業務

  4. 先端技術,DB,オープン系,汎用機,保守

    売買審査管理システムの開発(Java)

  5. 先端技術,DB,オープン系,汎用機,保守

    一般企業向けシステム開発業務

  6. 開発・業務系

    【PHP・リモート併用】製造業向け基幹システム改修

  7. 開発・業務系

    ソーシャルゲームのフロントエンドエンジニア

  8. PM・PMO,企画・ディレクション・マーケティング,コンサルティング

    某化粧品メーカー向け顧客管理クラウドシステムのリプレース(PMO)

  9. 営業,経理・事務

    ユーザーIT企画室内でのサポート業務全般(Office)