【リモート・Python】データ分析業務

開発・業務系
作業工程 基本設計
技術分野 Python
雇用形態 業務委託
勤務地 秋葉原 ※原則在宅ワーク
契約期間 即日~
報酬 70万
面談 1回
業務内容 某ゲーム会社様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行。
Google Cloud環境では、DWHとしてBigQueryを利用し、
データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定。

1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証)

必須スキル

・SQL に関する設計・実装経験
・Python3 に関する設計・実装経験
・Gitの使用経験
・パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
・Google Cloud Data Analyticsサービス(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識
・プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験

尚可スキル ・Shell に関する設計・実装経験
・Java(Spling Boot)開発経験
・Apache Airflowの開発利用経験
・Apache Spark/Hadoopに関する知識
・YAMLの開発利用経験
・Terraformの開発利用経験
・Web APIの開発利用経験
・JP1の開発利用経験
・AWS Redshiftの開発利用経験
・Google Cloudを使用したデータ分析系基盤開発経験
備考

応募する

関連求人

  1. 先端技術,DB,オープン系,汎用機,保守

    小売流通業様向け業務システム(C#.net)

  2. 先端技術,DB,オープン系,汎用機,保守

    【C#・リモート併用】税金管理システム開発支援

  3. 開発・業務系

    【リモート・C、C++】ROSソフトウェア開発

  4. PM・PMO,企画・ディレクション・マーケティング,コンサルティング

    大手電機メーカーPMO支援(PMO)

  5. 開発・業務系

    医師転職サイトの追加開発・改修

  6. 先端技術,DB,オープン系,汎用機,保守

    【Java・リモート併用】証券関連システム保守開発支援

  7. PM・PMO,企画・ディレクション・マーケティング,コンサルティング

    民放キー局グループ会社向けフルスタックエンジニア募集

  8. 開発・業務系

    【リモート・Kubernetes】IoTプラットフォームのインフラ構築

  9. サーバ,ネットワーク,運用保守

    店内セルフオーダーシステム開発(PHP)