【リモート・Python】データ分析業務

開発・業務系
作業工程 基本設計
技術分野 Python
雇用形態 業務委託
勤務地 秋葉原 ※原則在宅ワーク
契約期間 即日~
報酬 70万
面談 1回
業務内容 某ゲーム会社様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行。
Google Cloud環境では、DWHとしてBigQueryを利用し、
データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定。

1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証)

必須スキル

・SQL に関する設計・実装経験
・Python3 に関する設計・実装経験
・Gitの使用経験
・パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
・Google Cloud Data Analyticsサービス(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識
・プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験

尚可スキル ・Shell に関する設計・実装経験
・Java(Spling Boot)開発経験
・Apache Airflowの開発利用経験
・Apache Spark/Hadoopに関する知識
・YAMLの開発利用経験
・Terraformの開発利用経験
・Web APIの開発利用経験
・JP1の開発利用経験
・AWS Redshiftの開発利用経験
・Google Cloudを使用したデータ分析系基盤開発経験
備考

応募する

関連求人

  1. サーバ,ネットワーク,運用保守

    【Python・リモート併用】自社WEBアプリ開発

  2. サーバ,ネットワーク,運用保守

    【サーバー・リモート併用】機構向けインフラ維持管理

  3. 先端技術,DB,オープン系,汎用機,保守

    農業系システム3次開発要件整理

  4. 先端技術,DB,オープン系,汎用機,保守

    大手家電量販店のシステムWebアプリなどリニューアル対応

  5. PM・PMO,企画・ディレクション・マーケティング,コンサルティング

    【Citirx・リモート併用】VDIサービス基盤追加開発

  6. PM・PMO,企画・ディレクション・マーケティング,コンサルティング

    【C言語・リモート併用】車載システム 市場適合性評価

  7. 先端技術,DB,オープン系,汎用機,保守

    新宿近辺ジョブネット・JP1

  8. テスター・ヘルプデスク

    テスターマッチングスマホアプリ(Light版)開発のテスト

  9. 先端技術,DB,オープン系,汎用機,保守

    【Cisco・リモート併用】ネットワーク要員募集(Cisco、FortiGate)