【リモート・Python】データ分析業務

開発・業務系
作業工程 基本設計
技術分野 Python
雇用形態 業務委託
勤務地 秋葉原 ※原則在宅ワーク
契約期間 即日~
報酬 70万
面談 1回
業務内容 某ゲーム会社様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行。
Google Cloud環境では、DWHとしてBigQueryを利用し、
データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定。

1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証)

必須スキル

・SQL に関する設計・実装経験
・Python3 に関する設計・実装経験
・Gitの使用経験
・パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
・Google Cloud Data Analyticsサービス(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識
・プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験

尚可スキル ・Shell に関する設計・実装経験
・Java(Spling Boot)開発経験
・Apache Airflowの開発利用経験
・Apache Spark/Hadoopに関する知識
・YAMLの開発利用経験
・Terraformの開発利用経験
・Web APIの開発利用経験
・JP1の開発利用経験
・AWS Redshiftの開発利用経験
・Google Cloudを使用したデータ分析系基盤開発経験
備考

応募する

関連求人

  1. ビジネス研修

    【リモート・Java】 バックエンドエンジニア募集

  2. 先端技術,DB,オープン系,汎用機,保守

    【Java】会計システム開発案件

  3. 開発・業務系

    【Linux・リモート併用】大手通信企業における社内システムのサーバ設計・構築・運用およびリプレイス

  4. 先端技術,DB,オープン系,汎用機,保守

    【C#・リモート併用】ガソリンスタンドの勘定系システムマイグレーション

  5. 先端技術,DB,オープン系,汎用機,保守

    販売管理システムの基本設計

  6. 先端技術,DB,オープン系,汎用機,保守

    顧客管理システムの保守開発ができる上級PG募集(Java)

  7. PM・PMO,企画・ディレクション・マーケティング,コンサルティング

    新規ゲーム開発におけるフロントエンド開発

  8. 先端技術,DB,オープン系,汎用機,保守

    【VB.net・リモート併用】鉄道システム開発

  9. 開発・業務系

    【リモート・WindowsServer】グループ統合におけるPC導入・デバイス運用管理支援(大手小売・流通)