AWS×GCPのハイブリッド基盤構築/50代まで
65 ~ 85万円/月額想定年収:780 ~ 1020万円
work_outline職務内容
AWS（データレイク）とGCP（DWH）を組み合わせたハイブリッドクラウド基盤を構築中です。 この基盤をスケールさせ、俊敏なデータ活用を全社に浸透させるために、 AWS Glue や BigQueryを活用したデータパイプライン開発を担当いただくデータエンジニアを募集します。 ・ データレイク / ETL 基盤の構築 ・ AWS Glue（Apache Spark）による分散処理・ ETL 開発 ・ S3 / Lake Formation を用いたデータ管理・セキュリティ設計 ・ BigQuery ベースの DWH 環境整備 ・ AWS → GCP 間データ連携パイプラインの最適化 ・ BigQuery によるデータモデリング・クエリ最適化 ・ IaC を軸としたマルチクラウド管理 ・ Terraform による環境差分管理・自動化 ・ 品質管理・運用効率化 ・ Airflow などのワークフロー管理と CI/CD 整備 ・ データ品質テストの自動化
done_all必須スキル
・ AWS 環境でのインフラ構築・運用経験（S3 / IAM / VPC など） ・ GCP での構築経験（特に BigQuery と IAM/ネットワーク設定） ・ BigQuery を用いた分析 SQL 実務経験（パーティショニング/クラスタリング） ・ AWS Glue（PySpark）での ETL 開発・パフォーマンスチューニング ・ Terraform による IaC 実践（マルチクラウド or 複数環境）
・ BI ダッシュボード構築（Looker Studio 等） ・ Airflow / MWAA での複雑なジョブ管理 ・ データレイクハウス設計（Delta Lake / Iceberg / Hudi） ・ ストリーミング処理（Kinesis / Firehose / Pub/Sub） ・ Python / Go / Java でのツール開発
情報提供元: エンベスト
4時間前
同じ開発言語・環境の似た案件を探す
75~80万円/月額想定年収:900~960万円
業務委託
御茶ノ水・小川町・淡路町・新御茶ノ水・小川町
75~80万円/月額想定年収:900~960万円
業務委託
御茶ノ水・小川町・淡路町・新御茶ノ水・小川町
75~80万円/月額想定年収:900~960万円
業務委託
御茶ノ水・小川町・淡路町・新御茶ノ水・小川町
SNSアカウントでログイン