120 ~ 130万円/月額想定年収:1440 ~ 1560万円
★エンジニア実務経験2年以上 / ブランクのない方が対象の案件です!!★ ■概要 世界最大級の無形資産データ統合基盤を活用し、未来予測や社会課題解決を支援するプロジェクトです。世界各国の特許、論文、国家研究予算などのオープンデータを収集・分析するためのデータ基盤やAPI、バッチシステムの構築・運用を担当します。また、GCP(Google Cloud Platform)を用いたETLパイプラインの構築や既存システムのリファクタリング、さらにデータガバナンスのアーキテクチャ選定・構築にも携わります。Pythonを中心とした開発環境でクラウド技術を活かす業務です。 ■具体的な業務内容 ・オープンデータの収集および分析用データ基盤の構築・運用 ・GCPを用いたETLパイプラインの設計・開発・運用 ・APIおよびバッチシステムの構築・メンテナンス ・既存システムのリファクタリングおよび改善 ・データガバナンス(データカタログ、監査)のアーキテクチャ選定と構築 ・BigQueryやCloud Composerなどを活用したデータ処理ワークフローの最適化
プログラミングの経験3年以上 ・LinuxもしくはUnixの経験 ・クラウドインフラ(AWS/GCP)を利用したシステム構築ないし運用の経験 (オンプレの経験しかない方はNG) 【開発環境】 言語:Python インフラ: Google Cloud Platform (実機はありません) データベース: PostgreSQL DWH:BigQuery ワークフロー: Google Cloud Composer (Apache Airflow) その他ミドルウェア: Dataflow(Apache Beam), Dataproc(Apach Spark) , Cloud Run その他開発環境: GitLab, Slack, Growi 個人環境: Mac/Windows/Linux, Docker
・Pythonでの開発経験(3年以上) ・GCPを利用したシステム構築・運用のご経験
情報提供元: Midworks(ミッドワークス)
1年以上前

SNSアカウントでログイン