SQL Hadoop 東京都 求人・案件一覧

全7487件中2251-2300件を表示中

currency_yen
120~130万円/月額(想定年収:1440~1560万円)
fmd_good
東京 (リモートワーク可)
access_time
140~200時間
必須スキル

■経験
・3年以上のbashやPythonを用いたバッチ処理の開発・運用経験
・3年以上の開発物に対するドキュメンテーション作成経験
・3年以上のエンジニア3名以上のチームでの開発経験
・2年以上のBigQuery,Oracle でのOLTPではないデータ分析のSQL開発経験
・データマネジメントの経験
・Git、JIRA、Jenkins等の開発ツールの利用経験
・単体/結合試験の品質評価の経験
■能力
・新規データマートの要件定義、設計、開発ができる
・運用を見据えた設計、コーディング、コードレビューができる
・マート領域において全体のデータフローを理解してジョブの設計と運用ができる
・3か月以内のSQL開発案件において、要件定義ができる
・関係者に対して積極的にコミュニケーションを取り、障害の報告や課題解決ができる
・BQやGCP等の新技術の調査および未経験領域の理解と利用が可能
・適切なドキュメンテーションを行い、チームでの開発に必要な情報共有ができる

情報提供元: Midworks(ミッドワークス)

11ヶ月前

currency_yen
110~120万円/月額(想定年収:1320~1440万円)
fmd_good
本郷三丁目
access_time
140~180時間
必須スキル

・円滑なコミュニケーションが取れる方
■サーバーサイドエンジニアとしてBigData解析業務に従事したご経験
・データ分析基盤構築等のETLや物理構築ではなく、データ解析のご経験)
・今回ハンドルして頂くデータ(=5千万SKU×週次販売データ3年分)を、少なくとも上回る量のデータ解析経験
・BigDataに対して、構造化され柔軟性の高い解析Codeを記述し、Back & Forthのiterationを実施したご経験
<②コーディングスキル等: 必須>
■ SQL
・現状確認段階:
クライアント基盤システムが数万行のSQLで構築されている為、長文のSQLをクイックに読み解き、クライアントとデータ定義(含む処理手順)のディスカッションを実施できること
※ 今回、SQLでアルゴリズムを構築することは行わない為、SQLによる構築ではなく、現状確認段階として長文SQLを読み解くことができることが重要
・解析段階:
SQLのクエリ羅列では無く、テーブル自体の構造化を行って、構造的な解析クエリをくみ上げるられるスキル
・シミュレーション段階
過去データに対して一定の条件を付与し、保有在庫のシミュレーションを行えること
※ 但し、大量のハイパーパラメーターのfittingすることは想定しておらず、在庫回転期間・欠品率・発注回数をKPIとしたシンプルな販売&保有在庫シミュレーションを想定
■GCP等のクラウド解析ツール
・BigData解析に関して適切なLibrary選択に知見をお持ちであり、解析スピードの担保が出来ること
※ 扱うデー量が多いくローカルでは対応が難しい為、クラウドツールの使用が必須
■Python
・Pythonによる基本的なデータ解析のCoding
※ 基本的にはGCP等のクラウド基盤上でSQLを組む予定だが、一部データを切り出してローカルでクイックに解析することも発生する可能性がある為(但し、Pythonで機械学習モデル構築を行うことは想定ししておらず、一部データを先にローカルに切り出して分析し仮説構築をすることを想定)

情報提供元: Midworks(ミッドワークス)

1年前

全7487件中2251-2300件を表示中

他の関連スキルの案件を見る

    他の職種の案件を見る