フルリモート​/データ、AWS、Terraform​/週】データリネージ基盤構築支援

ロボットデータ基盤において、データ処理過程を追跡可能にするデータリネージ機能の設計・構築を支援。

• データリネージ機能の設計、構築
• ロボットデータの処理過程を追跡可能にする仕組みの設計
• データカタログ基盤の構築
• Open Metadata等の導入検討
• Iceberg／PostgreSQL／Dagsterとの連携設定
• 認証基盤の移行対応
• KeycloakのAWSデプロイ
• AWS Cognitoからの移行、IdP管理
• データパイプラインのマルチテナント対応
• Dagster／Iceberg／Nessieのネームスペース分離
• AWSインフラの改善、最適化
• ECSリソース調整、モニタリング、コスト最適化

• 単価：90万
• 時期：7月～
• リモート頻度：フルリモート
• 外国籍：不可 ※帰化含め不可
• 個人事業主：可
• 地方：可
• 面談：2回（Web）
• 年齢：40代まで

• データパイプラインの設計・構築経験（Dagster、Airflow、dbt等いずれか）
• データリネージやデータカタログの設計経験、またはアーキテクチャレベルでの知見
• AWSでのインフラ構築・運用経験（ECS、RDS、ALB、S3等）
• Terraformによるインフラコード管理の経験
• Docker／Docker Composeを用いた環境構築経験
• Git（Git Hub）を用いた開発経験
• 技術選定・設計から実装・運用まで自走できる方

• データカタログの導入・運用経験（Open Metadata、Apache Atlas、Data Hub等）
• データメッシュやメダリオンアーキテクチャ等のデータ基盤設計パターンへの理解
• Apache Iceberg／Nessie／Trino等のデータレイク技術の経験
• 認証基盤の構築経験（Keycloak、OAuth2／OIDC）
• Pythonでのツール・スクリプト開発経験
• データ品質管理やデータガバナンスの設計経験
• コスト最適化やモニタリング設計の経験

• クラウド：AWS（ECS Fargate、RDS、S3、ALB、Cloud Watch）
• IaC：Terraform
• データ基盤：Dagster、Apache Iceberg、Nessie、Trino
• 認証：Keycloak、AWS Cognito
• その他：Docker、Open Metadata、Nginx

• 契約形態：準委任契約（履行割合型）
• 商流：貴社まで

We are currently recruiting a 【フルリモート / データ、AWS、Terraform / 週5】データリネージ基盤構築支援 for our team in United States.

Are you ready to take on the 【フルリモート / データ、AWS、Terraform / 週5】データリネージ基盤構築支援 role at Tech Direct?

We would love to welcome a new 【フルリモート / データ、AWS、Terraform / 週5】データリネージ基盤構築支援 to our group in United States.

For the 【フルリモート / データ、AWS、Terraform / 週5】データリネージ基盤構築支援 position at Tech Direct, we are reviewing applications now.

Step into the 【フルリモート / データ、AWS、Terraform / 週5】データリネージ基盤構築支援 role at Tech Direct in United States and grow with us.