Athena × 60万円以上の業務委託案件・フリーランス求人一覧｜ページ4

【Python/AWSサーバーレス/フルリモート】海外向けスタートアップ組織にてAWS基盤のAPI・データ基盤開発

海外向けスタートアップ組織において、AWSを基盤としたプロダクト開発をご担当いただきます。 - iOSアプリと連携するAPIの設計・実装・運用 - 大規模データを扱うデータパイプラインの設計・構築 - サーバーレスを中心とした各種インフラの設計・構築・運用 原則フルリモートでの参画となり、必要に応じてオンラインでのコミュニケーション・レビューを行います。

ログ基盤整備及び分析【SaaS/リモートあり】

【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 ログ基盤整備及び分析 ‧新規開発中のSaaSにおいて、運⽤‧モニタリング、および詳細な利⽤状況の分析と改善のため、 必要な情報がログに出⼒されるようPythonで実装されたAPIに追加‧調整するとともに分析基盤を整える ‧ログの運⽤‧モニタリングを⾏い、コスト‧負荷‧エラーの発⽣状況を監視する ‧ログから利⽤状況や、データの出⼒状況の詳細な分析を⾏い、定期的なレポーティングに加えて、 UXからロジックにわたる課題の分析を⾏い、改善に繋げる ‧企業や個⼈に紐づく情報(論⽂‧特許‧企業情報‧インターネット検索‧クロ...

【Python/TypeScript/AWS】大手ゲーム会社向けデータ分析支援

大手ゲーム企業のソーシャルゲーム領域におけるデータ分析支援を幅広くご担当いただきます。 主な業務は以下の通りです。 ・バッチ処理の実行環境の運用および改善 ・データ分析向けの社内ツール/スクリプトの設計・開発 ・問い合わせ対応、障害時のトラブルシューティング ・必要に応じた運用設計や改善提案 長期想定の準委任案件で、エンド直案件となります。

【Python/AWS/常駐/週5日】WEBサービス向けETL開発・運用エンジニア

ETL処理の追加開発・改修作業 ETL処理の設計書作成・実装・単体テストを担当 運用/保守/改修 構築済みAWS環境に対しての運用改善 エラー時の調査

【Python/TypeScript/AWS】大手ゲーム会社向けデータ分析支援

大手ゲーム企業にて、ソーシャルゲーム領域のデータ分析基盤・運用支援を担当いただきます。 主な業務は以下の通りです。 ・バッチ処理実行環境の運用および改善 ・データ分析向けの各種ツール／スクリプト開発 ・問い合わせ対応および不具合時のトラブルシューティング ・CI/CD パイプライン整備、IaC による環境構築・保守 ・Jira などを用いたタスク管理、関係各所との連携 役割はメンバークラス想定で、長期での安定稼働を見込んでいます。

【Python/SQL/ログ基盤】新規SaaSのログ整備・分析基盤構築および運用モニタリング（基本リモート）

新規開発中のSaaSにおいて、運用・モニタリングならびに詳細な利用状況の可視化・改善を目的に、Python製APIへ必要なログ出力の追加・調整を行い、あわせて分析基盤の整備を担当いただきます。 ログ運用・監視によりコスト、負荷、エラー発生状況を継続的にトラッキングし、ログから利用傾向やデータ出力状況を深掘り分析。定期レポーティングに加え、UXからロジック層までの課題抽出と改善提案まで一気通貫で実施します。 また、企業・個人に紐づく各種情報（論文、特許、企業情報、Web検索/クロール、購入データ等）の仕様・特性をリサーチし、要件に応じて統合・整形・切り出しを行います。 主な使用技術はAWS中心（一部GCP/Azure併用）を想定...

【Kotlin/Vue.js/フルリモート】保育・教育施設向け業務支援SaaS｜写真販売機能のフルスタック開発

保育・教育施設向け業務支援SaaSのうち、写真販売事業領域の機能を担当いただきます。 新規機能の実装、既存機能の調査・改修・機能追加・リファクタリング、お客様問い合わせに対する技術調査、関連するチーム活動などを横断的に実施します。 段階的なリプレイスを進行中で、新システム（SSKotlin、TypeScript（Vue.js/React））と既存システム（PHP、AngularJS）の双方に携わります。インフラ/フロント/バックエンドを限定せず、得意領域を活かしつつフルスタックで広く関与いただくスタイルです。 開発手法はアジャイル（XP）で、ペアプロやTDDを積極的に導入しています。バーチャルオフィス（Gather）でのコ...

【Python/AWS/Azure/常駐/週5日】経営貢献データ分析推進AIエンジニア

経営に寄与するデータ分析の推進を実施いただきます。 ・分析テーマの実行と手順書作成 ・セマンティックレイヤ／カタログ設計・運用 ・Snowflake等を用いたAIエージェント機能の検討、検証の推進、結果取りまとめ ・関連組織との調整、優先度策定、進捗・リスク管理 ・必要に応じて顧客との打ち合わせあり。 基本オンサイト、慣れてくれば一部リモート可能かもしれませんが、 本番マシンルームからしかデータ取得ができないため出社できる方の募集とさせていただきます。 ３月末までに一旦PoCの結果の提出あり。

【Python/TypeScript/AWS】大手ゲーム会社向けデータ分析支援

大手ゲーム企業のソーシャルゲーム領域におけるデータ分析支援を幅広く担当いただきます。 主な業務は以下の通りです。 ・分析用バッチの実行環境の運用およびジョブ管理 ・データ分析に関連する内製ツールの設計・開発 ・各種問い合わせ対応、トラブルシューティング ・CI/CD の整備や IaC による環境構築・改善 長期参画を前提とし、現場メンバーとして安定運用と改善を両立いただきます。

【Rust/Python/フルリモート】自動車製造業向け不具合解析ツール精度向上・自動化システム支援

自動車製造業向けの不具合解析ツールにおいて、実運用で活用可能な精度を目指した改善および自動化を支援いただきます。 不具合時刻推定に関するソースコードを内製化し、ユーザーからのフィードバックを反映してアルゴリズムの精度向上を継続的に実施します。 基本はフルリモートでの参画となり、Rustを中心にPythonも活用しながら、データ前処理やAWS上のデータレイク基盤運用、CI/CD整備まで幅広くご対応いただきます。

【Python/機械学習/フルリモート】建設業向けデータ予測モデル開発・MLエンジニア募集

建設業界向けデータ分析サービスを展開する企業にて、機械学習モデル開発とデータ分析基盤の整備をリードいただきます。 - 建設データを用いた予測モデルの設計・開発・運用 ・企業ごとの建設データ解析に関するコーディング実務 ・分析モデルに必要な各種処理の実装 ・要件定義に基づく新機能開発およびモデル/システム改善 - データ分析基盤の構築・保守 ・建設データ分析のための基盤開発・整備 ・建設業特有データを活用したMLモデルの開発・運用 ・前処理/後処理パイプラインの設計・実装 担当工程は要件定義〜テストまで。作業場所は半蔵門、フルリモート（初日のみ出社）となります。

【渋谷/C#】ECパッケージ企業のAI関連自社プロダクト開発

大手ECパッケージを扱う企業にて、ECサイトの利便性を高めるためのAI関連自社SaaSプロダクトの開発・運用業務を担当いただきます。主にSaaS機能の追加開発、品質管理、運用監視、トラブルシューティングを実施します。 【技術スタック】 ・開発言語：C#、JavaScript、VB.NET (.NET5以上) ・クラウド：AWS（ECS、DynamoDB、Aurora、Athena、Lambda）、Microsoft Azure（App Service、SQL Database、Azure Functions） ・構成管理/CIツール：Terraform、Azure DevOps、Jenkins ・その他：Git、Bitbuc...

【リモート併用/渋谷/GCP】次世代データ基盤の要件定義・構築支援

次世代データ基盤の要件定義・設計・構築支援を担当します。現行基盤の課題整理、改善方針の策定、クラウド環境上での新規基盤設計・構築、パフォーマンスチューニング、パイプライン構築・閉鎖、関係者とのコミュニケーションやファシリテーションを含みます。 【技術スタック】 ・クラウド：AWS / Google Cloud ・開発：Lambda / Cloud Run / Functions / Cloud Storage / S3 / Compute Engine / Cloud SQL / BigQuery / EMR / RDS / Redshift / Athena / Airflow / Dataform ・IaC：terraf...

【Python/リモートあり】SQLエンジニア

【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 ‧新規開発中のSaaSにおいて、運⽤‧モニタリング、および詳細な利⽤状況の分析と改善のため、必要な情報がログに出⼒されるようPythonで実装されたAPIに追加‧調整するとともに分析基盤を整える ‧ログの運⽤‧モニタリングを⾏い、コスト‧負荷‧エラーの発⽣状況を監視する ‧ログから利⽤状況や、データの出⼒状況の詳細な分析を⾏い、定期的なレポーティングに加えて、UXからロジックにわたる課題の分析を⾏い、改善に繋げる ‧企業や個⼈に紐づく情報(論⽂‧特許‧企業情報‧インターネット検索‧クロール‧購⼊したデータなど)の...

【Python/AWS・データエンジニア/リモート】データ分析基盤のETL構築支援

様々なシステムから収集したデータを加工し、分析基盤（DWH）へ蓄積するAWS上のETL仕組みを構築いただきます。 (1) 外部データソース取り込みのワークフロー設計：取得タイミングやサイクルの検討、蓄積方式（洗い替え・積み上げ・差分取込など）の設計 (2) AWS Glueでのワークフロー定義（必要に応じて開発） ・CloudFormation（YAML）テンプレート作成 ・必要に応じてPython/SQLでのデータ取得・加工 ・GitHub ActionsでS3へデプロイ、動作検証 ※定型的な作業は標準化済みですが、収集元が多様なため個別実装が発生する場合があります。 (3) AthenaでDWH参照用のView作成：内製B...

【Rust/Python/フルリモート】自動車製造向け不具合解析ツール精度向上・自動化システム支援

自動車製造業向けの不具合解析ツールにおいて、時刻推定ロジックの内製化およびユーザーフィードバックを反映した精度向上をご支援いただきます。 Rustでのコア実装を中心に、Pythonによるデータ前処理や検証、AWS上でのデータ基盤活用（S3/Glue/Athena など）を組み合わせ、実解析に耐える品質へとブラッシュアップします。 基本リモートワーク、作業時間は原則9:00～18:00を想定しています。期間は2026年1月開始予定です。

【Java/Python/AWS/常駐/週5日】エンタメ系公営競技「Boatrace」Web/アプリ開発・データ分析エンジニア

公営競技「Boatrace」のWebシステム・アプリ開発。 ・開発保守→Linuxを用いてサーバーの保守運用をメインとする業務。 ・開発環境の作成 ・サーバーのメンテナンス（メモリ容量やCPUなどが高騰していないかなどのチェック） ・インシデント調査 ・1人月に満たない小規模開発業務。 ・開発がなく、iOSやAndroidのメジャーバージョンアップに合わせてWebアプリ、アプリに不具合が起きないかなどのテスト業務 ・データハブ保守→AWSを使用し、アンサー側から取得したログをもとにデータ分析をしている ・Athenaを使用してデータ検索 ・quickサイトの作成（取得してきたデータをグラフや表に落とし込み、より分かりやすい画面...

【Rust/Python/フルリモート】自動車製造向け不具合解析ツールの精度向上・自動化システム支援

自動車製造業向けの不具合解析ツールにおける精度向上プロジェクトに参画いただきます。 不具合時刻推定のソースコードを内製化し、ユーザーからのフィードバックを取り込みながら、実運用で活用できるレベルまで精度改善を推進します。 主にRustを中心に、Pythonを用いたデータ処理・検証、AWS上でのデータレイク/解析基盤の活用、CI/CD整備なども関与いただきます。 基本リモートでの稼働、作業時間は原則9:00～18:00を想定しています。

【Python/AWS/リモート併用/週3日,週4日】銀行認証システム更改 AWSインフラ構築・運用

銀行向け認証システムの更改におけるインフラ／運用に関するAWS環境構築・テスト。 ・EXCELにて詳細設計書の執筆・レビューバック対応 ・AWSを用いてテスト環境・本番環境の構築 ・AWSサービス上の処理実装（shellまたはPython） ・EXCEL運用保管ツールのExcelVBA／PowerShell実装部の改修 ※AWS環境構築からの参画となります

【TypeScript/PHP/Go/リモート併用/週5日】アフィリエイトプラットフォームGoエンジニア

アフィリエイトサービスにおけるシステムの保守、改修業務。新規機能の開発。

【Python/SQL/ログ基盤】リモート：新規SaaSにおけるログ分析基盤の構築・API改修

新規開発中のSaaSプロダクトにおいて、サービス改善の中核となるデータ分析基盤の整備と、それに伴うバックエンド実装を担当いただきます。 論文・特許・企業情報などのビッグデータを扱い、品質向上とコスト最適化を目指します。 ・API改修／ログ基盤整備: - Pythonで実装済みAPIに分析用ログを出力するための機能追加・改修 - ログ収集から分析までのデータパイプライン設計・構築 ・データ分析／モニタリング: - 蓄積ログをもとに利用状況分析、エラー率・サーバ負荷・コストの監視 - UX課題やロジック不備の発見と改善提案 ・データ統合／ETL処理: - Web上の非構造化データ（日本語テキスト等）を含む多様なデータの調査・統合...

【Go/フルリモート】マーケティングテクノロジー部における各種開発・保守・運用業務全般等

【募集背景】 増員のため 【作業内容】 ・DMMアフィリエイト保守・改修 【求める人物像】 ・常に技術を学んでいて、個人的にもアウトプットをしている方 ・積極的に開発参加していただける方 ・協調性のある方 ・リモートワークでも積極的にコミュニケーションが取れる明るい方 【開発環境】 ・クラウドインフラ： AWS（Fargate, Athena, Lambda, S3, ALB, Elasticache Redis, CloudFront, DynamoDB） GCP（Cloud Run, Cloud Load Balancing, Cloud Interconnect, Cloud Buil...

【Python/AWS/リモート併用/週3日,週4日】銀行向け認証システムAWS基盤構築・運用SE

銀行向け認証システムの更改 インフラ／運用に関するAWS環境構築・テスト ・AWS(EXCEL)にて詳細設計書の執筆・レビューバック対応 ・AWSを用いてテスト環境・本番環境の構築 ・AWSサービス上の処理実装（shellまたはPython） ・EXCEL運用保管ツールのExcelVBA／PowerShell実装部の改修

【PHP／GO】【SE】SaaS展開企業向けサーバーサイドエンジニアの求人・案件

SaaS展開企業にてサーバーサイドエンジニアとしてご参画していただきます。\nPHPまたはGo言語、およびAWSを用いたWebアプリケーションの、設計、開発、\n運用に携わっていただきます。\n\n【環境】\n・言語：PHP(Laravel)・Go(Echo)・JavaScript(Vue.js,\nNuxt.js, Vuetify)\n・DB：PostgreSQL\n・インフラ：AWS （ECS,ELB, EC2, RDS, S3, \nElastiCache, Redshift），Docker\n・その他：Jira,Github,AWS Athena, AWS S3,Redash

＜基本リモート＞Python／SQLによる新規SaaSログ基盤の整備／分析支援

製造業向け技術マッチングプラットフォーム運営会社でのプロジェクト案件。 □プロジェクト概要 ・企業同士のマッチングサービスや技術動向の調査を行なうリサーチサービスをSaaSとして提 供すべく、新規サービスの立ち上げプロジェクトへ参画 ・目的：運用モニタリング、利用状況の詳細な分析と改善への貢献 ・期待値：Python／SQLを活用し、ログ分析基盤の整備から、各種データの調査／統合までを主体的に行ない、サービスを改善 ・役割：Python／SQLエンジニア □業務内容 ・Pythonで実装されたAPIへ追加／調整 -必要な情報がログに出力されるように調整 ・分析基盤の整備 -新規開発中のSaaSにおいて、運用／モニタリン...

【SQL/AWS】国内最大手エネルギー事業者向け新音声基盤の運用・保守

【作業内容】 現在オンプレで稼働している国内最大手エネルギー事業者のコンタクトセンターシステムがEoSLを迎えるに伴って、Amazon Connectを活用したクラウドシステムに更改し、その運用保守となります。 AWS基盤運用・保守チームの一員として、設計やテスト、リリース、AWSリソースのCloudFormationのテンプレート修正、手動修正、単体・結合テストの準備と実施を行っていただきます。 また、トラブル・問合せ発生時には原因調査や必要に応じて設定変更、テスト、リリースを行います。 【開発環境】 Amazon Connect, Lambda, DynamoDB, ContactLens, Bedrock,...

【AWS/Redshift・Python/テクニカルリード】クロスサービス向け Datalake・DWH基盤の開発リード支援（リモート）

複数グループの顧客データを横断的に扱う大規模なAWSデータ基盤（Datalake/DWH）にて、体制強化のため即戦力のリードクラスを募集します。 Redshift、RDS、S3 を活用したデータ処理ロジックの実装・レビューを主導し、既存メンバーの設計/構築成果物の品質チェックと改善指導もご担当いただきます。 週2～3日程度の大手町オフィス出社を想定し、キャッチアップ後はリモート比率を高めていく働き方です。

【Python/TypeScript/AWS】フルスタックエンジニア/データ分析サポート

データ分析領域を横断してご担当いただくフルスタックポジションです。 - バッチ処理基盤の設計・構築・保守・運用 - データ分析用ツール/アプリケーションの開発・保守（フロント/バックエンド） - 問い合わせ対応、インシデント一次対応/エスカレーション - チーム/関係部署との連携、改善提案の推進 長期参画を想定し、上流から下流まで一貫してリードいただきます。

【Python/AWS/リモート】データ分析基盤ETL構築支援（データエンジニア）

複数システムから収集したデータを加工・蓄積するETL基盤をAWS上に構築します。主に下記を担当いただきます。 (1) 外部データソース取り込みのワークフロー設計：取得タイミング/サイクルの検討、蓄積方式（洗い替え・積み上げ・差分取り込み等）の設計。 (2) AWS Glueによるワークフロー定義・実装、CloudFormationテンプレート（YAML）の作成、必要に応じたPython/SQLでの取得・加工、GitHub Actionsを用いたS3デプロイ、動作検証。 ※定型は標準化済みですが、データ収集元に応じて個別実装が発生します。 (3) Athena上でDWH参照用のViewを作成し、内製BIツールからの参照に対応。 ...

【Python/フルリモート】建設業界DX向けデータ予測モデル開発・機械学習エンジニア

建設業界のDXを推進するデータ分析プラットフォーム「GORLEM」において、機械学習モデルの開発とデータ分析基盤の整備をリードいただきます。 主な業務内容: ・建設データを活用した回帰/分類などの予測モデル開発 ・各社向けの建設データ解析処理に関するコーディング ・分析モデルの改善および新機能開発（要件定義～実装まで） ・データ分析基盤の構築・整備・保守運用 ・建設特有データを用いた機械学習モデルの運用 ・ETL/ELTなどの前処理・後処理パイプライン構築 稼働形態はフルリモート、開始時期は12月を想定しています。

【AWS・フルリモ】中小企業向けビジネスマッチングサービスにおけるSREエンジニア

・SaaS展開企業にてSREエンジニアとして参画していただきます。 ・AWS を用いたWebアプリケーションの、設計、開発、運用に携わっていただきます。 ・具体的には、AWS設計/構築や、Iac（Terrafomなど）の構築に携わっていただきます。 ・また、CI/CDパイプラインの構築・改善、障害検知やキャパシティプランニングのための、 モニタリング環境の整備にも携わっていただきます。 ＜開発環境＞ ・言語：PHP(Laravel)・Go(Echo)・JavaScript(Vue.js,Nuxt.js, Vuetify) ・DB：PostgreSQL ・インフラ：AWS （ECS,ELB, EC2, RDS,...

【Go/リモートあり】マーケティングテクノロジー部における各種開発・保守・運用業務

【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 マーケティングテクノロジー部における各種開発・保守・運用業務 エントランスページ、メールマガジンの配信基盤、サイト内を回遊させるためのアドサーバーツール、アフィリエイトなど複数のプロダクトを保有している事業部での案件です。 【環境】 ・クラウドインフラ: AWS(Fargate,Athena,Lambda,S3,ALB,ElasticacheRedis,CloudFront,DynamoDB) GCP(CloudRun,CloudLoadBalancing,CloudInterconnect,CloudBui...

【Go/AWS・GCP/フルリモート】マーケティングテクノロジー部の各種開発・保守・運用

エントランスページ、メール配信基盤、サイト回遊を促すアドサーバーツール、アフィリエイトなど複数プロダクトを保有するマーケティングテクノロジー部での開発・保守・運用案件です。 【体制】 ・部門全体：31名（開発者21名／ビジネス職10名） ・配属チーム：7名（リーダー1名＋メンバー6名） ・JOIN後想定：社員3名＋SES4名 ・男女比：男性が多数 ・平均年齢：30代後半 【環境】 ・クラウド： - AWS（Fargate, Athena, Lambda, S3, ALB, ElastiCache Redis, CloudFront, DynamoDB） - GCP（Cloud Run, Cloud Load Balanci...

【AWS/バックエンド/基本リモート】大手音響メーカー向け 経営レポートシステム新規構築

大手音響機器メーカーの経営企画部門向けに、各国拠点から集約した経営情報をもとにレポートを作成する仕組みを、AWS上のWebサービスとして新規開発します。 現状は複数のExcelと関数でデータ整備・集計を行っていますが、運用の煩雑化や属人化が課題となっているため、AWS上にてWeb化・標準化を推進します。 担当いただく内容: - Excelで実装されている関数・業務ロジックの読み解きと、サーバーサイド処理への実装 - 可視化直前の整形済みデータ（レポート用データ）の生成・出力補助 - ユーザー部門（経営企画）との要件すり合わせ・仕様策定を含め、基本一人称で推進

【Go/Python/AWS】ココナラ_SREエンジニア（増員枠）

【募集背景】 ユーザー数のさらなる増加を実現するためのサービス拡大を目指しているが、そのためにはサイトの信頼性を高めるSREの強化が重要なポイントと捉えています。SREとして、プロアクティブに施策を実施していけるようにチームに新たな方を迎えることで、組織強化を図りたいと考え増員募集をします。 【作業内容】 急拡大中の事業を牽引するSRE（Site Reliability Engineer）ポジションを任せします。 具体的には「どのようにしたらサービスをより多くの方に、より便利に使ってもらえるか」というユーザー視点に立ち、 仮説・実行・検証のサイクルを回しながら、サービスの信頼性を高めて頂きます。 ・...

【Kotlin・PHP・Vue.js・React/リモートあり】教育施設向け業務支援サービス/フルスタックエンジニア募集

【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 教育施設向け業務支援サービス フルスタックエンジニア募集(Kotlin、PHP、Vue.js、React) E/Uが運営している「保育・教育施設向け業務支援サービス(SaaS)」の内 「写真販売事業」における以下の業務をご担当いただきます。 ・新規機能の開発 ・既存機能の調査・改修・機能追加・リファクタリング ・お客様からの問い合わせに対する技術的な調査 ・その他上記の目的達成に必要なチーム活動など システムのリプレイスを段階的に進めており、新システムで利用する「Kotlin,TypeScript(Vue.j...

【TypeScript/PHP/Go/リモート併用/週5日】エンタメアフィリエイトシステムのGoエンジニア

アフィリエイトサービスにおけるシステムの保守、改修業務を行っていただきます。新規機能の開発に携わっていただきます。 業務上アダルトコンテンツに触れる可能性がございます。

【Python/AWS/リモート併用/週5日】製造業向けデータ統合基盤開発（Python/AWS）

電気機器メーカー向けデータ統合基盤開発 基本設計書から詳細設計の作成（バッチ・ETL設計） ETLツールを用いた実装、テスト計画書作成とテスト実施 AWS（Amazon EventBridge、Lambda、 Step Functions、Athena、S3）

【Python/AWS/リモート併用】toB向けWEBサービス基盤構築：データエンジニア

様々なシステムからデータを収集、加工して、分析基盤に蓄積していくための仕組み (ETL)をAWS環境へ構築する案件です。 (1)外部のデータソースを取り込むためのワークフロー設計データの取得タイミングや取得サイクルを検討して、 どのようにデータを蓄積するか（※）を設計する※洗い替えなのか積み上げなのか、差分取込なのか、など (2)AWS Glue にワークフロー定義（必要に応じて開発） ・CloudFormation のテンプレート作成（yamlファイル） ・（必要に応じて）PythonやSQLなどでデータ取得・加工 ・Github Actions で S3 にデプロイ ・動作検証 ※定型的な作業は既に標準化されて...

【Python/AWS/リモート併用】toB-WEBサービス向けAWSデータ基盤構築 (ETL/DWH)

様々なシステムからデータを収集、加工して、分析基盤に蓄積していくための仕組み (ETL)をAWS環境へ構築する案件です。 (1)外部のデータソースを取り込むためのワークフロー設計データの取得タイミングや取得サイクルを検討して、 どのようにデータを蓄積するか（※）を設計する※洗い替えなのか積み上げなのか、差分取込なのか、など (2)AWS Glue にワークフロー定義（必要に応じて開発） ・CloudFormation のテンプレート作成（yamlファイル） ・（必要に応じて）PythonやSQLなどでデータ取得・加工 ・Github Actions で S3 にデプロイ ・動作検証 ※定型的な作業は既に標準化されて...