Apache Sparkの業務委託案件・フリーランス求人一覧

大手インターネット企業におけるMLエンジニア【BigQuery・Terraform・MCP Server・RAG・LLM・Python・Apache Spark・codex・claude code/リモートあり】

【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 大手インターネット企業におけるMLエンジニア 【業務概要】 ・全社データ分析基盤のアーキテクチャ設計・構築 ・データレイク / DWH（BigQuery）基盤の設計・運用 ・ETL / ELTパイプラインの設計・開発 ・クロスクラウドデータ連携（OCI → GCP）の設計・実装 ・データモデリング（OBT / mart）の設計 ・Terraformを用いたIaCによるインフラ管理 ・データ基盤に関わるネットワーク・セキュリティ設計（IAM / VPC / データガバナンス） ・AIデータアクセス基盤（MCP /...

【Maya/Unity】大手ゲーム会社3DCGゲーム_エフェクトアーティスト

◆案件概要 ・某大手ゲーム開発会社において3DCGゲームのエフェクトアーティストを担当いただきます。 ◆業務内容 モバイルゲーム及びコンシューマーゲーム開発におけるエフェクト制作業務を行なっていただきます。 ・ゲーム開発におけるエフェクト制作業務 ・エフェクト表現の検証、作業効率化の為のツール支援業務 ・エフェクトに関するクオリティ管理、監修業務

大手企業でのフロント業務支援スタッフ募集

大手企業の総務部にて、フロント業務を担当していただきます。主な業務は受付対応、電話応対、来客案内、会議室への案内、そして事務作業やオフィス環境の維持管理です。 ■ 業務内容 - 受付業務と来客対応 - 電話応対と問い合わせ対応 - オフィス環境の整備と事務作業 【アピールポイント】 - 定時勤務で残業が少ない環境 - 大手企業での経験価値が高い案件 - 高いコミュニケーションスキルを活かせます

セキュリティ機能の開発案件

セキュリティ機能の開発

大手インターネット企業におけるMLエンジニア【BigQuery・Terraform・MCP Server・RAG・LLM・Python・Apache Spark・codex・claude code/リモートあり】

【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ ▼概要 大手インターネット企業におけるMLエンジニア 【業務概要】 ・全社データ分析基盤のアーキテクチャ設計・構築 ・データレイク / DWH（BigQuery）基盤の設計・運用 ・ETL / ELTパイプラインの設計・開発 ・クロスクラウドデータ連携（OCI → GCP）の設計・実装 ・データモデリング（OBT / mart）の設計 ・Terraformを用いたIaCによるインフラ管理 ・データ基盤に関わるネットワーク・セキュリティ設計（IAM / VPC / データガバナンス） ・AIデータアクセス基盤（MCP /...

セキュリティ機能の開発案件

セキュリティ機能の開発

【定番】【リモート相談可 / Python / 週4日〜】「スポーツ × AI × データ解析」自社メディアのAI開発

自社で開発した人工知能をメディアに搭載し、現在はプロ野球を中心に勝敗予測、3D一球速報を展開しています。 Bリーグ、Jリーグに加え、今後も領域を拡大予定。 各競技毎にアルゴリズムを調整し、最適化を実現していくための増員募集です。 主に今後拡大予定のスポーツそれぞれに機械学習のアルゴリズム開発、調整をお願いします。 公開_備考：※月額報酬額は”最大稼働可能日数”で換算した際の金額です。

【定番】【フルリモ / AWS / 週3日〜】分散DBを用いたデータ基盤のインフラ運用改善

テレビ視聴データを分析するデータ基盤のインフラエンジニアとして、特に AWS EMR での Spark, HBase, Hive, Presto, Hudi といった分散DBの知見のある方を募集いたします。 データ基盤以外のインフラ全般について担当するエンジニアと連携して、システム基盤の運用改善に取り組んでいただきます。 公開_備考：※月額報酬額は”最大稼働可能日数”で換算した際の金額です。

【定番】【データアーキテクト】自社グループのデータ分析基盤の構築

【業務内容】 ・データレイク/ウェアハウス・マートの設計/開発/運用/保守 ・データの抽出/分析/視覚化 公開_備考：※報酬額は【週5日（月20日）換算】した際の金額です

日銀向けシステム開発エンジニア案件【Java・Python】

日本銀行向けのプロジェクトで、Java＋JUnitまたはPython＋pysparkを使用したシステムの製造フェーズにご参画いただきます。銀行に特化した経験がある方を募集しており、即戦力として活躍できる場を提供します。面談回数は2回を予定しており、場合によっては1回に減ることもあります。 ■ 業務内容 ・システムの製造フェーズ作業 ・既存システムの改善 ・技術的な課題解決 【アピールポイント】 ・銀行系システムに深く関わる経験が積める ・安定した金融機関プロジェクトによる長期稼働可能性 ・チーム体制で働くことで協調性を活かせる ・最寄駅が品川でアクセスが良い ・スキルに応じた報酬体系

【Scala】大手広告系企業向けツール開発案件

広告配信企業向けのデータ処理・分析基盤や自社DSPの開発、保守運用を担当していただきます。 新規機能追加や既存機能の改修が主な作業です。

【Scala】動画広告の配信ログの処理システム開発案件

動画広告の配信ログの処理システムの開発を担当していただきます。 ログデータの集計や解析のためのバッチ処理の開発や、リアルタイムでのログの収集・解析のための開発をお任せします。

【Scala】教育動画サービス開発案件

教育分野に特化した動画配信サービスの開発を担当していただきます。 新規機能の開発や既存機能の改善、品質向上などをお任せします。

【Scala】マーケティングデータ分析基盤開発案件

マーケティングデータ分析基盤の開発を担当していただきます。 ビッグデータ分析技術や機械学習技術を駆使し、最適な解析環境の構築を目指します。

【Hadoop/Spark/Kafka/Hive】広告プラットフォームの開発・運用（ビッグデータ処理）案件

広告プラットフォームの開発・運用をご担当いただきます。 具体的な業務内容はデータ処理フレームワークおよびテクノロジを使用した大規模なバッチおよびリアルタイムのデータ・パイプラインの構築・保守・運用 、適切なアーキテクチャ選定、および開発・運用プロセスを推進するためのエンジニアリングチーム（または、プロジェクトチーム）のリード、実装における技術選定（アーキテクチャと開発プロセス）および本番システムの品質担保（運用・保守）です。

【Databricks/AWS/データエンジニア】フルリモート可 データ基盤開発

以下、概要になります ・フルリモート可能です ・Databricksを用いたデータ基盤の開発において、設計から製造・テストまで一連の工程を担当するポジション ・役割：開発メンバー ・フェーズ：要件定義～テスト ・主な業務：データ基盤の設計・開発・テスト、一部要件定義など

データ基盤パイプライン開発エンジニア募集

現行のデータ活用基盤からDatabricksへのデータ複製を行う パイプライン開発に携わっていただきます。初期構築は完了 しており、継続的な開発および一部維持管理を担当します。 ■ 業務内容 - データ複製パイプラインの設計と開発 - 継続的なデータ基盤の改良 - データ管理の効率化と品質改善 - 顧客ニーズのヒアリングと提案 【アピールポイント】 - 最先端技術を使用したデータ基盤強化プロジェクトに参画 - 技術力を活かして長期間プロジェクトに貢献可能 - 柔軟なプロジェクトマネジメント環境 - コミュニケーションスキルを活かせる場面が多い - キャリアアップにつながる経験を積める

エフェクトデザイナー／SPARK GEAR・Unity／ゲーム開発

＜＜スマホゲームを中心に、「ゲームで世界に感動を創り出す」企業！！＞＞ ゲーム開発におけるエフェクトデザイナー業務をお任せします。 ■□具体的には…□■ ・バトルキャラクター、モンスターのエフェクトデザイン制作 ・シナリオキャラクターのエフェクトデザインの制作 ・エフェクト演出制作 ・組み込み、実装 ・使用ツール ∟SPARK GEAR／Unity／Photoshop／Maya ＜こんな方におすすめです！＞ ・デザインスキルを活かしたい方 ・新しい技術や表現に挑戦したい方

デジタルバンク新設に伴うデータ基盤構築／開発支援 ※シニアデータエンジニア

DXコンサルティング企業（エンド：金融業）でのプロジェクト案件。 □プロジェクト概要 ・デジタルバンク新設に伴うDatabricksを中心としたデータ基盤構築プロジェクトへ参画 ・目的：レイクハウス環境におけるデータパイプライン設計／実装および品質管理の遂行 ・期待：シニアデータエンジニアとしてチーム内の技術リードおよびレビューを担う □業務内容 ・Databricks上でのデータパイプライン設計／実装 ・データ品質管理、照合、性能最適化および運用改善 ・データモデル設計、下流API連携、チーム内の技術リードおよびレビュー ■求めるプロ人材、コンサルタントのスキル・経験・素養 ・データエンジニアリングまたはアナリティクス...

デジタルカード事業の動画クリエイター募集

新規開発中のデジタルカード事業での動画クリエイターの募集です。ディレクターと連携し、動画を中心にデジタルカードやプロモーション用動画等の制作、外注会社のディレクション、制作方針の策定、制作物の検品を担当いただきます。 ■業務内容 - デジタルカードやプロモーション用動画の制作 - 外注会社のディレクション - 制作方針の策定 - 制作物の検品 - ディレクターとのコミュニケーション 【アピールポイント】 - ポートフォリオ提出必須によるスキルの明確化 - 即日参画可能でプロジェクトにすぐ関われる - 週2日のリモートで柔軟な働き方が可能 - 上限80万円の高単価案件 - 長期プロジェクトで安定した就業可能性

【Python/Azure/フルリモート】WEBサービス向けDatabricksデータ解析システム開発

Databricksによるデータ解析システムの開発案件です。データエンジニアを1名募集致します。設計～テストまでご担当頂きます。

【Databricks/PySpark・Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

トラック製造・販売メーカー向けに、車両輸送状況をリアルタイムに可視化する業務アプリのパフォーマンス改善を担当いただきます。現状、車両から送信される膨大なGPSログ解析で処理遅延が発生しており、Databricks を中心にデータ処理基盤の抜本的なチューニングと改善実装を行います。 想定業務: ・Databricks（PySpark/Scala）環境のパフォーマンス最適化 ・大規模データ処理（数億行規模）の実装・改修 ・Azure データ基盤（Data Factory など）のパフォーマンス改善 ・保守運用、構成管理、リファクタリング 商流はエンド→弊社→貴社。弊社から複数名稼働中で意思決定・動きは速い環境です。

【Databricks/SQL/Python/フルリモート】データ解析システム構築支援案件

【募集背景】 【作業内容】 Databricksによるデータ解析システムの構築支援（設計/実装/テスト）を行います。 【求める人物像】 受け身や指示待ちでなく、主体的に業務に取り組み積極的に行動できる方。 チームメンバーとも積極的にコミュニケーションが取れ、チームとしての動きを意識できる方。 前向きに仕事と向き合える方。 周囲に対して気配りができる方。 【ポジションの魅力】 最新のデータ解析技術に携わり、スキルアップを図ることができます。 【開発環境】 Databricks、Azure Blob Storage、Azure Data Factory、SQL/Python、Power BI

需要予測サービスの導入支援【Python】【日本人限定/一部リモート】

下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日（月〜金）で稼働可能な方 ＊副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー ・小売業向け需要予測サービスの導入支援 ・ベンダー側SEとして要件定義から導入までの対応 ・お客様からの要望に合わせて下記対応 -モデルに読み込ませるデータの加工、ストレージへの対応 -モデル構築、インターフェースの開発 -システムの移行、データの移行(パフォーマンス検証) 週5日、リモート

【週４リモート/AWS・Databricks】ビッグデータ解析・分散処理基盤開発データエンジニア募集！

自社サービスのデータエンジニアとして、ビッグデータ解析/分散処理基盤開発をお任せします。 今後様々な連携を行っていく上でのデータ基盤開発を強化していく方針であり、 その推進をお願いできればと考えております。 ＜具体的な業務例＞ ・Databricks 上に構築された社内向けの新データ基盤の開発・運用 ・AWS 上に構築された旧データ基盤の運用 ・社内各所の要求に応じた dbt によるデータモデリング ・AWSを利⽤したビッグデータ解析⽤分散処理基盤のアーキテクチャ選定から設計 ・実装、運⽤フロー⾃動化の提案、実装 ・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定 ・各所ニーズ(マーケター、サイエンティスト、機械...

【Java/Spark/AWS】メガバンク向けシステム一元化案件

大手メガバンク向けに、銀行側と信託側のシステムを統合（一元化）する大型プロジェクトです。 12月～基本設計、1月～詳細設計、3月～CD/UT、5月～IT（結合/総合テスト）を予定し、C/Oは2027年2月を見込みます。良好であれば以降の延長可能性もあります。 担当想定は以下の通りです。 ① 既存システムの保守・運用 ② 銀行側と信託側のシステム統合（取込）により、信託側をクローズ 環境はJava、Shell（Java起動）、Spark（分散処理・データマッピング）、Python（Spark起動）で、AWS上での稼働が想定されています。 稼働は水天宮前/人形町駅付近での常駐、定時は8:50～17:30です。弊社体制で参画中で、ベ...

【Python/AWS/データ基盤】大手製造小売向けデータプラットフォーム開発・運用（リモート）

大手製造小売企業における、AWSベースのデータ基盤の構築・運用案件です。 主な業務は以下の通りです。 ・AWSを活用したデータ基盤の設計、構築、運用 ・Airflow等を用いたETL/データパイプラインの設計〜改善 ・Spark/PySparkによる大規模データ処理の実装 ・分析用データモデルの設計、dbtを用いたモデリング・開発 ・運用チームのタスク管理、コードレビュー、トラブルシューティング対応 など 期間は2026年1月開始の長期予定（初月単月契約、以降応相談）。勤務地は茅場町を拠点としたリモート併用で、就業時間は9:00〜18:00です。 面談は1回（弊社同席）。募集は1名、年齢不問です。 二段階認証（Authent...

【Python／Shell】【PL】大手製造小売業におけるデータ設計開発業務の求人・案件

大手製造小売業におけるデータ設計開発業務の運用リーダーとしてご参画していただきます。\n\n主に下記作業をご担当いただきます。\n・AWS を活用したデータ基盤（DWH／データレイク）の設計・構築・運用\n・Glue・Spark／PySpark・MWAA などを用いた ETL／\nデータパイプラインの開発・改善\n・分析向けデータモデル（DWH スキーマ等）の設計および dbt を用いたモデル開発\n・データ処理の品質管理、パフォーマンス改善、運用フローの最適化\n・運用チームのタスク管理・トラブルシューティングなどのリーダー業務\n\n【開発環境】\n使用言語: Python, Shell Script, SQL\nデータ処...

【Java/Spark】メガバンク向けシステム一元化開発

メガバンク向けに、銀行側と信託側のシステムを一本化する大規模プロジェクトです。既存システムの保守・運用を行いつつ、段階的に基本設計、詳細設計、製造・単体テスト、結合テスト、ITを実施し、最終的に信託側システムをクローズします。 期間の目安： ・12月～ 基本設計 ・1月～ 詳細設計 ・3月～ 製造/UT ・5月～ IT ・C/O：2027年2月予定（以降の延長可能性あり） 環境：Java、Shell（Java起動）、Spark（分散処理・データマッピング）、Python（Spark起動）、AWS想定 作業場所：水天宮前/人形町駅（常駐） 定時：8:50～17:30 体制：元請けから複数名体制で参画中。ベテラン＋若手のセット提案...

【Python/Spark・AWS Glue/Step Functions】データサービス基盤(ODS/Data-Hub)開発

データ活用基盤において、各種源泉システムからのデータ蓄積を担う ODS(Operational Data Store) と、源泉システムと ODS 間のデータ連携を実現する Data-Hub を中核コンポーネントとして設計・実装します。 基本設計以降の工程を担当し、ETL/ELT パイプラインの設計・構築、バッチ/ストリーミング処理、API 連携の実装、クラウド上での運用まで幅広く対応いただきます。 主な利用技術は Python、Spark、AWS Glue、AWS Step Functions、EMR、Lambda、各種データベースとなります。

【AWS/インフラ/Spark】大手通信系データ分析基盤の高度化開発PJT サブリーダー

大手通信企業向けの大規模データ分析基盤における保守・機能拡張プロジェクトです。 AWSを中心に、新サービス導入の技術検討からインフラ構成検討・設計、リリースまで一連の工程を担当します。 直近ではCI/CD、Databricks、チャットボット、コンテナなどの新技術をPOC的に継続導入しています。今回は技術面でのサブリーダーとして、リーダーの補完やメンバーフォローを担える方を募集します。上位からは現在7名参画中です。 ＜想定業務＞ ・AWS環境でのサーバ構築やシステム開発 ・Spark/EMRによるデータ分析・抽出 ・データ集計、手動更新、テストデータ投入 ・AWS Lambdaでのジョブ実行コントロール ほか ＜システム...

【web面談設定済み、弊社同席、リモート併用】大手通信業者様データ情報系システムのモダナイズ案件/

大手通信業者様のデータ情報系システム（大規模DWH）を 段階的にクラウドシフトしている案件です。

【AWS/Python/Spark】データ分析基盤の保守開発サブリーダー

大手通信企業向けの大規模データ分析基盤にて、保守開発および新規技術導入を推進するサブリーダーを募集します。 AWSを中心に、インフラ構成の検討・設計からリリースまで一連を担当。CI/CD、Databricks、チャットボット、コンテナ等のPOC的導入・刷新にも関与いただきます。 具体的には、AWS環境でのサーバ構築やシステム開発、EMR/Sparkを用いたデータ分析・抽出、データ集計・手動更新、テストデータ導入、AWS Lambdaによるジョブ実行コントロールなどをお任せします。

【Python/Azure/フルリモート/週5日】WEBサービス小中学生向け学習支援サービスにおけるデータ分析基盤

小中学生向け学習支援サービスにおけるデータ分析基盤の保守開発を担当していただきます。 ・既存システムのキャッチアップ ・データ分析基盤の保守開発

【Python/Azure/リモート併用/週5日】教育系データサイエンティスト

必要技術に記載した技術を活用したデータ分析基盤構築の経験が豊富な方 ・既存システムの仕様を読み取り キャッチアップをスムーズに行える方 ・保守経験が豊富な方

【二子玉川/AI×セキュリティデータ】某大手EC企業のデータエンジニアポジション

データ分析とインサイト抽出：サイバーセキュリティ関連データの詳細な分析を行い、傾向、パターン、異常を特定。可視化やレポートを通じてステークホルダーに共有。 AIモデルの展開と運用：AI/MLモデルを本番環境に展開・監視・保守し、高可用性と高パフォーマンスを確保。 AIインフラ管理：クラウドリソースや専用ハードウェアを含むAI／データインフラの選定、導入、管理。 データパイプラインの構築：大規模なサイバーセキュリティ関連データの取り込み、処理、変換のための堅牢かつスケーラブルなパイプラインを設計・構築・保守。 AIモデルの性能最適化：本番環境でのAI/MLモデルの性能を最適化（ファインチューニング、スケーリング、リソース...

【フルリモート】Databricks！学習支援サービスにおけるデータ分析基盤の保守開発

Databricksをベースとした既存データ分析基盤からの即時キャッチアップが求められており、 加えて即時運用開発へ移行いただける方を募集しております。 ＜業務内容＞ ・既存システムのキャッチアップ ・データ分析基盤の保守開発 ＜就業時間＞ 9:00-18:00 ※※こちらの案件は現在募集を終了しております※※

【SE募集】Azure・Sparkによる学習支援サービスのデータ基盤開発案件

学生向け学習支援サービスにおけるデータ分析基盤の保守開発をご担当いただきます。 既存システムの仕様を迅速にキャッチアップし、Azure関連技術を活用したシステムの保守および開発に従事していただきます。 【具体的には】 ◆既存データ分析基盤の保守・開発業務 ◆既存システムの仕様把握・キャッチアップ ◆Azure Data Factory、Data Lake Storage、Databricks 等の利用 ◆SQL、Python（PySpark）、Apache Sparkを用いた開発

【SAS】データマネジメントシステムのクラウド移行支援

データ分析用途のデータマネジメントシステムをクラウド環境へ移行するプロジェクトです。 【作業体制】 以下いずれかのチームにアサインされます。 1. SASからSASViyaへの移行（データマート設計・開発・テスト） 2. Databricks / Apache Spark / SQL / Pythonを利用した設計・開発・テスト

小売/卸売業向けAI系サービス_データ基盤構築/75万(Python/Spark)

★【～75万円/フリーランス/Python/Spark】小売/卸売業向けAI系サービス_データ基盤構築/~75万@フルリモート※30~50代活躍中!!【業務内容】 ・某ベンチャー企業にて、在庫最適化システムを支えるデータ基盤の構築を行っていただきます。 自社サービスSaasの新バージョンをこの春リリースし、 エンタープライズとの契約が急激に 増えている中で、 非常に多くの機能改善要望や機能追加要望が出てきています。 顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、 データストアに投入する機構の構築に携わっていただきます。 社員エンジニアとスクラムチームを形成し、スクラムイベントを通じ...