Hadoop × 80万円以上の業務委託案件・フリーランス求人一覧

【定番】【リモート相談可 / Python / 週4日〜】「スポーツ × AI × データ解析」自社メディアのAI開発

自社で開発した人工知能をメディアに搭載し、現在はプロ野球を中心に勝敗予測、3D一球速報を展開しています。 Bリーグ、Jリーグに加え、今後も領域を拡大予定。 各競技毎にアルゴリズムを調整し、最適化を実現していくための増員募集です。 主に今後拡大予定のスポーツそれぞれに機械学習のアルゴリズム開発、調整をお願いします。 公開_備考：※月額報酬額は”最大稼働可能日数”で換算した際の金額です。

【Scala】大手広告系企業向けツール開発案件

広告配信企業向けのデータ処理・分析基盤や自社DSPの開発、保守運用を担当していただきます。 新規機能追加や既存機能の改修が主な作業です。

【Hadoop/Spark/Kafka/Hive】広告プラットフォームの開発・運用（ビッグデータ処理）案件

広告プラットフォームの開発・運用をご担当いただきます。 具体的な業務内容はデータ処理フレームワークおよびテクノロジを使用した大規模なバッチおよびリアルタイムのデータ・パイプラインの構築・保守・運用 、適切なアーキテクチャ選定、および開発・運用プロセスを推進するためのエンジニアリングチーム（または、プロジェクトチーム）のリード、実装における技術選定（アーキテクチャと開発プロセス）および本番システムの品質担保（運用・保守）です。

【Databricks/PySpark/Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

トラック製造販売メーカー向けに、商用車の輸送状況をリアルタイム可視化する業務アプリのパフォーマンス改善を担当いただきます。 膨大な車載GPSログの解析で発生している処理遅延を解消するため、Databricks（PySpark/Scala）を中心にデータ処理基盤の抜本的なチューニングおよび改善実装を実施します。 主な作業内容: ・Databricks（PySpark, Scala）環境のパフォーマンス最適化 ・大規模データ処理の実装/改修（数億行規模） ・Azure上のデータ基盤のボトルネック解析と改善 ・保守、構成管理、リファクタリング 稼働形態は新川崎駅近辺にて初月は週3出社、その後は週1出社を想定（状況により変更の可能...

【Databricks/PySpark・Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

トラック製造・販売メーカー向けに、車両輸送状況をリアルタイムに可視化する業務アプリのパフォーマンス改善を担当いただきます。現状、車両から送信される膨大なGPSログ解析で処理遅延が発生しており、Databricks を中心にデータ処理基盤の抜本的なチューニングと改善実装を行います。 想定業務: ・Databricks（PySpark/Scala）環境のパフォーマンス最適化 ・大規模データ処理（数億行規模）の実装・改修 ・Azure データ基盤（Data Factory など）のパフォーマンス改善 ・保守運用、構成管理、リファクタリング 商流はエンド→弊社→貴社。弊社から複数名稼働中で意思決定・動きは速い環境です。

【Databricks/SQL/Python/フルリモート】データ解析システム構築支援案件

【募集背景】 【作業内容】 Databricksによるデータ解析システムの構築支援（設計/実装/テスト）を行います。 【求める人物像】 受け身や指示待ちでなく、主体的に業務に取り組み積極的に行動できる方。 チームメンバーとも積極的にコミュニケーションが取れ、チームとしての動きを意識できる方。 前向きに仕事と向き合える方。 周囲に対して気配りができる方。 【ポジションの魅力】 最新のデータ解析技術に携わり、スキルアップを図ることができます。 【開発環境】 Databricks、Azure Blob Storage、Azure Data Factory、SQL/Python、Power BI

【Databricks/PySpark・Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

トラック製造販売メーカー向けに、車両のGPSログを用いたリアルタイム可視化アプリのパフォーマンス最適化を行います。 現状、膨大なGPSデータ解析で処理遅延が発生しており、Databricks（PySpark/Scala）およびAzureデータ基盤を中心に、抜本的なチューニングと改善施策の設計・実装をご担当いただきます。 想定業務: ・Databricks（PySpark, Scala）のパフォーマンス最適化 ・大規模バッチ/ストリーミング処理の実装・改修 ・Azureデータ基盤（ADF/SQL/Functions等）の性能改善 ・保守運用、構成管理、リファクタリング 稼働形態は新川崎駅近辺にて、初月は週3出社、その後は週1...

【ApachFlink/Hadoop】会計処理システムのリプレイス案件

社内システムのリプレイス（会計処理システム）案件にご参画いただきます。 既存システムのリプレイス、アーキテクチャから見直していただきます。 リプレイスに先立ち、コアとなるバッチ処理の一部機能をApache Flink、Hadoopを適用して一部移行(実装)し、 既存システム全体のFlink、Hadoopに置き換えた際の動作担保、性能検証を行います。 そのうえで、リプレースの規模感や、要件整理のためのPoCとします。 バッチ処理で、ApachFlinkやHadoopDBを使用することを検討しており、 アーキテクチャ設計や検討（Poc）可能な要員を募集しています。 ＜想定作業＞ ・既存機能の把握 ・ 一部機能の実...

【二子玉川/SQL/Python】 AIプラットフォームの構築

AIモデルのエンドツーエンド開発：ビジネス部門との議論、データ収集、EDA（探索的データ分析）、モデル学習、評価、リリースまでを担当 モデル評価と改善：月次でのパフォーマンス評価と継続的な改善 ビジネスへの説明：EDAやモデル結果をビジネス部門に分かりやすく説明 目標の共有と調整：ビジネス部門と目標を共有し、フィードバックを反映

【PL】プロダクト開発におけるテックリードの業務委託案件・フリーランス求人

企業不正という社会課題に向き合い、実務とテクノロジーの融合で課題解決を図るポジションです。高い自由度と柔軟性、社会的意義を兼ね備えた案件です。

【定番】【リモート相談可 / Linux / 週5日】一般企業向けビッグデータ配信システム/データセンター基盤構築及び保守支援

①インフラ枠 SNS企業からのデータを加工し契約法人向け配信しているシステム基盤の構築と維持を行っていただきます。(保守) ②システム枠 環境はLinux上にHadoop/Elasticsearchを使い、Python/Javaにてデータ分析・抽出を行っていただきます。 公開_備考：※月額報酬額は”最大稼働可能日数”で換算した際の金額です。

【Java】データ分析基盤開発案件

データ集計基盤の構築・運用をご担当いただきます。 データサイエンティストとコミュニケーションを取りながら開発を進めていきます。求められるスキルには、Javaを使用した開発経験や分散処理システム（Hadoop）の知見があります。

Java／車載ビッグデータ可視化システム追加開発案件・求人

「走行データ」という巨大な資産を価値に変える。エンジニアとしての知的好奇心を刺激するプロジェクトです。本プロジェクトでは、車両から収集される膨大なデータを可視化するシステムの機能追加・維持保守を担当します。 ・監視レポート作成および分析報告 ・設計、製造、単体〜システムテスト、リリース作業までの一貫したデリバリー 市場価値・キャリアメリット： 「Connected Car × Cloud」の専門性を磨き、市場価値の高いエンジニアへ。 現在、自動車業界で最も注目される車載データの活用に携わることで、IoT分野の深い知見が得られます。また、AWSを用いたビッグデータ処理の経験は、今後のクラウドネイティブなキャリアにおいて強力...

【リモート併用/データ分析】生命保険向けBSA・システム分析業務

大手生命保険会社向けの業務分析およびシステム分析業務。要件定義からデータモデリング、データフロー設計、開発チームとの連携による仕様策定や成果物のレビューまで幅広く担当いただきます。日英バイリンガルスキルがある方を歓迎し、Hadoop/Spark環境での分析業務も含まれます。 【技術スタック】 ・データベース：Oracle、MS SQL Server、MongoDB ・ビッグデータ基盤：Hadoop、HBase、Spark ・OS：Linux

【SE】会計処理システムリプレイスの求人・案件

社内会計処理システムのリプレイス案件にご参画していただきます。\n既存システムのアーキテクチャを見直し、バッチ処理にApache\nFlinkやHadoopを適用したPoCを実施します。\n中核となるバッチ処理の一部機能をFlink、Hadoopにて実装・移行し、動作担保・\n性能検証を行い、リプレイスの規模感や要件整理の基盤とします。\n\n主に下記作業をご担当いただきます。\n・既存機能の把握\n・一部機能の実装（Flinkの適用）\n・実装を動作させるためのインフラ構築\n・動作検証、性能検証\n\n最寄り駅：虎ノ門駅・竹芝駅・天王洲アイル駅

【フルリモート/CI/CD】ヘルステック企業での患者向けコンテンツ配信基盤エンジニア

既存プロダクトと連携し、患者向けコンテンツ配信基盤の役割を担うPEHubと呼ばれるプロダクトの開発を担当頂きます。 ・プロダクトマネージャとの仕様策定 ・各種AWSサービスをフル活用したアーキテクチャ設計 ・社内プロダクトや社内サービスとのシステム連携 ・他プロダクトチームとシステム仕様・アーキテクチャのすり合わせ ・設計したシステムの実装と運用 ・各種インフラ運用の自動化、CI/CDの強化

Python／大手デジタルマーケ企業の営業支援プラットフォームにおけるバックエンド開発案件・求人

■仕事内容 開発プロジェクトチームに入り、弊社エンジニアと一緒に開発に従事していただきます。 【具体的な業務イメージ】 ■要件定義・設計 ・ステークホルダーとの開発要件のすり合わせ、設計、実装方針の策定 ・レビュー、コードレビューなど品質管理 ・インフラ設計、パフォーマンス最適化 ■新規プロダクト開発 / 既存サービスの拡張開発 ・機能開発における実装とテスト ・保守・運用を含む開発作業全般 ・デリバリー対応、障害対応 下記マインドを持っている方を募集いたします。 ・自立自走、課題や問題のキャッチアップを自ら行える ・関係者を巻き込んで率先して動ける ・コーディング / UTが自立して出来る ・未...

【フルリモート/Python/AWS】製薬業界向けサービスを展開する事業会社でのアプリケーションエンジニア募集

薬局経営を支援する薬局ダッシュボードの画面・機能開発する責務を担っていただきます。 ■開発環境 ・React、Next ・TypeScript ・AWS(Cognito、Amplify、API Gateway、Lambda、RDS、S3) ・Python ・その他(GitHub、Datadog、Google Analytics、GTM、KARTE)

Ruby／自社DMPプロダクトバックエンド開発案件・求人

自社で提供するDMP（データマーケティングプラットフォーム）の開発業務をご担当いただきます。 Ruby on Railsによるアプリケーションと分析、媒体連携用データを保持する Google Cloudのデータ基盤を開発、運用します。 ▼工程 基本設計から実装、保守運用まで実施いただきます。 ビジネス要件はビジネス担当部門が行います。 設計に必要な要件の明確化などのコミュニケーションは適宜行っていただきます。 ▼主な業務内容 ・管理画面の開発、保守、運用 ・分析データ基盤の開発、保守、運用

≪データエンジニア≫生成AI×モダンデータスタックを用いた全社横断のデータ基盤構築

★【~100万円/フリーランス】≪データエンジニア≫生成AI×モダンデータスタックを用いた全社横断のデータ基盤構築※30～50代活躍中!!【業務内容】 データエンジニアとして、全社横断的なデータ基盤構築・開発をリードしていただきます。 業務内容は多岐に渡り、自社AIプロダクトにおけるデータ基盤の設計構築や、DX事業の顧客に対するデータ活用プロジェクト支援などデータ活用に関する業務を横串でお任せします。 データの収集元はテキストデータを中心に多岐に渡る想定であり、収集したデータはLLM/RAG技術を活用し、ChatGPTのようなボットの活用を行い、問い合わせの自動対応を実現することを行います。 初期的にはMicrosoft Az...

【Databricks】データ解析システム開発支援(基本リモート)

Databricksによるデータ解析システムの開発案件です。 データエンジニアを1名募集致します。設計～テストまでご担当頂きます。 ■募集背景 人員不足のため。

【Python】データ解析システム構築支援(基本リモート)

Databricksによるデータ解析システムの構築支援 ■募集背景 増員のため

【データアナリスト】大手SIer データ基盤構築/活用支援（Snowflake）の求人・案件

国内外の様々なお客様にSnowflakeの導入とそれに伴うデータ活用の支援 -Snowflakeの導入コンサルティング -Snowflakeを中心としたデータ基盤の開発支援、データ活用支援 -Snowflakeや周辺技術領域（モダンデータスタック）の情報収集、技術検証 -データ基盤やデータエンジニアリングに関する技術情報発信

【Hadoop、GCP】運用設計支援/人材サービスのエンジニア求人・案件 プロジェクト管理 / PM / コンサル・プロジェクト管理 / PMO / IT

・人材サービス業における運用設計支援 ・移行後運用設計 ・新環境における業務運用設計 (例)Hadoopからのデータ抽出、Tableau＆データマートの追加・変更開発業務等 (例)事業要望で新規データの取込をする場合の、取込判断/取込方法等のルール策定

【RHEL/Windows】スマートデータレイク基盤の導入 | のエンジニア求人・案件 システムエンジニア・プログラマー / Windows系エンジニア / インフラ・ネットワークエンジニア / サーバエンジニア

・クライアントプロジェクト「情報系システム統廃合フェーズ２」における分析基盤の更改およびスマートデータレイク基盤の導入がPJの目的 ・①分析基盤(SAS): SASサーバとなるWindowsサーバのNW・OS等の設計、設定、認証、監視、運用設計、HULFT連携の移行作業などを担当 ・いずれのサーバもストレージ・NASとしてDELL PowerScale(旧EMC Isilon)を利用 ・基本的なラックへの設置・結線作業、OSプリインストール等はサーバベンダーにて実施 ・②データレイク(Cloudera): Cloudera CDP(Hadoop)を動作させるRHELのNW・OS設計、設定、認証、監視、Clouder...

【Hadoop、GCP】運用設計支援/人材サービス

・人材サービス業における運用設計支援 ・移行後運用設計 ・新環境における業務運用設計 (例)Hadoopからのデータ抽出、Tableau＆データマートの追加・変更開発業務等 (例)事業要望で新規データの取込をする場合の、取込判断/取込方法等のルール策定

通信事業会社データー分析/解析支援

・提案技術支援業務（客先同行訪問、コンサルティング） ・データ分析業務（顧客保有データの解析/分析）

【ApachFlink/Hadoop】会計処理システム更改のアーキテクチャ見直しPJのエンジニア求人・案件 システムエンジニア・プログラマー / インフラ・ネットワークエンジニア

・大手通信業務向け会計処理システム更改に伴うアーキテクチャ見直し支援 ・顧客社内システムのリプレイスに合わせて、アーキテクチャの見直しから実施 ・バッチ処理で、ApachFlinkやHadoopDBを使用することを検討している ・リプレイスに先立ち、コアとなるバッチ処理の一部機能をApache Flink、Hadoopを適用して一部移行 ・その後、既存システム全体のリプレースの規模感や、要件整理のためのPoCを行う

【Phyton/embulk/digdag/Linux】美容総合プラットフォームなどの事業を展開する企業でデータ分析基盤の運用/保守支援

■募集背景： 今後のデータ利用拡大のための新しいデータ分析基盤の構築を進めています。 今回は、素早く安心なデータ利用のためにデータマネジメントを意識したデータ基盤を構築・運用できる体制を整えるため、チーム強化の増員を行っています。 ■業務内容： オンプレミス上のデータ分析基盤の運用保守 <業務内容詳細> ・同期DBの追加作業(yamlファイルの更新、リリース作業) ・DWHのクエリ改修 ・停止したデータパイプラインの再実行（embulk, digdag）

【Python／SQL】【データエンジニア】データ基盤の構築・改善の求人・案件

データエンジニアとして、データサイエンティストやエンジニアと協力しながら、\nデータ基盤を構築・改善し課題解決を行っていただきます。\nデータ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを\n幅広くご支援いただきます。

Python／某携帯キャリアのデータ関連受託開発案件・求人

大手キャリアが提供するスーパー販促プログラムにおいて、加盟店（飲食店、小売等）が利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）のデータ関連の開発および、顧客企業との仕様調整、実現性検討を行っていただきます。

【Python/機械学習】データエンジニア募集

■概要 データエンジニアとして、データサイエンティストやエンジニアと協力しながら、 データ基盤を構築・改善し課題解決を行っていただきます。 データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを幅広くご支援いただきます。

【Hadoop】購買データの分析基盤構築案件

購買データの分析基盤にAzureのHDInsightというHadoopサービスを導入する案件です。 HDInsightの可用性や性能などを調査・検証し（導入が決定したら）設計、構築を行います。

【Linux・Hadoop】分析基盤向けPoC支援案件

某大手Sier内で行っているHadoop、Apache Sparkなど分析基盤のPoCおよび環境構築を担当頂く想定です。 Linux、Hadoop、Apache Sparkなどの技術を扱う環境です。

【BigQueryなど】データ分析基盤の開発・構築の求人・案件

データ分析基盤の開発・構築を行なっていただきます。

【 hadoop,kafka,storm,spark】セキュリティプラットフォーム基盤構築

通信会社向けのセキュリティプラットフォーム基盤をOSSを利用して 新規構築する案件となります。各種製品ログをデータレイクに蓄積し、 リアルタイムなアラート検知、およびインタラクティブな集計／分析を 可能とするプラットフォームの構築案件です。

【Python,Scala,Hadoop】大手金融事業社でのビックデータ案件

某大手金融事業社内でのビックデータ案件になります。 現在稼働しているHadoop環境の運用、保守に加え、 7月から新規機能の開発などがスタートするため、 人員の増員を計画しております。 データ分析は別チームが存在しますので、あくまで分析を行うための 環境構築を行って頂くポジションとなりますが、現場の状況、 また適正次第では分析業務にも関わっていただく可能性がございます。 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発 ・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守

【Python,Hadoop,Spark】大手外資系医療情報・テクロノジーサービス企業データ分析支援

業務内容：世界中から集まる製薬データの分析 メインフレームシステムのダウンサイジング

ETLツール導入支援/保険業界のエンジニア求人・案件 IT / インフラ

AWSのサーバ上で稼働するデータ分析基盤のバッチ基盤の開発支援。 Hadoop(Amazon EMR)、Amazon Redshift、Informatica社の別製品(Bigdatamanagement)の導入を検討中であり、 これらのサービスとミドルウェアの設計と構築の実施を支援。 ※バッチはPython3.Xで開発。ETLとしてInformatica社のPowerCenterを利用。

【Python/SQL】コマーステクノロジ領域のデータ関連支援(リモート併用可)

・課題の特定からアドホック分析、モデル構築、モデルデプロイメントまでの一連のデータサイエンスワークフローの遂行 ・当該企業が保有する多様なデータまたは外部データを活用した、顧客行動の分析インサイトの導出 ・ビジネス課題を解決するためのSQLやSparkなどを活用した大規模データの処理、適切な予測モデルやアルゴリズムの選択・実装、革新的なソリューションの提案 ・汎用的なデータサイエンスプロダクトの開発 ・データサイエンティスト、コンサルタント、プロジェクトマネージャー、データ戦略家との協働 ・スキルやナレッジを共有・学習する文化の創出 ・Spark、Hive、Kafka、Spark-Streaming、Hadoop、Google...