Hadoopの業務委託案件・フリーランス求人一覧｜ページ2

【Python/AWS/西新宿/一部リモート】大手デジタルマーケ企業・営業支援プラットフォームのバックエンド開発

大手デジタルマーケティング企業が提供する営業支援プラットフォームのバックエンド開発プロジェクトに参画いただきます。 開発チームの一員として、要件定義・設計から実装・テスト・運用保守まで幅広く担当していただきます。 ステークホルダーとの要件調整、設計・実装方針の策定、コードレビューや品質管理、インフラ設計やパフォーマンスチューニングなど、開発全般に主体的に関わっていただくポジションです。 新規プロダクトの立ち上げや既存サービスの拡張開発、デリバリー対応、障害対応も含みます。 現場はMac中心で、Python3を主軸とした開発環境となっています。週3日出社＋週2日リモートのハイブリッド勤務です。 募集背景 事業拡大および...

【Java】【SE】某キャリア向け料金システムの日本移管及びエンハンス対応の求人・案件

某キャリア向け料金システムにおける\nオフショア体制（50名程度）の日本への移管業務に携わっていただきます。\n現体制メンバーとともにエンハンス案件を実施予定です。\n\n■以下参考情報：\nMQ：Apache Kafka、APサーバ:JBoss EAP、DB:RocksDB\n高速分散処理（1日に10億単位のレコード、\n60台*40Thread*7InstanceRocksDB）：\nApache Spring、Apache Hadoop

【Python/リモートあり】GenerativeAI向けデータ基盤構築・運用支援(データエンジニア)

【20代、30代が活躍中！】 ※週5日〜OKの案件です！ ※実務経験1年以上お持ちの方が対象の案件です！ 【作業場所】新宿(週2リモート) 【時間】フレックスタイム制(コアタイム応相談) 【面談回数】1〜2回(オンライン) 【必須スキル】 ・Python/SQLによるデータ処理経験 ・RDB/NoSQL/DWHにおけるDB設計・運用経験 ・クラウド(GCP/AWSなど)の利用経験 ・Docker/Kubernetesを用いたインフラ構築経験 ・API開発またはデータ連携設計・実装経験 ・ビジネスレベルの日本語での円滑なコミュニケーション 【尚可スキル】 ・LLM/GenerativeAIの知見または活用経験 ・AI学習用...

Ruby／自社DMPプロダクトバックエンド開発案件・求人

自社で提供するDMP（データマーケティングプラットフォーム）の開発業務をご担当いただきます。 Ruby on Railsによるアプリケーションと分析、媒体連携用データを保持する Google Cloudのデータ基盤を開発、運用します。 ▼工程 基本設計から実装、保守運用まで実施いただきます。 ビジネス要件はビジネス担当部門が行います。 設計に必要な要件の明確化などのコミュニケーションは適宜行っていただきます。 ▼主な業務内容 ・管理画面の開発、保守、運用 ・分析データ基盤の開発、保守、運用

〔Java〕データベース基盤リプレイス業務

☆【～66万円/フリーランス/Java】データベース基盤リプレイス業務/~60万@フルリモート※30~50代活躍中!!【業務内容】 Hadoop（OSS）から商用版 HadoopのCloudera社 Hadoop（CDP）に移行しているが、 Cloudera社 Hadoopは一部独自開発している部分があるため、 SQLエンジンのTrinoからデータを引っ張れないことが起きている。 Cloudera社 Hadoopへの移行に伴い、HadoopからTrinoや その他システムからデータ連携できるための Javaの修正や管理を行う業務 【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)...

〔Java〕マイクロサービス開発

★【～75万円/フリーランス/Java】マイクロサービス開発/~75万@御成門※30~50代活躍中!!【業務内容】 ECサイト運営会社でのマイクロサービスで構築する個別システムの開発 環境及び詳細： ・Java/SpringBoot/Vue.js/Flutter ・PostgreSQL/Hadoop ・Javaマイクロサービス/クラウド ・販売管理/コンテンツ管理 ・マイクロサービスのJavaアプリ基盤は構築済み ・オフショア対応 【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)が可能な方 ・100％（平日の週5日）稼働が可能な方。 ※副業希望の方はご案内ができかねます。 ・日...

≪Pythonエンジニア≫大手検索ポータルサービス業務

★【~55万円/フリーランス】≪Pythonエンジニア≫大手検索ポータルサービス業務※30～50代活躍中!!【業務内容】 某大手ポータルサイトが運営する、コンシューマ向けWEBサービス業務です。 データの整備やジョブの作成などがメインの業務となりますので、 コーディングをバリバリやるようなシステム開発ではないことにご留意ください。 期待されているのはデータのプロフェッショナルという立ち位置になります。 機械学習やサイエンス領域の知見をお持ちの方をお願い致します。【求める人物像】 【必須条件】 ・過去1年以内に当社への応募履歴のない方 ・業務委託(準委任契約)が可能な方 ・100％（平日の週5日）稼働が可能な方。 ※副業希望の方...

≪データエンジニア≫生成AI×モダンデータスタックを用いた全社横断のデータ基盤構築

★【~100万円/フリーランス】≪データエンジニア≫生成AI×モダンデータスタックを用いた全社横断のデータ基盤構築※30～50代活躍中!!【業務内容】 データエンジニアとして、全社横断的なデータ基盤構築・開発をリードしていただきます。 業務内容は多岐に渡り、自社AIプロダクトにおけるデータ基盤の設計構築や、DX事業の顧客に対するデータ活用プロジェクト支援などデータ活用に関する業務を横串でお任せします。 データの収集元はテキストデータを中心に多岐に渡る想定であり、収集したデータはLLM/RAG技術を活用し、ChatGPTのようなボットの活用を行い、問い合わせの自動対応を実現することを行います。 初期的にはMicrosoft Az...

【SQL】ビッグデータ分析に伴うデータ抽出案件

大量のデータを分析するため、特定の条件を満たすデータを抽出する業務を担当いただきます。 ビッグデータプラットフォーム上のデータを対象とし、適切なクエリを作成し、抽出されたデータを報告書やダッシュボード等に反映させます。

【Databricks】データ解析システム開発支援(基本リモート)

Databricksによるデータ解析システムの開発案件です。 データエンジニアを1名募集致します。設計～テストまでご担当頂きます。 ■募集背景 人員不足のため。

【Python】データ解析システム構築支援(基本リモート)

Databricksによるデータ解析システムの構築支援 ■募集背景 増員のため

【データアナリスト】大手SIer データ基盤構築/活用支援（Snowflake）の求人・案件

国内外の様々なお客様にSnowflakeの導入とそれに伴うデータ活用の支援 -Snowflakeの導入コンサルティング -Snowflakeを中心としたデータ基盤の開発支援、データ活用支援 -Snowflakeや周辺技術領域（モダンデータスタック）の情報収集、技術検証 -データ基盤やデータエンジニアリングに関する技術情報発信

【Hadoop、GCP】運用設計支援/人材サービスのエンジニア求人・案件 プロジェクト管理 / PM / コンサル・プロジェクト管理 / PMO / IT

・人材サービス業における運用設計支援 ・移行後運用設計 ・新環境における業務運用設計 (例)Hadoopからのデータ抽出、Tableau＆データマートの追加・変更開発業務等 (例)事業要望で新規データの取込をする場合の、取込判断/取込方法等のルール策定

内製広告配信システムの配信データ分析のエンジニア求人・案件 IT

・数値に基づいた意思決定をするためのデータ分析 ・新規配信手法のプロトタイプ作成・提案 ・データ可視化システムを用いたレポーティング・プレゼンテーション など

ビッグデータプラットフォームのデータマネジメント/大手通信企業のエンジニア求人・案件 IT / AI

・データ収集/連携、AI解析を実施 ・各技術チームを横櫛で統制するチーム(2～3名)においてディレクションを行う

【RHEL/Windows】スマートデータレイク基盤の導入 | のエンジニア求人・案件 システムエンジニア・プログラマー / Windows系エンジニア / インフラ・ネットワークエンジニア / サーバエンジニア

・クライアントプロジェクト「情報系システム統廃合フェーズ２」における分析基盤の更改およびスマートデータレイク基盤の導入がPJの目的 ・①分析基盤(SAS): SASサーバとなるWindowsサーバのNW・OS等の設計、設定、認証、監視、運用設計、HULFT連携の移行作業などを担当 ・いずれのサーバもストレージ・NASとしてDELL PowerScale(旧EMC Isilon)を利用 ・基本的なラックへの設置・結線作業、OSプリインストール等はサーバベンダーにて実施 ・②データレイク(Cloudera): Cloudera CDP(Hadoop)を動作させるRHELのNW・OS設計、設定、認証、監視、Clouder...

【Hadoop、GCP】運用設計支援/人材サービス

・人材サービス業における運用設計支援 ・移行後運用設計 ・新環境における業務運用設計 (例)Hadoopからのデータ抽出、Tableau＆データマートの追加・変更開発業務等 (例)事業要望で新規データの取込をする場合の、取込判断/取込方法等のルール策定

通信事業会社データー分析/解析支援

・提案技術支援業務（客先同行訪問、コンサルティング） ・データ分析業務（顧客保有データの解析/分析）

【ApachFlink/Hadoop】会計処理システム更改のアーキテクチャ見直しPJのエンジニア求人・案件 システムエンジニア・プログラマー / インフラ・ネットワークエンジニア

・大手通信業務向け会計処理システム更改に伴うアーキテクチャ見直し支援 ・顧客社内システムのリプレイスに合わせて、アーキテクチャの見直しから実施 ・バッチ処理で、ApachFlinkやHadoopDBを使用することを検討している ・リプレイスに先立ち、コアとなるバッチ処理の一部機能をApache Flink、Hadoopを適用して一部移行 ・その後、既存システム全体のリプレースの規模感や、要件整理のためのPoCを行う

【Phyton/embulk/digdag/Linux】美容総合プラットフォームなどの事業を展開する企業でデータ分析基盤の運用/保守支援

■募集背景： 今後のデータ利用拡大のための新しいデータ分析基盤の構築を進めています。 今回は、素早く安心なデータ利用のためにデータマネジメントを意識したデータ基盤を構築・運用できる体制を整えるため、チーム強化の増員を行っています。 ■業務内容： オンプレミス上のデータ分析基盤の運用保守 <業務内容詳細> ・同期DBの追加作業(yamlファイルの更新、リリース作業) ・DWHのクエリ改修 ・停止したデータパイプラインの再実行（embulk, digdag）

【Python／SQL】【データエンジニア】データ基盤の構築・改善の求人・案件

データエンジニアとして、データサイエンティストやエンジニアと協力しながら、\nデータ基盤を構築・改善し課題解決を行っていただきます。\nデータ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを\n幅広くご支援いただきます。

Python／某携帯キャリアのデータ関連受託開発案件・求人

大手キャリアが提供するスーパー販促プログラムにおいて、加盟店（飲食店、小売等）が利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）のデータ関連の開発および、顧客企業との仕様調整、実現性検討を行っていただきます。

【Hadoop・Java】解析システムの運用保守案件

解析システムの運用保守を担当して頂きます。 主な担当業務は下記の通りです。 ・Webアクセスログの解析システムの運用保守 ・テレビとネットで連動した投票システムの保守 ・Webビーコンを利用したアクセスランキングの集計システムの保守

【Python/機械学習】データエンジニア募集

■概要 データエンジニアとして、データサイエンティストやエンジニアと協力しながら、 データ基盤を構築・改善し課題解決を行っていただきます。 データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを幅広くご支援いただきます。

【4月～/Python/リモート】エンド社内のデータ活用・分析運用開発支援

エンド社内のデータ活用・分析運用開発支援 システム間の連携部分をPythonで開発や社内データ分析対応などをご担当いただきます。 →・上記付随した業務調査（SQLクエリの調査・修正等） ・データの整備、ジョブ作成 ※エラー発生時はJavaのソース解読が発生する可能性有

【基本リモート】データ基盤構築支援

データエンジニア。 データサイエンティストやエンジニアと協力しながら、データ基盤を構築・改善し課題解決を行う。 データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用、他 期　間　：6月1日～

【Hadoop】購買データの分析基盤構築案件

購買データの分析基盤にAzureのHDInsightというHadoopサービスを導入する案件です。 HDInsightの可用性や性能などを調査・検証し（導入が決定したら）設計、構築を行います。

【Linux・Hadoop】分析基盤向けPoC支援案件

某大手Sier内で行っているHadoop、Apache Sparkなど分析基盤のPoCおよび環境構築を担当頂く想定です。 Linux、Hadoop、Apache Sparkなどの技術を扱う環境です。

【Hadoop】分析基盤の設計、構築支援案件

Hadoopを利用した分析基盤の設計構築を担当頂きます。 Apache Spark、Zookeeper、Ambari、YARN、Hive等の構築を行うので、最新のテクノロジーにも触れられる環境です。

【Hadoop】システムの運用維持案件

解析システムの運用維持を担当して頂きます。 主にWebアクセスログの解析システムや投票システムの運用維持など

Scala/　サーバーサイドエンジニア案件

広告技術のDSP開発をお願いします。 本事業部では、各社とのシステム連携により広告を表示しています。 1つのリクエストに対して100ミリ秒で応答を返すという制限(低レイテンシ)と 秒間1万を超えるリクエストを処理(ハイスループット)するシステムを作ります。 メイン言語はScalaを利用し、インフラ環境はGoogleCloudPlatformを利用しています。 エンジニア５人程度のチームでアジャイル開発のプロセスをベースにカンバンなどで作業進捗を確認しながらすすめ、 ドキュメントはコミュニケーションと保守に必要な最低限の情報で作成し、システムの実装、開発、運用をしています。

（Python/Hadoop）ビックデータの基盤構築案件

某大手事業会社内でのビックデータ案件になります。 現在稼働しているHadoop環境の運用、保守に加え、 新規機能の開発などがスタートしたため人員の増員を計画しております。 データ分析は別チームが存在しますので、あくまで分析を行うための 環境構築を行って頂くポジションとなりますが、現場の状況、 また適正次第では分析業務にも関わっていただく可能性がございます。 ※具体的な業務内容※ ・Sparkを利用して、Hadoopクラスタ上のデータを分析するツールの開発 ・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守 ・Hadoopクラスタの運用

【Hadoop】ビッグデータ分析基盤構築案件

ビッグデータ分析基盤の構築 ■環　　境： Oracle Bigdata Appliance, Hadoop Oracle Big Data

【Python／SQL】【SE】基盤構築・改善の求人・案件

基盤構築・改善業務にご参画していただきます。\nデータ基盤の構築およびデータ処理/管理/収集、Webクローリングやスクレイピングなど\nデータ活用周りのご支援を行っていただきます。

【Python/SQLなど】データエンジニアの求人・案件

データエンジニアとして、データサイエンティストやエンジニアと協力しながら、データ基盤を構築・改善し課題解決を行っていただきます。 データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを幅広くご支援いただきます。

柔軟な分析ワークロードを実現するデータパイプライン作りたいエンジニア募集！

BigQuery, RedShift, Hadoopなどの並列分散処理基盤(MPP)の活用経験 Hadoop、Presto、MySQL、PostgreSQL、その他のオープンソースの分散データベース/エンジンに関する知識 / 分散システムのプロダクション運用経験 / Ruby on Railsを用いたwebサービス開発の経験 / スケーラビリティ、パフォーマンス、スケジューリングを踏まえたスケーラブルな分散マルチノード環境の経験 / プロセス、メモリ、ストレージ、ネットワーク管理などのシステムアーキテクチャの深い知識

【BigQueryなど】データ分析基盤の開発・構築の求人・案件

データ分析基盤の開発・構築を行なっていただきます。

【データ分析補佐】GPSデータを用いた予測支援

1.GPSデータを用いた予測支援 2.SaaS型プロダクトの開発支援 上記いずれかにおいてデータエンジニア業務に従事いただきます。

【 hadoop,kafka,storm,spark】セキュリティプラットフォーム基盤構築

通信会社向けのセキュリティプラットフォーム基盤をOSSを利用して 新規構築する案件となります。各種製品ログをデータレイクに蓄積し、 リアルタイムなアラート検知、およびインタラクティブな集計／分析を 可能とするプラットフォームの構築案件です。

【Python,Scala,Hadoop】大手金融事業社でのビックデータ案件

某大手金融事業社内でのビックデータ案件になります。 現在稼働しているHadoop環境の運用、保守に加え、 7月から新規機能の開発などがスタートするため、 人員の増員を計画しております。 データ分析は別チームが存在しますので、あくまで分析を行うための 環境構築を行って頂くポジションとなりますが、現場の状況、 また適正次第では分析業務にも関わっていただく可能性がございます。 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発 ・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守