Hadoop × 50万円以上の業務委託案件・フリーランス求人一覧｜ページ2

≪データエンジニア≫生成AI×モダンデータスタックを用いた全社横断のデータ基盤構築

★【~100万円/フリーランス】≪データエンジニア≫生成AI×モダンデータスタックを用いた全社横断のデータ基盤構築※30～50代活躍中!!【業務内容】 データエンジニアとして、全社横断的なデータ基盤構築・開発をリードしていただきます。 業務内容は多岐に渡り、自社AIプロダクトにおけるデータ基盤の設計構築や、DX事業の顧客に対するデータ活用プロジェクト支援などデータ活用に関する業務を横串でお任せします。 データの収集元はテキストデータを中心に多岐に渡る想定であり、収集したデータはLLM/RAG技術を活用し、ChatGPTのようなボットの活用を行い、問い合わせの自動対応を実現することを行います。 初期的にはMicrosoft Az...

【SQL】ビッグデータ分析に伴うデータ抽出案件

大量のデータを分析するため、特定の条件を満たすデータを抽出する業務を担当いただきます。 ビッグデータプラットフォーム上のデータを対象とし、適切なクエリを作成し、抽出されたデータを報告書やダッシュボード等に反映させます。

【Databricks】データ解析システム開発支援(基本リモート)

Databricksによるデータ解析システムの開発案件です。 データエンジニアを1名募集致します。設計～テストまでご担当頂きます。 ■募集背景 人員不足のため。

【Python】データ解析システム構築支援(基本リモート)

Databricksによるデータ解析システムの構築支援 ■募集背景 増員のため

【データアナリスト】大手SIer データ基盤構築/活用支援（Snowflake）の求人・案件

国内外の様々なお客様にSnowflakeの導入とそれに伴うデータ活用の支援 -Snowflakeの導入コンサルティング -Snowflakeを中心としたデータ基盤の開発支援、データ活用支援 -Snowflakeや周辺技術領域（モダンデータスタック）の情報収集、技術検証 -データ基盤やデータエンジニアリングに関する技術情報発信

【Hadoop、GCP】運用設計支援/人材サービスのエンジニア求人・案件 プロジェクト管理 / PM / コンサル・プロジェクト管理 / PMO / IT

・人材サービス業における運用設計支援 ・移行後運用設計 ・新環境における業務運用設計 (例)Hadoopからのデータ抽出、Tableau＆データマートの追加・変更開発業務等 (例)事業要望で新規データの取込をする場合の、取込判断/取込方法等のルール策定

内製広告配信システムの配信データ分析のエンジニア求人・案件 IT

・数値に基づいた意思決定をするためのデータ分析 ・新規配信手法のプロトタイプ作成・提案 ・データ可視化システムを用いたレポーティング・プレゼンテーション など

ビッグデータプラットフォームのデータマネジメント/大手通信企業のエンジニア求人・案件 IT / AI

・データ収集/連携、AI解析を実施 ・各技術チームを横櫛で統制するチーム(2～3名)においてディレクションを行う

【RHEL/Windows】スマートデータレイク基盤の導入 | のエンジニア求人・案件 システムエンジニア・プログラマー / Windows系エンジニア / インフラ・ネットワークエンジニア / サーバエンジニア

・クライアントプロジェクト「情報系システム統廃合フェーズ２」における分析基盤の更改およびスマートデータレイク基盤の導入がPJの目的 ・①分析基盤(SAS): SASサーバとなるWindowsサーバのNW・OS等の設計、設定、認証、監視、運用設計、HULFT連携の移行作業などを担当 ・いずれのサーバもストレージ・NASとしてDELL PowerScale(旧EMC Isilon)を利用 ・基本的なラックへの設置・結線作業、OSプリインストール等はサーバベンダーにて実施 ・②データレイク(Cloudera): Cloudera CDP(Hadoop)を動作させるRHELのNW・OS設計、設定、認証、監視、Clouder...

【Hadoop、GCP】運用設計支援/人材サービス

・人材サービス業における運用設計支援 ・移行後運用設計 ・新環境における業務運用設計 (例)Hadoopからのデータ抽出、Tableau＆データマートの追加・変更開発業務等 (例)事業要望で新規データの取込をする場合の、取込判断/取込方法等のルール策定

通信事業会社データー分析/解析支援

・提案技術支援業務（客先同行訪問、コンサルティング） ・データ分析業務（顧客保有データの解析/分析）

【ApachFlink/Hadoop】会計処理システム更改のアーキテクチャ見直しPJのエンジニア求人・案件 システムエンジニア・プログラマー / インフラ・ネットワークエンジニア

・大手通信業務向け会計処理システム更改に伴うアーキテクチャ見直し支援 ・顧客社内システムのリプレイスに合わせて、アーキテクチャの見直しから実施 ・バッチ処理で、ApachFlinkやHadoopDBを使用することを検討している ・リプレイスに先立ち、コアとなるバッチ処理の一部機能をApache Flink、Hadoopを適用して一部移行 ・その後、既存システム全体のリプレースの規模感や、要件整理のためのPoCを行う

【Phyton/embulk/digdag/Linux】美容総合プラットフォームなどの事業を展開する企業でデータ分析基盤の運用/保守支援

■募集背景： 今後のデータ利用拡大のための新しいデータ分析基盤の構築を進めています。 今回は、素早く安心なデータ利用のためにデータマネジメントを意識したデータ基盤を構築・運用できる体制を整えるため、チーム強化の増員を行っています。 ■業務内容： オンプレミス上のデータ分析基盤の運用保守 <業務内容詳細> ・同期DBの追加作業(yamlファイルの更新、リリース作業) ・DWHのクエリ改修 ・停止したデータパイプラインの再実行（embulk, digdag）

【Python／SQL】【データエンジニア】データ基盤の構築・改善の求人・案件

データエンジニアとして、データサイエンティストやエンジニアと協力しながら、\nデータ基盤を構築・改善し課題解決を行っていただきます。\nデータ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを\n幅広くご支援いただきます。

Python／某携帯キャリアのデータ関連受託開発案件・求人

大手キャリアが提供するスーパー販促プログラムにおいて、加盟店（飲食店、小売等）が利用するシステム（クーポン入稿、ターゲティング設定、配信効果分析など）のデータ関連の開発および、顧客企業との仕様調整、実現性検討を行っていただきます。

【Python/機械学習】データエンジニア募集

■概要 データエンジニアとして、データサイエンティストやエンジニアと協力しながら、 データ基盤を構築・改善し課題解決を行っていただきます。 データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを幅広くご支援いただきます。

【4月～/Python/リモート】エンド社内のデータ活用・分析運用開発支援

エンド社内のデータ活用・分析運用開発支援 システム間の連携部分をPythonで開発や社内データ分析対応などをご担当いただきます。 →・上記付随した業務調査（SQLクエリの調査・修正等） ・データの整備、ジョブ作成 ※エラー発生時はJavaのソース解読が発生する可能性有

【基本リモート】データ基盤構築支援

データエンジニア。 データサイエンティストやエンジニアと協力しながら、データ基盤を構築・改善し課題解決を行う。 データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用、他 期　間　：6月1日～

【Hadoop】購買データの分析基盤構築案件

購買データの分析基盤にAzureのHDInsightというHadoopサービスを導入する案件です。 HDInsightの可用性や性能などを調査・検証し（導入が決定したら）設計、構築を行います。

【Linux・Hadoop】分析基盤向けPoC支援案件

某大手Sier内で行っているHadoop、Apache Sparkなど分析基盤のPoCおよび環境構築を担当頂く想定です。 Linux、Hadoop、Apache Sparkなどの技術を扱う環境です。

【Python／SQL】【SE】基盤構築・改善の求人・案件

基盤構築・改善業務にご参画していただきます。\nデータ基盤の構築およびデータ処理/管理/収集、Webクローリングやスクレイピングなど\nデータ活用周りのご支援を行っていただきます。

【Python/SQLなど】データエンジニアの求人・案件

データエンジニアとして、データサイエンティストやエンジニアと協力しながら、データ基盤を構築・改善し課題解決を行っていただきます。 データ処理/管理/収集、Webクローリングやスクレイピングなどデータ活用周りを幅広くご支援いただきます。

柔軟な分析ワークロードを実現するデータパイプライン作りたいエンジニア募集！

BigQuery, RedShift, Hadoopなどの並列分散処理基盤(MPP)の活用経験 Hadoop、Presto、MySQL、PostgreSQL、その他のオープンソースの分散データベース/エンジンに関する知識 / 分散システムのプロダクション運用経験 / Ruby on Railsを用いたwebサービス開発の経験 / スケーラビリティ、パフォーマンス、スケジューリングを踏まえたスケーラブルな分散マルチノード環境の経験 / プロセス、メモリ、ストレージ、ネットワーク管理などのシステムアーキテクチャの深い知識

【BigQueryなど】データ分析基盤の開発・構築の求人・案件

データ分析基盤の開発・構築を行なっていただきます。

【データ分析補佐】GPSデータを用いた予測支援

1.GPSデータを用いた予測支援 2.SaaS型プロダクトの開発支援 上記いずれかにおいてデータエンジニア業務に従事いただきます。

【 hadoop,kafka,storm,spark】セキュリティプラットフォーム基盤構築

通信会社向けのセキュリティプラットフォーム基盤をOSSを利用して 新規構築する案件となります。各種製品ログをデータレイクに蓄積し、 リアルタイムなアラート検知、およびインタラクティブな集計／分析を 可能とするプラットフォームの構築案件です。

【Python,Scala,Hadoop】大手金融事業社でのビックデータ案件

某大手金融事業社内でのビックデータ案件になります。 現在稼働しているHadoop環境の運用、保守に加え、 7月から新規機能の開発などがスタートするため、 人員の増員を計画しております。 データ分析は別チームが存在しますので、あくまで分析を行うための 環境構築を行って頂くポジションとなりますが、現場の状況、 また適正次第では分析業務にも関わっていただく可能性がございます。 ・PySparkでHadoopクラスタ上のデータを分析するアプリの開発 ・Hadoopクラスタにデータを取込（いわゆるETL）アプリ・スクリプトの保守

【Python,Hadoop,Spark】大手外資系医療情報・テクロノジーサービス企業データ分析支援

業務内容：世界中から集まる製薬データの分析 メインフレームシステムのダウンサイジング

【Java,Javascript,MySQL,基本設計,Hadoop】レコメンドエンジン開発

・node.js でのAPI設計・開発・テスト ・Hiveクエリの作成・テスト・チューニング ・Spark プログラムの設計・開発・テスト ・Jenkinsジョブの作成 ・Ansible設定ファイルの作成

【JavaLinux,bash,hadoop,AWS】ビッグデータサービス環境設計、構築

顧客ビックデータ組織のR＆Dチームに配属 業務側との調整をしながら、顧客要望を取り入れ 最適なサービスを設計・構築・運用していくミッション

ETLツール導入支援/保険業界のエンジニア求人・案件 IT / インフラ

AWSのサーバ上で稼働するデータ分析基盤のバッチ基盤の開発支援。 Hadoop(Amazon EMR)、Amazon Redshift、Informatica社の別製品(Bigdatamanagement)の導入を検討中であり、 これらのサービスとミドルウェアの設計と構築の実施を支援。 ※バッチはPython3.Xで開発。ETLとしてInformatica社のPowerCenterを利用。

ゲーム機用オンラインサービスに関するビッグデータ分析基盤構築のエンジニア求人・案件 SAP / SAP(CO) / SAP(CO-PC) / IT

・家庭用ゲーム機用オンラインサービスに関するビッグデータ分析基盤の構築、サービス開発および運用 ・クラウドサービスを用いたETLアプリケーション、Web API開発 ・システム要件定義 、アーキテクチャ設計 ・Lightweight Language言語を用いた開発 ・Hadoop、Hive、Spark、ParquetなどのBigData解析技術を用いた開発 ・Linuxを用いたサーバ開発・運用 ・RDBやKVSを用いた開発 ・システムのテスト及びテストの自動化 ・アジャイル開発

【Python/Ruby】自社内システム開発支援/メディア・エンターテインメントのエンジニア求人・案件 IT

・自社内システム開発運用保守支援 ・ビッグデータの解析と分析 ・データ設計 ・集計ジョブ開発 ・データ管理 ・保守運? ・開発環境：使??語 Python, Ruby, Java サーバOS Centos6系 バージョン管理システム GitHub Enterprise クラウド AWS(S3), GCP(GCS, BQ) OSS MySQL, Hadoop, Hive, Kafkaなど CI Jenkins コミュニケーションツール Sla

【Python/SQL】コマーステクノロジ領域のデータ関連支援(リモート併用可)

・課題の特定からアドホック分析、モデル構築、モデルデプロイメントまでの一連のデータサイエンスワークフローの遂行 ・当該企業が保有する多様なデータまたは外部データを活用した、顧客行動の分析インサイトの導出 ・ビジネス課題を解決するためのSQLやSparkなどを活用した大規模データの処理、適切な予測モデルやアルゴリズムの選択・実装、革新的なソリューションの提案 ・汎用的なデータサイエンスプロダクトの開発 ・データサイエンティスト、コンサルタント、プロジェクトマネージャー、データ戦略家との協働 ・スキルやナレッジを共有・学習する文化の創出 ・Spark、Hive、Kafka、Spark-Streaming、Hadoop、Google...

【Python】Webクローラー開発の求人・案件

某大手通信事業者様の生成AI基盤開発支援を行っている中でサイトクローラーの開発業務を行える方を募集しております。

【Android/高単価】人材業界求人アプリ開発の求人・案件

- 人材業界求人アプリ開発をご担当いただきます。 - 作業内容の詳細は下記です。 - ・Android環境 - ・新規開発 - ※これまでのご経験やスキルに応じて上流から下流まで幅広くご担当いただきます。

【リモート併用(渋谷)】BtoB向け AIサービス 移行プロジェクト(AWS,Kubernetes)

案件概要：BtoB向け AIサービス 移行プロジェクト(AWS,Kubernetes) 業務内容： プライベートクラウドで管理されたKubernetes環境やHadoop環境を パブリッククラウドへ移行する。移行に伴い主に下記業務を想定 ・パブリッククラウドのインフラ設計・構築 ・Kubernetes コンテナ環境の設計・構築 ・CI/CD、モニタリング環境の設計・構築 勤務時間：10:00-19:00※相談可 場所：渋谷※フルリモート 外国籍：応相談 ビジネスレベル、日本在住の方のみ

【リモート併用(渋谷)】BtoB向け AIサービス 移行プロジェクト(AWS,Kubernetes)

案件概要：BtoB向け AIサービス 移行プロジェクト(AWS,Kubernetes) 業務内容： プライベートクラウドで管理されたKubernetes環境やHadoop環境を パブリッククラウドへ移行する。移行に伴い主に下記業務を想定 ・パブリッククラウドのインフラ設計・構築 ・Kubernetes コンテナ環境の設計・構築 ・CI/CD、モニタリング環境の設計・構築 勤務時間：10:00-19:00※相談可 場所：渋谷※フルリモート 外国籍：応相談 ビジネスレベル、日本在住の方のみ

【PM/一部リモート/週5日】開発系PMO_某EC事業会社向け 開発企画アシスタントディレクター

1. プロジェクト管理 ・プロジェクトの計画立案、進捗管理、リスクマネジメント ・定例会議の設定、アジェンダ作成、ファシリテーションの実施 ・タスク・課題管理､ プロジェクト管理プロセスの継続的改善 2. API管理ワークフローの設計・推進 ・API内でのフラグの追加・変更・削除に関するワークフローの設計と推進 ・APIドキュメントの整備とバージョン管理、リリースノートの作成 3. 技術サポート ・開発チームへの技術サポート ・社内外のステークホルダーとの調整 ■プロジェクト例 ・AB テストのツールの導入 ・API 利用のガイドライン策定　等

PHP／CaMPの開発案件・求人

携帯会社のシステムでプラン変更等行った際に発生する代理店のインセンティブを計算したり 支払いをしたりするシステムの開発を行っていただきます。 1人称で開発を行える方をお探ししています。