Hadoop × 50万円以上の業務委託案件・フリーランス求人一覧｜ページ3

Java／CaMPの開発案件・求人

某携帯キャリアのシステムでプラン変更等行った際に発生する代理店のインセンティブを計算したり 支払いをしたりするシステムの開発を行っていただきます。 ※詳しくは面談時にお伝えいたします

【リモート相談可能】AI SaaSのデータエンジニア

案件概要：AI SaaSのデータエンジニア 業務内容： データエンジニアとして、全社横断的なデータ基盤構築・開発をリードしていただきます。 自社AIプロダクトにおけるデータ基盤の設計構築や、 DX事業の顧客に対するデータ活用プロジェクト支援などデータ活用に関する業務を横串でお任せします。 最先端のAIアルゴリズムの研究開発を行っている日本トップクラスのAIスペシャリストと協業しながら、 生成AIを含め最先端のAI技術を活用するためのデータ基盤構築に関わっていただくことが可能です。 開発環境： コード管理 : Git(GitHub) 言語：Python OS：Linux データスタック: Fivetran,dbt,snowf...

【リモート相談可能】AI SaaSのデータエンジニア

案件概要：AI SaaSのデータエンジニア 業務内容： データエンジニアとして、全社横断的なデータ基盤構築・開発をリードしていただきます。 自社AIプロダクトにおけるデータ基盤の設計構築や、 DX事業の顧客に対するデータ活用プロジェクト支援などデータ活用に関する業務を横串でお任せします。 最先端のAIアルゴリズムの研究開発を行っている日本トップクラスのAIスペシャリストと協業しながら、 生成AIを含め最先端のAI技術を活用するためのデータ基盤構築に関わっていただくことが可能です。 開発環境： コード管理 : Git(GitHub) 言語：Python OS：Linux データスタック: Fivetran,dbt,snowf...

Python／広告事業のデータマイニング・機械学習エンジニア募集案件・求人

複数ある自社広告配信プロダクトの100億レコード以上/日のログを分析し、広告配信を最適化する業務を担当いただきます。 【主な仕事内容】 ・ビジネスインパクトが大きなKPI改善の見極め ・KPI（CPCなど）最適化の改善及び運用

【AWS】AWSおよびBIによるデータ活用（構築・アプリ・フルスタック）

■内容：スクラムのメンバーとして、基盤構築/アプリ開発を実施頂きます。（設計、開発、テスト、リリース） ■期間：7月～（8月～でもok）※基本長期となる予定 ■その他 テレワーク：対応可 顧客事務所（品川等）での対応：有　※フルリモート希望の場合は別途ご相談ください 稼働率は基本100％の想定

【 AWS/Python/品川/リモート併用】データ分析システム開発・運用作業

某S社グループ内のデータ利活用を目的としたビッグデータの加工・集計業務（主にAWSを利用しての開発） スクラムのメンバーとして、基盤構築/アプリ開発を実施頂きます。（設計、開発、テスト、リリース）

【Linux】アプリケーション、ミドルウェアのパフォーマンス改善業務案件

・高速なレスポンスを実現するためのアプリケーション、ミドルウェアのパフォーマンス改善 ・プロダクト開発と連携したミドルウェア検証・導入 ・各種基盤の監視体制の整備・強化 【開発環境】 Google Cloud Platform 、BigQuery 、StackDriver 、Kubernetes 、Spinnaker 、Docker 、Go 、Linux:CentOS、Ubuntu 、MySQL 、Redis 、Aerospike 、Fluentd 、Apache Spark 、Hadoop(Dataproc) 、Digdag 、DataDog 、 New Relic、Terraform 、Packer Ansible...

【iOS】新規事業に伴うスマホアプリ開発案件(仮想通貨関連)

新規事業推進のプロジェクトにおいて、最上流フェーズから携わって頂き、実装・テストまで一連のご支援をお願い致します。 開発するアプリは仮想通貨関連のスマホアプリです。 【開発環境】 言語：Java8、jquery、Scala、Swift バージョン管理：Git フレームワーク：SpringBoot 本番環境：AWS、GCP コミュニケーション：Slack、Atlassian CI：wercker DB：MySQL、Redis 大規模データ管理：hadoop 開発環境：Vagrant、Docker ログ収集：Fluentd、Embulk 自動テスト：junit

【フルリモート/Linuxの設計～構築経験必須】基盤構築案件

某電力の顧客電力使用量を収集し、活用するシステム対応。 1日約3億件超のデータを処理するインフラ基盤の詳細設計および構築。 また、それに伴う運用スクリプトの設計・製造。

ビッグデータ関連におけるシステム開発エンジニア募集案件

大規模データを処理するためのクラウドインフラ・アプリケーションソフトの構築から、 オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ関連システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります

Python/バッチ開発・運用案件

自社独自のデータ集積のプラットフォームを持つ運営する企業にて 主に様々な種類のDBのバッチ開発・改修・運用業務をお願い致します。 ・Pythonを使ったバッチ開発/改修/運用 ・データインサート …etc. 【環境】　　：言語：Python インフラ： Google Cloud Platform データベース： PostgreSQL DWH：BigQuery ワークフロー： Google Cloud Composer (Apache Airflow) その他ミドルウェア： Dataflow(Apache Beam), Dataproc(Apach Spar...

【Python】新規/既存セキュリティサービス開発案件

新規セキュリティサービスの開発や既存セキュリティサービスの保守開発。 新しい技術を積極的に使ってシステム開発を実施。

【Python】新規/既存セキュリティサービス開発案件

新規セキュリティサービスの開発や既存セキュリティサービスの保守開発。 新しい技術を積極的に使ってシステム開発を実施。

【HTML/CSS/JavaScript】UI/UXデザイナー案件

日本最大級のサービス（アプリ含む）のUI／UXデザイナーを募集致します。 化粧品口コミサイトのほか、ECサイトも運営し、首都圏を中心に実店舗も展開している企業様で 複数サービスがあるため、ユーザー向けサービス、ビジネス(法人)向けサービスと横断的に携わるチャンスがあります。 【業務詳細】 ■ユーザーストーリーに基づいたモックアップの作成 ■WEBサイトやアプリのサービス設計、情報設計、ユーザビリティ・アクセシビリティ設計 ■ワイヤーフレーム、プロトタイプの作成 ■マニュアル作成など運用チームやCSチームとの連携 ■UIデザイン ■エンジニアと連携してソースコードの調整やテスト業務 ■サービステストの計画や実施 ...

【Python/Java/Scalaなど】ディープラーニングエンジニア案件

R&D部門にて、各種サービスの基盤開発や速度改善、ターゲティングやビッグデータを利用した開発、それらを支えるインフラストラクチャ再構築とデータ構造の再構築などを主に担当しています。 技術開発グループ、技術戦略グループは、ともに、速度改善やサービス基盤開発を行いながら、ビッグデータを活用した分析処理や、ストリーミング処理など先進的な技術を用いながら試行錯誤を繰り返しながら機能開発をメインに行っており、 インフラストラクチャグループはスケールしやすく、耐障害性、可用性の向上のための施策、保守・運用を行なうグループです。 ■業務内容： 技術研究とそれらを用いた開発を行う部署にて、様々なデータを扱い、新たなサービス開発と改善 また...

【JavaScript】フロントエンジニア案件

日本最大級のサービス（アプリ含む）をはじめとした自社サービスの制作がメインです。 設計段階からPJTに参加し、新サービスや既存改修のフロントエンド領域（HTML/CSS/JavaScript）を担当していただきます。 システム開発を伴う開発がメインとなるため、社内エンジニアと連携し、システム組み込み後もソースコードの調整やテスト業務など、サービスリリースの最終工程まで取り組んでいただきます。 またフロントエンド開発業務だけでなく、後輩育成やチームメンバーのコードレビューなど、クオリティ管理やチームマネジメントもお任せしていきます。 【業務詳細】 ■ユーザーストーリーに基づいたモックアップの作成 ■WEBサイトやアプリのサ...

【PHP/Hack/Java/Goなど】急成長中企業のアプリケーションエンジニア案件

ECや実店舗も持ち、幅広くBeautyに関するビジネスを展開している 急成長中の企業にて各種サイトの開発に携わっていただきます。 ■業務内容事例： ・クチコミサイトの開発 ・ブログサイトの開発 ・Q&Aサイトの開発 ・ポイントサイトの開発 ・ECサイトの開発 ・サロン予約サイトの開発 ・新規事業の開発 ・上記開発を支えるAPI開発　など （経験・適性に応じて上記開発案件の配属チーム、アサイン業務を決定いたします） ■開発環境： ・言語：PHP、Hack、JavaScript(ES6、TypeScriptなど)、Java、Go、Scala ・PHPフレームワーク：Laravel(5)、CakePHP(2、3)、Zend Fr...

【PHP/Ruby/Java/Goなど】急成長中企業のアプリケーションエンジニア案件（BtoB向け）

ECや実店舗も持ち、幅広くBeautyに関するビジネスを展開している 急成長中の企業にて各種サイトの開発に携わっていただきます。 経験・適性に応じて配属チーム、アサイン業務を決定いたします ■ 業務内容事例 ・サービスの開発・保守・運用 機能開発はエンジニアだけでなく、他部署のプランナーやデザイナーとMTGを行い進めていく場合があります。 ・他サービスへの機能提供API開発 ・オンプレ環境からクラウド環境への移行作業 ・サービスの仮想化 ・定例MTGの実施 朝会、夕会、週次定例、コードレビュー会などを必要に応じ、適時実施しています。 ■開発環境： ・言語：PHP、Go、Ruby、Java ・PHPフレームワーク：Lar...

【PM/PMO】急成長中企業のエンジニアリングマネージャー案件

下記いずれかの部門のマネージャー業務をお願いいたします。 ①ソリューション開発部 ②メディア開発統括部 ③システムアーキテクチャ部 ■業務内容： ・開発チームのチーム編成や、プロジェクトにおけるチーム管理 ・プレイヤーとしての開発業務 ・エンジニアの目標設定・評価・育成 ・プロジェクトマネジメント、技術面以外も含めた問題解決、組織的改善 ・他部署との調整、コミュニケーションづくり ・人材採用 ・率先した継続的なアプリケーション改善 ※技術選定やアプリケーション設計などにも参加いただくこともございます。 ■開発環境： ・言語：PHP、Hack、JavaScript(ES6、TypeScriptなど)、Java、Go、Scal...

【Python/フルリモート】データインテグレーション業務

コーディングをバリバリやるようなシステム開発ではなく データの整備やジョブの作成などがメインの業務を担当いただきます。

【Python】ビックデータ/AI施策分析/開発案件

主にレジュメ/ジョブディスクリプション等の非構造データのパーシング分析/開発を、ビジネス観点での検討を含む基礎集計から分析、開発、そして運用まで一貫してご担当頂きます。 また、パーシング案件の他に、求人紹介/求職者紹介のレコメンドエンジンのエンハンス、BPR向け予測エンジンのエンハンス、といった施策へのアサインも可能性がございます

エンド直【AWS/GCP】自社SaaSシステムの刷新プロジェクトでのインフラエンジニアの募集案件

自社SaaSシステムの刷新プロジェクトの基本設計において、 アーキテクトと連携しながらインフラの検討及び構築をお願いします。 本プロジェクトの環境はAWS（一部GCP）となります。 主な業務内容は下記となります。 ・Terraform、CloudFormationによるIaaS環境の整備 ・GitHub Actionsなどを利用したCI / CD環境の整備 ・ビッグデータ解析・集計基盤の整備 今回ビッグデータの解析・集計処理も行うため、 そのための解析基盤（Hadoopを想定）の検討・構築にも関わっていただきます。

【ビッグ・データ】ETLツールを使用した、BigDataPlatformへのETLシステム開発案件

ETLツールを利用して、大手自動車メーカ内部の業務ユーザごとに 管理しているDBデータをBigDataPlatform(Hadoop)へ一元化する仕組みを開発しています。 フェーズとしては、要件定義、設計、開発・単体、結合テスト、リリースとなりますが、 要件定義ではデータを加工する場合の認識合わせなどです。 エンジニア要員 ・ETL支援 ・informatica EDC構築支援 ・ データベース知識 ・ソフトウェアインフラ構築経験

【データ分析】行動分析基板の設計構築支援案件

・地図データ（位置情報）を含む人間の行動分析を行っている部門にて、行動仮説の検証から分析、そのレポーティングを行って頂きます。 ・仮説を基に、設計、データ取得、加工、検証、結果レポーティングを順次行って頂く形となります。 ・SEの方であれば設計以降、PGの方であればSQLやその他スクリプトを用いてデータ取得以降をご担当頂きます。 ・可視化するビューアー等のツール作成も必要に応じてご依頼します。

【Python/AWS/SQL】某有名TV局関連会社のビッグデータ基盤システム業務案件

アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 ■作業環境＿＿：Windows/Mac選択可 ■開発環境 言語＿＿＿＿：Python,SQL 環境・OS＿：AWS ツール＿＿＿：Git

【Python】【データエンジニア】ビックデータのWeb開発の求人・案件

ビックデータのWeb開発業務にご参画していただきます。\n大手自動車メーカーに関連するWebシステム開発を行っていただきます。\n\n業務内容は、主に下記作業を想定しております。\n・AWSクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築。\n・Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発。\n・ビッグデータ技術（Hadoop, Sparkなど）を用いて\n大規模データセットのバッチおよびリアルタイム処理を実行。\n・ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図る。\n\n開発手法：\nアジャイル（スクラム）\n\n最寄り駅：天王町（初日のみ）

【Python/SQL】ビッグデータ利活用のため加工修正業務の求人・案件

クライアントが保有するビッグデータの利活用を進めていくにあたりAWSでのデータの加工、修正をお願いいたします。

薬局業界向けの各プロダクトのバックエンド開発案件/Python/フルリモート

各プロダクトのバックエンド開発を行って頂きます。 AWSのマネージドサービスをフル活用しながら将来の事業の変化に合わせた技術の選定、設計、実装を進めます。 サーバーレス化、一部機能のマイクロサービス化、開発効率やスケーラビリティなども考慮しつつ、 いかに早く効率的にデリバリーしてユーザに使って頂くかのバランスを取るかをチームで決定しながら開発を進めます。 また一方で、医療情報を扱う事業者として、他の分野と比較して信頼性・セキュリティなどに求められるレベルも高く、インフラ構成も含めて実装を進めます。 高い信頼性やパフォーマンスを維持しつつ安定して開発を継続するため、 アプリケーションコード、AWSのインフラ、DevOps などを...

【SQLなど】サービス内(App/Web)におけるユーザーの活動分析の求人・案件

・サービス内(App/Web)におけるユーザーの活動分析 ・機能分析や、サービス内のファネル分析、ユーザー別の活動分析等の幅広な分析を実施 ・データを依頼してのその直接提示というより、持つ仮説を強化あるいは反証するデータを幅広に検証したり、そこから必要な取得データや分析を提案し回答や示唆を提供する ・必要情報を取得する際の開発チームへの依頼や要件の伝達(イベントの発火組み込みや、新機能における分析必要項目のDevチームへの連絡や埋め込み依頼等) ※海外とのやり取りが発生するため英語の読み書きが頻出します(担当業務によっては英会話の必要性も有り) ＜業務詳細＞ ・分析基盤整備 └ダッシュボードの作成（KPIツリー、目的別ボード...

【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件

現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テー...

【Python/R言語/高単価】データ分析基盤構築の求人・案件

- データ分析 / 基盤構築をご担当いただきます。 - 作業内容の詳細は下記です。 - ・Python / R言語環境 - ・動画サービスデータ分析 / 基盤構築 - ・KPI集計 / 統計分析 - ・ダッシュボード構築 - ・データ分析基盤構築 - ・分析を実現するためのデータ収集 / 調整 - ・企画連携 - ・サービス開発 - ・施策立案支援

【Java】アプリケーション開発エンジニアの求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

【Azure】クラウドエンジニアの求人・案件

在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入

【Python】バックエンドエンジニアの求人・案件

エンドクライアントを支援するサービスのダッシュボードのデータベース設計、API開発、ETL処理の開発をする業務をお願いします。 [具体的な業務] ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・git flowベースの開発進行

【Python】インフラ担当エンジニアの求人・案件

AWSを活用したインフラ保守、構築・開発業務 【案件例】 ・AWSを活用したテレビ朝日案件などのインフラ保守、構築・開発の大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件（頻度：低） ・インフラ関連業務、及びその他付随業務 ＊アサイン後はクラウドから物理環境までを扱う業務内容のいづれかをご担当いただきます。アサイン予定のチームは他の複数のチームと関わりながら業務を遂行する横断的な組織になります。 【参考】 使用サービス例 AWS関連: EC2(AmazonLinux), EBS, AutoScalingGroup, ELB各種, ECS, ECR, S3, EFS, DynamoDB, Elasticsearc...

【Java】アプリケーションの新基板への移行/コンテナ化の求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト 新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

【Java】大規模データ収集基板構築の求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。 ・新環境（分散FS環境）向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）、運用機能の開発

【Azure/リモート】インフラ・Azure構築案件

在庫管理等の分散処理システムをHadoop on Sparkで組んでおり DMCから逆輸入による導入を実施。

【Python/長期高単価】オンライン会議サービス開発の求人・案件

- オンライン会議サービス開発をご担当いただきます。 - ・Pythonエンジニアの募集になります - ・詳細設計/プログラミング（製造）/テストが工程想定になります

【Python/AIエンジニア】探索型BIツール開発におけるデータサイエンティスト

[ポジション]：AIエンジニア 自社で探索型BIツールを開発しており、そこにおける人材を募集 ・検索・機械学習エンジンの開発・実装、および性能改善 ・自然言語処理を使用した検索エンジンの開発 ・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発