Hadoopの業務委託案件・フリーランス求人一覧｜ページ4

【JavaScript】フロントエンジニア案件

日本最大級のサービス（アプリ含む）をはじめとした自社サービスの制作がメインです。 設計段階からPJTに参加し、新サービスや既存改修のフロントエンド領域（HTML/CSS/JavaScript）を担当していただきます。 システム開発を伴う開発がメインとなるため、社内エンジニアと連携し、システム組み込み後もソースコードの調整やテスト業務など、サービスリリースの最終工程まで取り組んでいただきます。 またフロントエンド開発業務だけでなく、後輩育成やチームメンバーのコードレビューなど、クオリティ管理やチームマネジメントもお任せしていきます。 【業務詳細】 ■ユーザーストーリーに基づいたモックアップの作成 ■WEBサイトやアプリのサ...

【PHP/Hack/Java/Goなど】急成長中企業のアプリケーションエンジニア案件

ECや実店舗も持ち、幅広くBeautyに関するビジネスを展開している 急成長中の企業にて各種サイトの開発に携わっていただきます。 ■業務内容事例： ・クチコミサイトの開発 ・ブログサイトの開発 ・Q&Aサイトの開発 ・ポイントサイトの開発 ・ECサイトの開発 ・サロン予約サイトの開発 ・新規事業の開発 ・上記開発を支えるAPI開発　など （経験・適性に応じて上記開発案件の配属チーム、アサイン業務を決定いたします） ■開発環境： ・言語：PHP、Hack、JavaScript(ES6、TypeScriptなど)、Java、Go、Scala ・PHPフレームワーク：Laravel(5)、CakePHP(2、3)、Zend Fr...

【PHP/Ruby/Java/Goなど】急成長中企業のアプリケーションエンジニア案件（BtoB向け）

ECや実店舗も持ち、幅広くBeautyに関するビジネスを展開している 急成長中の企業にて各種サイトの開発に携わっていただきます。 経験・適性に応じて配属チーム、アサイン業務を決定いたします ■ 業務内容事例 ・サービスの開発・保守・運用 機能開発はエンジニアだけでなく、他部署のプランナーやデザイナーとMTGを行い進めていく場合があります。 ・他サービスへの機能提供API開発 ・オンプレ環境からクラウド環境への移行作業 ・サービスの仮想化 ・定例MTGの実施 朝会、夕会、週次定例、コードレビュー会などを必要に応じ、適時実施しています。 ■開発環境： ・言語：PHP、Go、Ruby、Java ・PHPフレームワーク：Lar...

【PM/PMO】急成長中企業のエンジニアリングマネージャー案件

下記いずれかの部門のマネージャー業務をお願いいたします。 ①ソリューション開発部 ②メディア開発統括部 ③システムアーキテクチャ部 ■業務内容： ・開発チームのチーム編成や、プロジェクトにおけるチーム管理 ・プレイヤーとしての開発業務 ・エンジニアの目標設定・評価・育成 ・プロジェクトマネジメント、技術面以外も含めた問題解決、組織的改善 ・他部署との調整、コミュニケーションづくり ・人材採用 ・率先した継続的なアプリケーション改善 ※技術選定やアプリケーション設計などにも参加いただくこともございます。 ■開発環境： ・言語：PHP、Hack、JavaScript(ES6、TypeScriptなど)、Java、Go、Scal...

【Ruby・Python】広告配信プラットフォーム及びDSPバッチ開発案件

自社サービスである広告プラットフォームとDSPの開発における集計バッチ処理をメインに担当いただきます。 RubyとPythonによりバッチ処理の他HiveQL(SQLに似たもの)やAnsile、Hadoop、Hiveなどの運用にも携わっていただく予定です。 広告配信プラットフォームでは大規模な広告配信機能に加えて、レポーティング機能、セグメント管理機能、広告配信設定機能など 広告配信におけるPDCAサイクル実現を目的とした機能が盛り込まれています。 【開発環境】 言語：Python、Ruby OS：Linux、AWS DB：MySQL、Tokyocabinet その他：Hadoop、Ansible、Hive

【Java】ショッピング系大規模ECサイトの追加開発・保守案件

ECサイトの保守、保守開発及び新規追加開発を実施していきます 領域としては実績管理、ランキング、レコメンド、会員アプローチになります。 ■実績管理 ECサイトのアクセスログ、注文情報を元に、時間別、商品別等でどんな商品が売れたか？ どんな商品にアクセスがあるのか？等を分析するデータの作成 集計にはHadoopを使用 また、実績の確認については一部Google Anaanalyticsを使用 ■ランキング 実績管理で作成したデータを元に、24時間、1週間、4週間単位のランキングデータを作成。 ■レコメンド 外部ASPサービスを使用し、サイト内にレコメ...

【Python/フルリモート】データインテグレーション業務

コーディングをバリバリやるようなシステム開発ではなく データの整備やジョブの作成などがメインの業務を担当いただきます。

【Python】ビックデータ/AI施策分析/開発案件

主にレジュメ/ジョブディスクリプション等の非構造データのパーシング分析/開発を、ビジネス観点での検討を含む基礎集計から分析、開発、そして運用まで一貫してご担当頂きます。 また、パーシング案件の他に、求人紹介/求職者紹介のレコメンドエンジンのエンハンス、BPR向け予測エンジンのエンハンス、といった施策へのアサインも可能性がございます

エンド直【AWS/GCP】自社SaaSシステムの刷新プロジェクトでのインフラエンジニアの募集案件

自社SaaSシステムの刷新プロジェクトの基本設計において、 アーキテクトと連携しながらインフラの検討及び構築をお願いします。 本プロジェクトの環境はAWS（一部GCP）となります。 主な業務内容は下記となります。 ・Terraform、CloudFormationによるIaaS環境の整備 ・GitHub Actionsなどを利用したCI / CD環境の整備 ・ビッグデータ解析・集計基盤の整備 今回ビッグデータの解析・集計処理も行うため、 そのための解析基盤（Hadoopを想定）の検討・構築にも関わっていただきます。

【ビッグ・データ】ETLツールを使用した、BigDataPlatformへのETLシステム開発案件

ETLツールを利用して、大手自動車メーカ内部の業務ユーザごとに 管理しているDBデータをBigDataPlatform(Hadoop)へ一元化する仕組みを開発しています。 フェーズとしては、要件定義、設計、開発・単体、結合テスト、リリースとなりますが、 要件定義ではデータを加工する場合の認識合わせなどです。 エンジニア要員 ・ETL支援 ・informatica EDC構築支援 ・ データベース知識 ・ソフトウェアインフラ構築経験

【データ分析】行動分析基板の設計構築支援案件

・地図データ（位置情報）を含む人間の行動分析を行っている部門にて、行動仮説の検証から分析、そのレポーティングを行って頂きます。 ・仮説を基に、設計、データ取得、加工、検証、結果レポーティングを順次行って頂く形となります。 ・SEの方であれば設計以降、PGの方であればSQLやその他スクリプトを用いてデータ取得以降をご担当頂きます。 ・可視化するビューアー等のツール作成も必要に応じてご依頼します。

【Java】IoT基盤構築案件

IoTビジネスを拡大するにあたり、弊社クライアントビジネスのヒアリングはフレクトプロパーが担当するので、 そのビジネス要件に基づきアプリ基盤業務を遂行できる方の募集をします。 想定される環境は、AWS、heroku上へのアプリ構築になります。 センサーデバイス（httpとは限らない）からデータを吸い上げ、 加工、集約、そして、見せる。までが近々でのミッションとなります。 直近フェーズにおいては、ビッグデータではあるものの集約機構をつくるだけなので、性能要件が求められるかたち。 現時点の見通しとしては、hadoopやspark、インパラなどの処理基盤構築はしない可能性が高い。 treasure dataのようなクラウ...

【Python/AWS/SQL】某有名TV局関連会社のビッグデータ基盤システム業務案件

アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 ■作業環境＿＿：Windows/Mac選択可 ■開発環境 言語＿＿＿＿：Python,SQL 環境・OS＿：AWS ツール＿＿＿：Git

【Python】【データエンジニア】ビックデータのWeb開発の求人・案件

ビックデータのWeb開発業務にご参画していただきます。\n大手自動車メーカーに関連するWebシステム開発を行っていただきます。\n\n業務内容は、主に下記作業を想定しております。\n・AWSクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築。\n・Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発。\n・ビッグデータ技術（Hadoop, Sparkなど）を用いて\n大規模データセットのバッチおよびリアルタイム処理を実行。\n・ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図る。\n\n開発手法：\nアジャイル（スクラム）\n\n最寄り駅：天王町（初日のみ）

【Python/SQL】ビッグデータ利活用のため加工修正業務の求人・案件

クライアントが保有するビッグデータの利活用を進めていくにあたりAWSでのデータの加工、修正をお願いいたします。

【SQLなど】サービス内(App/Web)におけるユーザーの活動分析の求人・案件

・サービス内(App/Web)におけるユーザーの活動分析 ・機能分析や、サービス内のファネル分析、ユーザー別の活動分析等の幅広な分析を実施 ・データを依頼してのその直接提示というより、持つ仮説を強化あるいは反証するデータを幅広に検証したり、そこから必要な取得データや分析を提案し回答や示唆を提供する ・必要情報を取得する際の開発チームへの依頼や要件の伝達(イベントの発火組み込みや、新機能における分析必要項目のDevチームへの連絡や埋め込み依頼等) ※海外とのやり取りが発生するため英語の読み書きが頻出します(担当業務によっては英会話の必要性も有り) ＜業務詳細＞ ・分析基盤整備 └ダッシュボードの作成（KPIツリー、目的別ボード...

【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件

現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テー...

【Java】アプリケーション開発エンジニアの求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

【Azure】クラウドエンジニアの求人・案件

在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入

【Python】バックエンドエンジニアの求人・案件

エンドクライアントを支援するサービスのダッシュボードのデータベース設計、API開発、ETL処理の開発をする業務をお願いします。 [具体的な業務] ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・git flowベースの開発進行

【Python】インフラ担当エンジニアの求人・案件

AWSを活用したインフラ保守、構築・開発業務 【案件例】 ・AWSを活用したテレビ朝日案件などのインフラ保守、構築・開発の大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件（頻度：低） ・インフラ関連業務、及びその他付随業務 ＊アサイン後はクラウドから物理環境までを扱う業務内容のいづれかをご担当いただきます。アサイン予定のチームは他の複数のチームと関わりながら業務を遂行する横断的な組織になります。 【参考】 使用サービス例 AWS関連: EC2(AmazonLinux), EBS, AutoScalingGroup, ELB各種, ECS, ECR, S3, EFS, DynamoDB, Elasticsearc...

【Java】アプリケーションの新基板への移行/コンテナ化の求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト 新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

【Java】大規模データ収集基板構築の求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。 ・新環境（分散FS環境）向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）、運用機能の開発

【Azure/リモート】インフラ・Azure構築案件

在庫管理等の分散処理システムをHadoop on Sparkで組んでおり DMCから逆輸入による導入を実施。

【Python/長期高単価】オンライン会議サービス開発の求人・案件

- オンライン会議サービス開発をご担当いただきます。 - ・Pythonエンジニアの募集になります - ・詳細設計/プログラミング（製造）/テストが工程想定になります

【Python/AIエンジニア】探索型BIツール開発におけるデータサイエンティスト

[ポジション]：AIエンジニア 自社で探索型BIツールを開発しており、そこにおける人材を募集 ・検索・機械学習エンジンの開発・実装、および性能改善 ・自然言語処理を使用した検索エンジンの開発 ・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発

BIツール開発、既存DWH基盤の保守業務

tableauを使用して、セルフサービスBIツールの開発～保守業務までを行っていただ きます。 また、既存DWH基盤での保守業務もございますので、スキルに合わせて業務をお任せ いたします。 (DWHで使用しているアーキテクチャはhadoop) DB周りの運用保守経験があると確度高めになります。

分析基盤クラウド構築案件

オンライン・オフラインのデータをクラウド環境で統合して分析できる基盤構築を行うための環境構築、ETL設計・開発、データ抽出を行います。 データを効果的・効率的に活用するための基盤を構築する戦略的なポジションになります。 クラウド環境：AWS

ビッグデータ基盤システムの構築、開発、保守

・主に大規模データを処理するためのクラウドインフラ ・アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 ・インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります。

メディアデータを収集したDMP活用、様々なアルゴリズムの開発

概要 国内メディアのデータを収集したDMPをを活用して、様々な貢献価値につながるアルゴリズムの開発の実施を行う 業務目的 施策で使われるモデルやアルゴリズムを実装し、運用すること。 部門内のインフラエンジニア・アプリケーションエンジニアと協働して、本番システムを開発・運用すること。 プロジェクト例 ● 横断データを活用した、カスタマーのライフイベントタイミング予測 ● カスタマー属性の予測(年収、職業など)

【PHP】サーバサイドエンジニア★国内大手コスメECサイト開発

日本最大のコスメ・美容の総合サイトを運営してる企業にて、PHPを用いた自社ECサイトのサーバーサイド開発をご担当いただきます。 当企業は月間3億PV、会員480万人などのビッグデータを元に様々なサービス提供を行なっております。 今回想定している主な担当工程は、詳細設計～実装がメインではありますが、スキル次第では要件定義、基本設計フェーズから参画して頂く可能性もございます。 チームは機能ごとに複数チームに分かれており、１チーム２～８名規模でアジャイル開発で進めております。 また、言語はサービスによって都度求められる環境や条件に応じて選択しており、モダンな技術にも非常に積極的に取り組んでいます。 ※現場環境： ・言語：...

人材業界でのデータエンジニア募集

■業務内容 （1）Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯ （2）HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化 （3）Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装 稼　働：週2日~5日　相談可能 時　間：9：30 - 18：30(応相談) 服　装：ビジネスカジュアル・私服

【python,SQL,】オンプレ環境→クラウド環境への移行プロジェクト

オンプレのHadoop環境上にSQL・Pythonで実装した各種アプリケーションをGCP(GoogleCloudPlatform)環境のBigQuery等へコンバートするための移行開発業務 ■プロジェクト背景 性能面・コスト面の課題を受け、5年間運用してきたお客様のオンプレ環境を刷新することになり、今年１月より稼働中（プロジェクトの終了は来期の１Q予定で）

【解析DWH開発】ビックデータ解析による医療系サービス開発解析

医療に関わる膨大なデータを解析することで新たなサービスを創出する企業。 開発はPythonで実装し、DB側の知識、経験が求められます。 ポテンシャルが高ければビッグデータ、Pythonの経験がなくても問題ありません。 ※今後、Web開発も予定しています

【MW,機械学習,ブロックチェーン】パッケージ製品ベンダーの研究開発

AIやブロックチェーン等の最新技術を用いた、パッケージ製品への機能拡充を検討されており、 その研究開発のご支援となります。 具体的には、 ・機械学習等のAI機能を用いたグループウェア機能の最適化 ・OCR機能を用いた帳票処理自動化機能 ・ブロックチェーンを用いたBPM連携 等々がスコープとなっております。

【SQL】ビッグデータ分析支援/行動分析、混雑統計

データベース内ビッグデータの集計及び分析作業 データ分析システムの構築/分析データの評価/報告レポートの作成

【機械学習,画像認識】パッケージ製品へのAI関連の機能開発支援

パッケージ製品へのAI関連の機能の 拡充を検討されており、その開発のご支援となります。 具体的には、 ・機械学習を用いた処理の最適化機能 ・画像認識機能、OCR機能 ・音声での対話入出力機能 が初期スコープとなっております。

【Python,ビッグデータ分析基盤】大規模データの分析基盤の開発・運用支援

稼働中の大規模データの分析基盤に対するPythonプログラムの追加改修及び運用

【PHP】データ分析サイトの機能追加支援

データ分析サイトの機能追加 【工程】：・システム仕様の英訳 ・オフショア対応（欧州） 【環境】：Linux、Apache、Tomcat、PHP、MySQL、Hadoop

【アクセスログ解析,SQL,PHP】BtoCサイトにおけるウェブログ解析案件

・ウェブアクセス解析の経験 ・ウェブサイトの分析経験 ・SQL経験 ・PHP経験