Hadoop × 60万円以上の業務委託案件・フリーランス求人一覧｜ページ3

【 AWS/Python/品川/リモート併用】データ分析システム開発・運用作業

某S社グループ内のデータ利活用を目的としたビッグデータの加工・集計業務（主にAWSを利用しての開発） スクラムのメンバーとして、基盤構築/アプリ開発を実施頂きます。（設計、開発、テスト、リリース）

【Linux】アプリケーション、ミドルウェアのパフォーマンス改善業務案件

・高速なレスポンスを実現するためのアプリケーション、ミドルウェアのパフォーマンス改善 ・プロダクト開発と連携したミドルウェア検証・導入 ・各種基盤の監視体制の整備・強化 【開発環境】 Google Cloud Platform 、BigQuery 、StackDriver 、Kubernetes 、Spinnaker 、Docker 、Go 、Linux:CentOS、Ubuntu 、MySQL 、Redis 、Aerospike 、Fluentd 、Apache Spark 、Hadoop(Dataproc) 、Digdag 、DataDog 、 New Relic、Terraform 、Packer Ansible...

【iOS】新規事業に伴うスマホアプリ開発案件(仮想通貨関連)

新規事業推進のプロジェクトにおいて、最上流フェーズから携わって頂き、実装・テストまで一連のご支援をお願い致します。 開発するアプリは仮想通貨関連のスマホアプリです。 【開発環境】 言語：Java8、jquery、Scala、Swift バージョン管理：Git フレームワーク：SpringBoot 本番環境：AWS、GCP コミュニケーション：Slack、Atlassian CI：wercker DB：MySQL、Redis 大規模データ管理：hadoop 開発環境：Vagrant、Docker ログ収集：Fluentd、Embulk 自動テスト：junit

【フルリモート/Linuxの設計～構築経験必須】基盤構築案件

某電力の顧客電力使用量を収集し、活用するシステム対応。 1日約3億件超のデータを処理するインフラ基盤の詳細設計および構築。 また、それに伴う運用スクリプトの設計・製造。

ビッグデータ関連におけるシステム開発エンジニア募集案件

大規模データを処理するためのクラウドインフラ・アプリケーションソフトの構築から、 オーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ関連システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります

【Python】新規/既存セキュリティサービス開発案件

新規セキュリティサービスの開発や既存セキュリティサービスの保守開発。 新しい技術を積極的に使ってシステム開発を実施。

【Python】新規/既存セキュリティサービス開発案件

新規セキュリティサービスの開発や既存セキュリティサービスの保守開発。 新しい技術を積極的に使ってシステム開発を実施。

【HTML/CSS/JavaScript】UI/UXデザイナー案件

日本最大級のサービス（アプリ含む）のUI／UXデザイナーを募集致します。 化粧品口コミサイトのほか、ECサイトも運営し、首都圏を中心に実店舗も展開している企業様で 複数サービスがあるため、ユーザー向けサービス、ビジネス(法人)向けサービスと横断的に携わるチャンスがあります。 【業務詳細】 ■ユーザーストーリーに基づいたモックアップの作成 ■WEBサイトやアプリのサービス設計、情報設計、ユーザビリティ・アクセシビリティ設計 ■ワイヤーフレーム、プロトタイプの作成 ■マニュアル作成など運用チームやCSチームとの連携 ■UIデザイン ■エンジニアと連携してソースコードの調整やテスト業務 ■サービステストの計画や実施 ...

【Python/Java/Scalaなど】ディープラーニングエンジニア案件

R&D部門にて、各種サービスの基盤開発や速度改善、ターゲティングやビッグデータを利用した開発、それらを支えるインフラストラクチャ再構築とデータ構造の再構築などを主に担当しています。 技術開発グループ、技術戦略グループは、ともに、速度改善やサービス基盤開発を行いながら、ビッグデータを活用した分析処理や、ストリーミング処理など先進的な技術を用いながら試行錯誤を繰り返しながら機能開発をメインに行っており、 インフラストラクチャグループはスケールしやすく、耐障害性、可用性の向上のための施策、保守・運用を行なうグループです。 ■業務内容： 技術研究とそれらを用いた開発を行う部署にて、様々なデータを扱い、新たなサービス開発と改善 また...

【JavaScript】フロントエンジニア案件

日本最大級のサービス（アプリ含む）をはじめとした自社サービスの制作がメインです。 設計段階からPJTに参加し、新サービスや既存改修のフロントエンド領域（HTML/CSS/JavaScript）を担当していただきます。 システム開発を伴う開発がメインとなるため、社内エンジニアと連携し、システム組み込み後もソースコードの調整やテスト業務など、サービスリリースの最終工程まで取り組んでいただきます。 またフロントエンド開発業務だけでなく、後輩育成やチームメンバーのコードレビューなど、クオリティ管理やチームマネジメントもお任せしていきます。 【業務詳細】 ■ユーザーストーリーに基づいたモックアップの作成 ■WEBサイトやアプリのサ...

【PHP/Hack/Java/Goなど】急成長中企業のアプリケーションエンジニア案件

ECや実店舗も持ち、幅広くBeautyに関するビジネスを展開している 急成長中の企業にて各種サイトの開発に携わっていただきます。 ■業務内容事例： ・クチコミサイトの開発 ・ブログサイトの開発 ・Q&Aサイトの開発 ・ポイントサイトの開発 ・ECサイトの開発 ・サロン予約サイトの開発 ・新規事業の開発 ・上記開発を支えるAPI開発　など （経験・適性に応じて上記開発案件の配属チーム、アサイン業務を決定いたします） ■開発環境： ・言語：PHP、Hack、JavaScript(ES6、TypeScriptなど)、Java、Go、Scala ・PHPフレームワーク：Laravel(5)、CakePHP(2、3)、Zend Fr...

【PHP/Ruby/Java/Goなど】急成長中企業のアプリケーションエンジニア案件（BtoB向け）

ECや実店舗も持ち、幅広くBeautyに関するビジネスを展開している 急成長中の企業にて各種サイトの開発に携わっていただきます。 経験・適性に応じて配属チーム、アサイン業務を決定いたします ■ 業務内容事例 ・サービスの開発・保守・運用 機能開発はエンジニアだけでなく、他部署のプランナーやデザイナーとMTGを行い進めていく場合があります。 ・他サービスへの機能提供API開発 ・オンプレ環境からクラウド環境への移行作業 ・サービスの仮想化 ・定例MTGの実施 朝会、夕会、週次定例、コードレビュー会などを必要に応じ、適時実施しています。 ■開発環境： ・言語：PHP、Go、Ruby、Java ・PHPフレームワーク：Lar...

【PM/PMO】急成長中企業のエンジニアリングマネージャー案件

下記いずれかの部門のマネージャー業務をお願いいたします。 ①ソリューション開発部 ②メディア開発統括部 ③システムアーキテクチャ部 ■業務内容： ・開発チームのチーム編成や、プロジェクトにおけるチーム管理 ・プレイヤーとしての開発業務 ・エンジニアの目標設定・評価・育成 ・プロジェクトマネジメント、技術面以外も含めた問題解決、組織的改善 ・他部署との調整、コミュニケーションづくり ・人材採用 ・率先した継続的なアプリケーション改善 ※技術選定やアプリケーション設計などにも参加いただくこともございます。 ■開発環境： ・言語：PHP、Hack、JavaScript(ES6、TypeScriptなど)、Java、Go、Scal...

【Python】ビックデータ/AI施策分析/開発案件

主にレジュメ/ジョブディスクリプション等の非構造データのパーシング分析/開発を、ビジネス観点での検討を含む基礎集計から分析、開発、そして運用まで一貫してご担当頂きます。 また、パーシング案件の他に、求人紹介/求職者紹介のレコメンドエンジンのエンハンス、BPR向け予測エンジンのエンハンス、といった施策へのアサインも可能性がございます

エンド直【AWS/GCP】自社SaaSシステムの刷新プロジェクトでのインフラエンジニアの募集案件

自社SaaSシステムの刷新プロジェクトの基本設計において、 アーキテクトと連携しながらインフラの検討及び構築をお願いします。 本プロジェクトの環境はAWS（一部GCP）となります。 主な業務内容は下記となります。 ・Terraform、CloudFormationによるIaaS環境の整備 ・GitHub Actionsなどを利用したCI / CD環境の整備 ・ビッグデータ解析・集計基盤の整備 今回ビッグデータの解析・集計処理も行うため、 そのための解析基盤（Hadoopを想定）の検討・構築にも関わっていただきます。

【ビッグ・データ】ETLツールを使用した、BigDataPlatformへのETLシステム開発案件

ETLツールを利用して、大手自動車メーカ内部の業務ユーザごとに 管理しているDBデータをBigDataPlatform(Hadoop)へ一元化する仕組みを開発しています。 フェーズとしては、要件定義、設計、開発・単体、結合テスト、リリースとなりますが、 要件定義ではデータを加工する場合の認識合わせなどです。 エンジニア要員 ・ETL支援 ・informatica EDC構築支援 ・ データベース知識 ・ソフトウェアインフラ構築経験

【データ分析】行動分析基板の設計構築支援案件

・地図データ（位置情報）を含む人間の行動分析を行っている部門にて、行動仮説の検証から分析、そのレポーティングを行って頂きます。 ・仮説を基に、設計、データ取得、加工、検証、結果レポーティングを順次行って頂く形となります。 ・SEの方であれば設計以降、PGの方であればSQLやその他スクリプトを用いてデータ取得以降をご担当頂きます。 ・可視化するビューアー等のツール作成も必要に応じてご依頼します。

【Python/AWS/SQL】某有名TV局関連会社のビッグデータ基盤システム業務案件

アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 ■作業環境＿＿：Windows/Mac選択可 ■開発環境 言語＿＿＿＿：Python,SQL 環境・OS＿：AWS ツール＿＿＿：Git

【Python】【データエンジニア】ビックデータのWeb開発の求人・案件

ビックデータのWeb開発業務にご参画していただきます。\n大手自動車メーカーに関連するWebシステム開発を行っていただきます。\n\n業務内容は、主に下記作業を想定しております。\n・AWSクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築。\n・Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発。\n・ビッグデータ技術（Hadoop, Sparkなど）を用いて\n大規模データセットのバッチおよびリアルタイム処理を実行。\n・ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図る。\n\n開発手法：\nアジャイル（スクラム）\n\n最寄り駅：天王町（初日のみ）

薬局業界向けの各プロダクトのバックエンド開発案件/Python/フルリモート

各プロダクトのバックエンド開発を行って頂きます。 AWSのマネージドサービスをフル活用しながら将来の事業の変化に合わせた技術の選定、設計、実装を進めます。 サーバーレス化、一部機能のマイクロサービス化、開発効率やスケーラビリティなども考慮しつつ、 いかに早く効率的にデリバリーしてユーザに使って頂くかのバランスを取るかをチームで決定しながら開発を進めます。 また一方で、医療情報を扱う事業者として、他の分野と比較して信頼性・セキュリティなどに求められるレベルも高く、インフラ構成も含めて実装を進めます。 高い信頼性やパフォーマンスを維持しつつ安定して開発を継続するため、 アプリケーションコード、AWSのインフラ、DevOps などを...

【SQLなど】サービス内(App/Web)におけるユーザーの活動分析の求人・案件

・サービス内(App/Web)におけるユーザーの活動分析 ・機能分析や、サービス内のファネル分析、ユーザー別の活動分析等の幅広な分析を実施 ・データを依頼してのその直接提示というより、持つ仮説を強化あるいは反証するデータを幅広に検証したり、そこから必要な取得データや分析を提案し回答や示唆を提供する ・必要情報を取得する際の開発チームへの依頼や要件の伝達(イベントの発火組み込みや、新機能における分析必要項目のDevチームへの連絡や埋め込み依頼等) ※海外とのやり取りが発生するため英語の読み書きが頻出します(担当業務によっては英会話の必要性も有り) ＜業務詳細＞ ・分析基盤整備 └ダッシュボードの作成（KPIツリー、目的別ボード...

【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件

現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テー...

【Python/R言語/高単価】データ分析基盤構築の求人・案件

- データ分析 / 基盤構築をご担当いただきます。 - 作業内容の詳細は下記です。 - ・Python / R言語環境 - ・動画サービスデータ分析 / 基盤構築 - ・KPI集計 / 統計分析 - ・ダッシュボード構築 - ・データ分析基盤構築 - ・分析を実現するためのデータ収集 / 調整 - ・企画連携 - ・サービス開発 - ・施策立案支援

【Java】アプリケーション開発エンジニアの求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

【Azure】クラウドエンジニアの求人・案件

在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入

【Python】バックエンドエンジニアの求人・案件

エンドクライアントを支援するサービスのダッシュボードのデータベース設計、API開発、ETL処理の開発をする業務をお願いします。 [具体的な業務] ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・git flowベースの開発進行

【Python】インフラ担当エンジニアの求人・案件

AWSを活用したインフラ保守、構築・開発業務 【案件例】 ・AWSを活用したテレビ朝日案件などのインフラ保守、構築・開発の大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件（頻度：低） ・インフラ関連業務、及びその他付随業務 ＊アサイン後はクラウドから物理環境までを扱う業務内容のいづれかをご担当いただきます。アサイン予定のチームは他の複数のチームと関わりながら業務を遂行する横断的な組織になります。 【参考】 使用サービス例 AWS関連: EC2(AmazonLinux), EBS, AutoScalingGroup, ELB各種, ECS, ECR, S3, EFS, DynamoDB, Elasticsearc...

【Java】アプリケーションの新基板への移行/コンテナ化の求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト 新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

【Java】大規模データ収集基板構築の求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。 ・新環境（分散FS環境）向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）、運用機能の開発

【Azure/リモート】インフラ・Azure構築案件

在庫管理等の分散処理システムをHadoop on Sparkで組んでおり DMCから逆輸入による導入を実施。

【Python/長期高単価】オンライン会議サービス開発の求人・案件

- オンライン会議サービス開発をご担当いただきます。 - ・Pythonエンジニアの募集になります - ・詳細設計/プログラミング（製造）/テストが工程想定になります

【Python/AIエンジニア】探索型BIツール開発におけるデータサイエンティスト

[ポジション]：AIエンジニア 自社で探索型BIツールを開発しており、そこにおける人材を募集 ・検索・機械学習エンジンの開発・実装、および性能改善 ・自然言語処理を使用した検索エンジンの開発 ・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発

BIツール開発、既存DWH基盤の保守業務

tableauを使用して、セルフサービスBIツールの開発～保守業務までを行っていただ きます。 また、既存DWH基盤での保守業務もございますので、スキルに合わせて業務をお任せ いたします。 (DWHで使用しているアーキテクチャはhadoop) DB周りの運用保守経験があると確度高めになります。

分析基盤クラウド構築案件

オンライン・オフラインのデータをクラウド環境で統合して分析できる基盤構築を行うための環境構築、ETL設計・開発、データ抽出を行います。 データを効果的・効率的に活用するための基盤を構築する戦略的なポジションになります。 クラウド環境：AWS

ビッグデータ基盤システムの構築、開発、保守

・主に大規模データを処理するためのクラウドインフラ ・アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 ・インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります。

メディアデータを収集したDMP活用、様々なアルゴリズムの開発

概要 国内メディアのデータを収集したDMPをを活用して、様々な貢献価値につながるアルゴリズムの開発の実施を行う 業務目的 施策で使われるモデルやアルゴリズムを実装し、運用すること。 部門内のインフラエンジニア・アプリケーションエンジニアと協働して、本番システムを開発・運用すること。 プロジェクト例 ● 横断データを活用した、カスタマーのライフイベントタイミング予測 ● カスタマー属性の予測(年収、職業など)

【PHP】サーバサイドエンジニア★国内大手コスメECサイト開発

日本最大のコスメ・美容の総合サイトを運営してる企業にて、PHPを用いた自社ECサイトのサーバーサイド開発をご担当いただきます。 当企業は月間3億PV、会員480万人などのビッグデータを元に様々なサービス提供を行なっております。 今回想定している主な担当工程は、詳細設計～実装がメインではありますが、スキル次第では要件定義、基本設計フェーズから参画して頂く可能性もございます。 チームは機能ごとに複数チームに分かれており、１チーム２～８名規模でアジャイル開発で進めております。 また、言語はサービスによって都度求められる環境や条件に応じて選択しており、モダンな技術にも非常に積極的に取り組んでいます。 ※現場環境： ・言語：...

人材業界でのデータエンジニア募集

■業務内容 （1）Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯ （2）HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化 （3）Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装 稼　働：週2日~5日　相談可能 時　間：9：30 - 18：30(応相談) 服　装：ビジネスカジュアル・私服

【MW,機械学習,ブロックチェーン】パッケージ製品ベンダーの研究開発

AIやブロックチェーン等の最新技術を用いた、パッケージ製品への機能拡充を検討されており、 その研究開発のご支援となります。 具体的には、 ・機械学習等のAI機能を用いたグループウェア機能の最適化 ・OCR機能を用いた帳票処理自動化機能 ・ブロックチェーンを用いたBPM連携 等々がスコープとなっております。

【SQL】ビッグデータ分析支援/行動分析、混雑統計

データベース内ビッグデータの集計及び分析作業 データ分析システムの構築/分析データの評価/報告レポートの作成