Hadoopの業務委託案件・フリーランス求人一覧｜ページ4

【Python/AWS/SQL】某有名TV局関連会社のビッグデータ基盤システム業務案件

アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 ■作業環境＿＿：Windows/Mac選択可 ■開発環境 言語＿＿＿＿：Python,SQL 環境・OS＿：AWS ツール＿＿＿：Git

【Python】【データエンジニア】ビックデータのWeb開発の求人・案件

ビックデータのWeb開発業務にご参画していただきます。\n大手自動車メーカーに関連するWebシステム開発を行っていただきます。\n\n業務内容は、主に下記作業を想定しております。\n・AWSクラウドサービスを利用して、スケーラブルなデータパイプラインの設計と構築。\n・Pythonを使用してデータ収集、データ処理、データクレンジングのスクリプトを開発。\n・ビッグデータ技術（Hadoop, Sparkなど）を用いて\n大規模データセットのバッチおよびリアルタイム処理を実行。\n・ETLプロセスの最適化を行い、データ品質とデータアクセスの向上を図る。\n\n開発手法：\nアジャイル（スクラム）\n\n最寄り駅：天王町（初日のみ）

【Python/SQL】ビッグデータ利活用のため加工修正業務の求人・案件

クライアントが保有するビッグデータの利活用を進めていくにあたりAWSでのデータの加工、修正をお願いいたします。

薬局業界向けの各プロダクトのバックエンド開発案件/Python/フルリモート

各プロダクトのバックエンド開発を行って頂きます。 AWSのマネージドサービスをフル活用しながら将来の事業の変化に合わせた技術の選定、設計、実装を進めます。 サーバーレス化、一部機能のマイクロサービス化、開発効率やスケーラビリティなども考慮しつつ、 いかに早く効率的にデリバリーしてユーザに使って頂くかのバランスを取るかをチームで決定しながら開発を進めます。 また一方で、医療情報を扱う事業者として、他の分野と比較して信頼性・セキュリティなどに求められるレベルも高く、インフラ構成も含めて実装を進めます。 高い信頼性やパフォーマンスを維持しつつ安定して開発を継続するため、 アプリケーションコード、AWSのインフラ、DevOps などを...

【SQLなど】サービス内(App/Web)におけるユーザーの活動分析の求人・案件

・サービス内(App/Web)におけるユーザーの活動分析 ・機能分析や、サービス内のファネル分析、ユーザー別の活動分析等の幅広な分析を実施 ・データを依頼してのその直接提示というより、持つ仮説を強化あるいは反証するデータを幅広に検証したり、そこから必要な取得データや分析を提案し回答や示唆を提供する ・必要情報を取得する際の開発チームへの依頼や要件の伝達(イベントの発火組み込みや、新機能における分析必要項目のDevチームへの連絡や埋め込み依頼等) ※海外とのやり取りが発生するため英語の読み書きが頻出します(担当業務によっては英会話の必要性も有り) ＜業務詳細＞ ・分析基盤整備 └ダッシュボードの作成（KPIツリー、目的別ボード...

【DBエンジニア】データ基盤構築PoCプロジ ェクトの求人・案件

現在国内エネルギー系⼤⼿企業がエンド顧客となるデータ基盤構築PoCプロジェクトが進⾏中。 PoCを通してインフラアーキテクチャの策定、⼤まかなデータパイプラインのフローを策定した9⽉以降の本番環境構築では、インフラ構築からセキュリティ対応、より多くのデータパイプライン構築を予定しており、データエンジニアの拡充を⾏っている。 データ基盤要件定義 データレイクに保存するデータの形式の洗い出し (CSV, JSON, 画像ファイ ル etc…) データソースのインターフェイス特定 (REST API, FTP etc…) データ加⼯(ETL)要件ヒアリング データレイク設計 (Hadoop File System) DWH設計/テー...

【Python/R言語/高単価】データ分析基盤構築の求人・案件

- データ分析 / 基盤構築をご担当いただきます。 - 作業内容の詳細は下記です。 - ・Python / R言語環境 - ・動画サービスデータ分析 / 基盤構築 - ・KPI集計 / 統計分析 - ・ダッシュボード構築 - ・データ分析基盤構築 - ・分析を実現するためのデータ収集 / 調整 - ・企画連携 - ・サービス開発 - ・施策立案支援

某大手電機メーカーの情報可視化ツール基盤統合PJ(SQL)

各基幹システムが個別の観点で収集しているデータを仮想DB化し、 各データを一元化・見える化するためのプラットフォームの作成。

【Java】アプリケーション開発エンジニアの求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。 アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

【Azure】クラウドエンジニアの求人・案件

在庫管理等の分散処理システムをHadoop on Sparkで組んでおりDMCから逆輸入による導入

【Python】バックエンドエンジニアの求人・案件

エンドクライアントを支援するサービスのダッシュボードのデータベース設計、API開発、ETL処理の開発をする業務をお願いします。 [具体的な業務] ・RDBのデータベース設計 ・Glue JobでPythonを利用したETL処理の設計・開発 ・API Gateway、Lambdaを利用したAPI開発 ・技術的知見からの、プロダクトオーナと協調した仕様策定 ・AWS関連リソースのより積極的な活用 ・git flowベースの開発進行

【Python】インフラ担当エンジニアの求人・案件

AWSを活用したインフラ保守、構築・開発業務 【案件例】 ・AWSを活用したテレビ朝日案件などのインフラ保守、構築・開発の大型案件 ・CMSサービスのインフラ保守運用 ・物理サーバー案件（頻度：低） ・インフラ関連業務、及びその他付随業務 ＊アサイン後はクラウドから物理環境までを扱う業務内容のいづれかをご担当いただきます。アサイン予定のチームは他の複数のチームと関わりながら業務を遂行する横断的な組織になります。 【参考】 使用サービス例 AWS関連: EC2(AmazonLinux), EBS, AutoScalingGroup, ELB各種, ECS, ECR, S3, EFS, DynamoDB, Elasticsearc...

【Java】アプリケーションの新基板への移行/コンテナ化の求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。 アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。 RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト 新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

【Java】大規模データ収集基板構築の求人・案件

大規模データ収集基板構築（オンプレにて構築）に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。 ・新環境（分散FS環境）向け機能開発、既存機能の新環境向け修正 ・アプリケーションの改修、機能追加 ・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）、運用機能の開発

【Azure/リモート】インフラ・Azure構築案件

在庫管理等の分散処理システムをHadoop on Sparkで組んでおり DMCから逆輸入による導入を実施。

【Python/長期高単価】オンライン会議サービス開発の求人・案件

- オンライン会議サービス開発をご担当いただきます。 - ・Pythonエンジニアの募集になります - ・詳細設計/プログラミング（製造）/テストが工程想定になります

【Python/AIエンジニア】探索型BIツール開発におけるデータサイエンティスト

[ポジション]：AIエンジニア 自社で探索型BIツールを開発しており、そこにおける人材を募集 ・検索・機械学習エンジンの開発・実装、および性能改善 ・自然言語処理を使用した検索エンジンの開発 ・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発

BIツール開発、既存DWH基盤の保守業務

tableauを使用して、セルフサービスBIツールの開発～保守業務までを行っていただ きます。 また、既存DWH基盤での保守業務もございますので、スキルに合わせて業務をお任せ いたします。 (DWHで使用しているアーキテクチャはhadoop) DB周りの運用保守経験があると確度高めになります。

分析基盤クラウド構築案件

オンライン・オフラインのデータをクラウド環境で統合して分析できる基盤構築を行うための環境構築、ETL設計・開発、データ抽出を行います。 データを効果的・効率的に活用するための基盤を構築する戦略的なポジションになります。 クラウド環境：AWS

ビッグデータ基盤システムの構築、開発、保守

・主に大規模データを処理するためのクラウドインフラ ・アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、 ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。 ・インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります。

メディアデータを収集したDMP活用、様々なアルゴリズムの開発

概要 国内メディアのデータを収集したDMPをを活用して、様々な貢献価値につながるアルゴリズムの開発の実施を行う 業務目的 施策で使われるモデルやアルゴリズムを実装し、運用すること。 部門内のインフラエンジニア・アプリケーションエンジニアと協働して、本番システムを開発・運用すること。 プロジェクト例 ● 横断データを活用した、カスタマーのライフイベントタイミング予測 ● カスタマー属性の予測(年収、職業など)

【PHP】サーバサイドエンジニア★国内大手コスメECサイト開発

日本最大のコスメ・美容の総合サイトを運営してる企業にて、PHPを用いた自社ECサイトのサーバーサイド開発をご担当いただきます。 当企業は月間3億PV、会員480万人などのビッグデータを元に様々なサービス提供を行なっております。 今回想定している主な担当工程は、詳細設計～実装がメインではありますが、スキル次第では要件定義、基本設計フェーズから参画して頂く可能性もございます。 チームは機能ごとに複数チームに分かれており、１チーム２～８名規模でアジャイル開発で進めております。 また、言語はサービスによって都度求められる環境や条件に応じて選択しており、モダンな技術にも非常に積極的に取り組んでいます。 ※現場環境： ・言語：...

人材業界でのデータエンジニア募集

■業務内容 （1）Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯ （2）HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化 （3）Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装 稼　働：週2日~5日　相談可能 時　間：9：30 - 18：30(応相談) 服　装：ビジネスカジュアル・私服

【python,SQL,】オンプレ環境→クラウド環境への移行プロジェクト

オンプレのHadoop環境上にSQL・Pythonで実装した各種アプリケーションをGCP(GoogleCloudPlatform)環境のBigQuery等へコンバートするための移行開発業務 ■プロジェクト背景 性能面・コスト面の課題を受け、5年間運用してきたお客様のオンプレ環境を刷新することになり、今年１月より稼働中（プロジェクトの終了は来期の１Q予定で）

【解析DWH開発】ビックデータ解析による医療系サービス開発解析

医療に関わる膨大なデータを解析することで新たなサービスを創出する企業。 開発はPythonで実装し、DB側の知識、経験が求められます。 ポテンシャルが高ければビッグデータ、Pythonの経験がなくても問題ありません。 ※今後、Web開発も予定しています

【MW,機械学習,ブロックチェーン】パッケージ製品ベンダーの研究開発

AIやブロックチェーン等の最新技術を用いた、パッケージ製品への機能拡充を検討されており、 その研究開発のご支援となります。 具体的には、 ・機械学習等のAI機能を用いたグループウェア機能の最適化 ・OCR機能を用いた帳票処理自動化機能 ・ブロックチェーンを用いたBPM連携 等々がスコープとなっております。

【SQL】ビッグデータ分析支援/行動分析、混雑統計

データベース内ビッグデータの集計及び分析作業 データ分析システムの構築/分析データの評価/報告レポートの作成

【機械学習,画像認識】パッケージ製品へのAI関連の機能開発支援

パッケージ製品へのAI関連の機能の 拡充を検討されており、その開発のご支援となります。 具体的には、 ・機械学習を用いた処理の最適化機能 ・画像認識機能、OCR機能 ・音声での対話入出力機能 が初期スコープとなっております。

【Python,ビッグデータ分析基盤】大規模データの分析基盤の開発・運用支援

稼働中の大規模データの分析基盤に対するPythonプログラムの追加改修及び運用

【PHP】データ分析サイトの機能追加支援

データ分析サイトの機能追加 【工程】：・システム仕様の英訳 ・オフショア対応（欧州） 【環境】：Linux、Apache、Tomcat、PHP、MySQL、Hadoop

【アクセスログ解析,SQL,PHP】BtoCサイトにおけるウェブログ解析案件

・ウェブアクセス解析の経験 ・ウェブサイトの分析経験 ・SQL経験 ・PHP経験