Hadoop × リモート/在宅OKの業務委託案件・フリーランス求人一覧（全53件）｜ページ2

【Databricks/PySpark/Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

トラック製造販売メーカー向けに、商用車の輸送状況をリアルタイム可視化する業務アプリのパフォーマンス改善を担当いただきます。 膨大な車載GPSログの解析で発生している処理遅延を解消するため、Databricks（PySpark/Scala）を中心にデータ処理基盤の抜本的なチューニングおよび改善実装を実施します。 主な作業内容: ・Databricks（PySpark, Scala）環境のパフォーマンス最適化 ・大規模データ処理の実装/改修（数億行規模） ・Azure上のデータ基盤のボトルネック解析と改善 ・保守、構成管理、リファクタリング 稼働形態は新川崎駅近辺にて初月は週3出社、その後は週1出社を想定（状況により変更の可能...

【Python】データ解析システム構築支援(基本リモート)

Databricksによるデータ解析システムの構築支援 ■募集背景 増員のため

【Python/Azure/フルリモート】WEBサービス向けDatabricksデータ解析システム開発

Databricksによるデータ解析システムの開発案件です。データエンジニアを1名募集致します。設計～テストまでご担当頂きます。

【Databricks/PySpark・Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

トラック製造・販売メーカー向けに、車両輸送状況をリアルタイムに可視化する業務アプリのパフォーマンス改善を担当いただきます。現状、車両から送信される膨大なGPSログ解析で処理遅延が発生しており、Databricks を中心にデータ処理基盤の抜本的なチューニングと改善実装を行います。 想定業務: ・Databricks（PySpark/Scala）環境のパフォーマンス最適化 ・大規模データ処理（数億行規模）の実装・改修 ・Azure データ基盤（Data Factory など）のパフォーマンス改善 ・保守運用、構成管理、リファクタリング 商流はエンド→弊社→貴社。弊社から複数名稼働中で意思決定・動きは速い環境です。

【AWS】損保会社向けAWSインフラ構築【日本人限定／一部リモート】

下記ご確認の上、ご応募お願いいたします。 ーーーーーーーーーーーーーーーーーー ・本案件は、日本人限定 ・東京の顧客先に出社可能な方 ・週5日（月〜金）で稼働可能な方 ＊副業、請負案件ではございません。 ーーーーーーーーーーーーーーーーーー 既存AWSインフラの追加開発や改修等をご担当いただきます。 大型AWSインフラシステムを学ぶことができます。 ツール： ・AWS ・SnowFlake ・RedShift 週5日、リモート

【Databricks/PySpark・Scala】商用車ロジスティクス可視化基盤のデータ処理最適化

トラック製造販売メーカー向けに、車両のGPSログを用いたリアルタイム可視化アプリのパフォーマンス最適化を行います。 現状、膨大なGPSデータ解析で処理遅延が発生しており、Databricks（PySpark/Scala）およびAzureデータ基盤を中心に、抜本的なチューニングと改善施策の設計・実装をご担当いただきます。 想定業務: ・Databricks（PySpark, Scala）のパフォーマンス最適化 ・大規模バッチ/ストリーミング処理の実装・改修 ・Azureデータ基盤（ADF/SQL/Functions等）の性能改善 ・保守運用、構成管理、リファクタリング 稼働形態は新川崎駅近辺にて、初月は週3出社、その後は週1...

【Java／Shell】【SE】大手通信系企業社内会計処理システムリプレースの求人・案件

大手通信系企業の社内会計処理システムリプレース案件に携わっていただきます。\n既存システムのリプレースにあたり、アーキテクチャ設計やPoC検証を担える方を募集\nしています。\nバッチ処理においてApache FlinkやHadoopDBの適用を検討中で、\n一部機能実装から性能検証、要件整理のためのPoCをご実施していただきます。\n・既存機能の把握\n・一部機能の実装（Flinkの適用）\n・動作環境のインフラ構築\n・動作検証・性能検証

【Python/SQL】開発・保守および運用に関する支援業務(基本リモート)

・データ加工のバッチ開発/運用（データ設計、ETL処理の開発） ・カテゴリ付与などのデータ加工の検討/実装など

【RHEL/Windows】スマートデータレイク基盤の導入 | のエンジニア求人・案件 システムエンジニア・プログラマー / Windows系エンジニア / インフラ・ネットワークエンジニア / サーバエンジニア

・クライアントプロジェクト「情報系システム統廃合フェーズ２」における分析基盤の更改およびスマートデータレイク基盤の導入がPJの目的 ・①分析基盤(SAS): SASサーバとなるWindowsサーバのNW・OS等の設計、設定、認証、監視、運用設計、HULFT連携の移行作業などを担当 ・いずれのサーバもストレージ・NASとしてDELL PowerScale(旧EMC Isilon)を利用 ・基本的なラックへの設置・結線作業、OSプリインストール等はサーバベンダーにて実施 ・②データレイク(Cloudera): Cloudera CDP(Hadoop)を動作させるRHELのNW・OS設計、設定、認証、監視、Clouder...

【Java/Spring/フルリモート】大規模ECサイトの新規開発・保守

大規模な総合ECサイトにおいて、機能追加を含む新規開発および既存機能の保守運用を担当いただきます。 要件定義から設計・実装・テスト・リリース後の運用まで一貫して関わるポジションで、チームをリードしながら品質とスピードの両立を図っていただきます。 主な環境／技術: - 言語: Java、Objective-C、C# - フレームワーク: Spring（Spring Boot想定） - インフラ: 各種クラウド環境（AWS/GCP/Azureのいずれか） - ビッグデータ関連技術: 分散処理/ストリーミング基盤等（例: Hadoop/Spark/Kafka など） 体制: 複数チーム体制のうち、数名規模のサブチームをリードいた...

【SE】会計処理システムリプレイスの求人・案件

社内会計処理システムのリプレイス案件にご参画していただきます。\n既存システムのアーキテクチャを見直し、バッチ処理にApache\nFlinkやHadoopを適用したPoCを実施します。\n中核となるバッチ処理の一部機能をFlink、Hadoopにて実装・移行し、動作担保・\n性能検証を行い、リプレイスの規模感や要件整理の基盤とします。\n\n主に下記作業をご担当いただきます。\n・既存機能の把握\n・一部機能の実装（Flinkの適用）\n・実装を動作させるためのインフラ構築\n・動作検証、性能検証\n\n最寄り駅：虎ノ門駅・竹芝駅・天王洲アイル駅

【フルリモート/CI/CD】ヘルステック企業での患者向けコンテンツ配信基盤エンジニア

既存プロダクトと連携し、患者向けコンテンツ配信基盤の役割を担うPEHubと呼ばれるプロダクトの開発を担当頂きます。 ・プロダクトマネージャとの仕様策定 ・各種AWSサービスをフル活用したアーキテクチャ設計 ・社内プロダクトや社内サービスとのシステム連携 ・他プロダクトチームとシステム仕様・アーキテクチャのすり合わせ ・設計したシステムの実装と運用 ・各種インフラ運用の自動化、CI/CDの強化

【Java／SQL】【SE】申込管理システム開発支援の求人・案件

申込管理システム開発支援にご参画していただきます。\n通信キャリア向け、代理店手数料計算システムの開発・保守案件となります。\n要件定義～リリースまでの上流工程\n（要件整理、調整、QA対応、テスト確認、リリース対応）をご担当していただきます。\n\n■工程：要件定義、基本設計、総合試験、リリース対応、顧客／ニアショア調整\n\n最寄り駅：天王洲アイル駅

【ApachFlink/Hadoop】会計処理システムのリプレイス案件

社内システムのリプレイス（会計処理システム）案件にご参画いただきます。 既存システムのリプレイス、アーキテクチャから見直していただきます。 リプレイスに先立ち、コアとなるバッチ処理の一部機能をApache Flink、Hadoopを適用して一部移行(実装)し、 既存システム全体のFlink、Hadoopに置き換えた際の動作担保、性能検証を行います。 そのうえで、リプレースの規模感や、要件整理のためのPoCとします。 バッチ処理で、ApachFlinkやHadoopDBを使用することを検討しており、 アーキテクチャ設計や検討（Poc）可能な要員を募集しています。 ＜想定作業＞ ・既存機能の把握 ・ 一部機能の実...

【PHP】【SE】マルチデバイスマネージメント(MDM)システム開発対応の求人・案件

マルチデバイスマネージメント(MDM)システム開発対応業務にご参画していただきます。\n現行システムの機能追加、改修を行っていただきます。\n\n【環 境】\nOS:RedHat6.4 DB:MySQL5.6\n言語:PHP5.4 FW:Zend1.12.3 Web:Apache\n監視:Zabbix 分析:Splunk 負荷分散:Hadoop

【ApachFlink/Hadoop】会計処理システム更改のアーキテクチャ見直しPJのエンジニア求人・案件 システムエンジニア・プログラマー / インフラ・ネットワークエンジニア

・大手通信業務向け会計処理システム更改に伴うアーキテクチャ見直し支援 ・顧客社内システムのリプレイスに合わせて、アーキテクチャの見直しから実施 ・バッチ処理で、ApachFlinkやHadoopDBを使用することを検討している ・リプレイスに先立ち、コアとなるバッチ処理の一部機能をApache Flink、Hadoopを適用して一部移行 ・その後、既存システム全体のリプレースの規模感や、要件整理のためのPoCを行う

【Python】法律業界のDX推進プロダクトの機能開発支援(フルリモート)

既存機能の改善、および新機能開発をお任せします。 具体的には、下記のような業務に携わっていただきます。 ・自社開発AIプロダクトにおける機械学習モデルや機械学習を活用したシステムの設計・開発・評価・改善 L OpenSearchやVector Searchなどの技術を用いた検索精度の向上、速度改善 L 仮説立案、実験計画、効果測定、改善サイクルの推進 ・新規AIプロダクトのプロトタイプ開発および検証 ・最新の機械学習/自然言語処理/検索技術に関する調査・研究、論文実装、知見の共有 ・「そもそも何を評価するべきか」といった問いを立て、主体的に課題解決をリード ・開発プロセス全体の効率化、自動化の推進 ■募集背景 当該企業...

【フルリモート/Python/AWS】製薬業界向けサービスを展開する事業会社でのアプリケーションエンジニア募集

薬局経営を支援する薬局ダッシュボードの画面・機能開発する責務を担っていただきます。 ■開発環境 ・React、Next ・TypeScript ・AWS(Cognito、Amplify、API Gateway、Lambda、RDS、S3) ・Python ・その他(GitHub、Datadog、Google Analytics、GTM、KARTE)

【Python/AWS/西新宿/一部リモート】大手デジタルマーケ企業・営業支援プラットフォームのバックエンド開発

大手デジタルマーケティング企業が提供する営業支援プラットフォームのバックエンド開発プロジェクトに参画いただきます。 開発チームの一員として、要件定義・設計から実装・テスト・運用保守まで幅広く担当していただきます。 ステークホルダーとの要件調整、設計・実装方針の策定、コードレビューや品質管理、インフラ設計やパフォーマンスチューニングなど、開発全般に主体的に関わっていただくポジションです。 新規プロダクトの立ち上げや既存サービスの拡張開発、デリバリー対応、障害対応も含みます。 現場はMac中心で、Python3を主軸とした開発環境となっています。週3日出社＋週2日リモートのハイブリッド勤務です。 募集背景 事業拡大および...

【Java】【SE】某キャリア向け料金システムの日本移管及びエンハンス対応の求人・案件

某キャリア向け料金システムにおける\nオフショア体制（50名程度）の日本への移管業務に携わっていただきます。\n現体制メンバーとともにエンハンス案件を実施予定です。\n\n■以下参考情報：\nMQ：Apache Kafka、APサーバ:JBoss EAP、DB:RocksDB\n高速分散処理（1日に10億単位のレコード、\n60台*40Thread*7InstanceRocksDB）：\nApache Spring、Apache Hadoop