Sparkの求人・案件一覧

フロントエンドエンジニア

• JavaScript
• Python
• Go
• Spark
• AWS
• Vue.js

• ・Pythonを用いた開発経験3年以上
• ・フロントエンドの開発経験2年以上

サーバーサイドエンジニア

• Python
• JSON
• Spark
• Apache

• ・Pythonを用いた開発経験3年以上

データサイエンティスト / サーバーエンジニア / データベースエンジニア / クラウドエンジニア

• Spark
• AWS
• Apache

• ・オンプレミスの構築経験
• ・Hadoop環境での実務経験

データベースエンジニア / データエンジニア

• C++
• Java
• Python
• SQL
• Scala
• Spark
• AWS
• Microsoft Azure

• ・ビジネスレベルの英語リーディング、ライティングスキル
• ・自動データパイプラインおよびETLワークフローを設計経験
• ・クラウドプロバイダー用いたクラウドベースのソリューション開発経験
• ・リレーショナルデータベースに関する知識
• ・SQLまたはNoSQLデータベースに関する知識
• ・Hadoop、Spark、Kafkaに関するビッグデータツールに関する知識
• ・データとプロセスの根本原因分析経験

サーバーサイドエンジニア

• Python
• Spark
• AWS

• ・AWSの構築経験
• ・設計書を読み解きSQLのデータ移行経験
• ・webアプリの開発経験5年以上

データエンジニア

• C++
• Java
• Python
• Scala
• MySQL
• Redis
• Spark
• Git
• Jenkins

• ・技術ソリューション、アーキテクチャ選定から関わったソフトウェア開発経験5年以上
• ・下記ソフトウェア、ツールの証明可能な経験
• 　-オブジェクト指向およびオブジェクト機能スクリプト言語
• 　-MySQLなどのリレーショナルデータベースおよびRedis,CouchbaseなどのNoSQLデータベース
• 　-CI/CDツール
• ・データ加工、構成、依存など管理のために必要なプロセス構築をした経験
• ・課題に対する強い分析力および定量的な根拠を用いた解決策の検討能力

サーバーサイドエンジニア

• Java
• Python
• Go
• Scala
• MySQL
• Spark
• AWS
• Docker
• Nginx
• IntelliJ IDEA
• Jenkins
• JIRA
• GitHub
• Google Cloud Platform
• Ansible
• BigQuery
• TypeScript
• Vue.js
• Play Framework

• ・Java、Kotlinでの設計、開発経験5年以上
• ・複数PJでのチーム開発経験
• ・Scalaの知見（実務経験無くても学習経験・学習意欲のある方）

アプリケーションエンジニア

• SQL
• Apex
• Android
• Linux
• Hadoop
• Spark
• AWS
• Docker
• Git
• Swift
• GitHub
• Kotlin
• Google Cloud Platform
• Ansible
• BigQuery

• ・Androidアプリの開発、運用経験5年以上
• ・Kotlinを使用した開発、運用経験1年以上
• ・Android Studio、Gradleでの開発、構築、運用経験
• ・Gitを使用したバージョン管理経験
• ・MVP、MVVM、Clean Architecture等での、データ設計から開発運用の経験
• ・FCMを使用したPush Notificationの開発、運用経験
• ・OSSを使った開発、運用経験
• ・Android OS、マテリアルデザインに対する知見

データサイエンティスト / データベースエンジニア / サーバーサイドエンジニア / AI・機械学習エンジニア

• C++
• Python
• SQL
• Spark
• GitHub
• BigQuery
• Hive

• ・下記いづれかを用いた分析経験
• 　-Python、SQL、HiveQL、Spark、BigQueryなど
• ・既に機械学習で実装されたものを更に改善した経験
• ・関係者へヒアリングを行いドキュメント化しPJを推進した経験
• ・稼働中のプロダクトに対してシステム面及びビジネス面の
• 　課題特定及びKPI改善をした経験
• ・オンプレ環境で稼働中のプロダクトに対する1年以上の開発運用経験

データサイエンティスト / データアナリスト

• Python
• SQL
• R言語
• Spark

• ・チームとしてコラボレーションしての統計解析、モデリングの経験
• ・以下のいずれかの言語、ライブラリを用いたモデリング経験
• 　(Python/R/TensorFlow/Theano/Keras/PyTorch/Watson API)

データサイエンティスト / データベースエンジニア / BIエンジニア

• SQL
• Spark
• AWS
• GitHub
• Google Cloud Platform
• Treasure Data

• ・SQLを用いたデータクレンジング知見
• ・データベース(RDB/NoSQL)の設計/運用経験
• ・Hadoop/Spark 等分散処理フレームワークの知見
• ・EmbulkとDigdag 等ワークフローに対する知見

アプリケーションエンジニア

• SQL
• Apex
• Android
• Linux
• Hadoop
• Spark
• AWS
• Docker
• Git
• Swift
• GitHub
• Kotlin
• Google Cloud Platform
• Ansible
• BigQuery

• ・Swiftを使用した開発・運用経験3年以上
• ・Xcodeでの開発、構築、運用経験
• ・Carthage、Cocoapodsでのライブラリ管理経験
• ・Gitを使用したバージョン管理経験
• ・MVP、MVVM、Clean Architecture等での、データ設計から開発、運用の経験
• ・APNsを使用したPush Notificationの開発、運用経験
• ・OSSを使った開発・運用経験

データベースエンジニア / データエンジニア

• Linux
• Spark
• AWS
• Docker

• ・要件に応じて最適なデータベースを選定・構築・運用した経験
• ・開発規模や要件に応じて最適な技術を自ら選定し、検証・導入した経験
• ・AWS、GCP、Azure等のクラウドの構築経験

クラウドエンジニア / データエンジニア

• Spark
• AWS
• Docker
• Git
• Jenkins
• Chef

• ・AWS等のクラウドサービスを活用したインフラ設計、構築、運用の実務経験
• ・Chef、Git、Kubernete、Dockerいずれかの利用経験、またはJenkins等のCI/CD環境の構築経験
• ・ジョブフローの設計、運用経験

データベースエンジニア

• Spark
• Google Cloud Platform
• BigQuery
• Hive

• ・商用システムでのSQL開発経験3年以上

ネットワークエンジニア / セキュリティエンジニア / クラウドエンジニア

• Spark
• Microsoft Azure

• ・下記いずれかの経験
• -公共系案件(大～中規模)における非機能要件の設計/調整経験
• -Hadoop/Spark開発経験
• -クラウド(Azure)環境設計/構築経験(IaaS/PaaS)
• -クラウド環境におけるビッグデータ分析基盤(DWH/BI)設計/構築経験
• -ネットワーク、セキュリティ設計/構築経験
• -性能設計、キャパシティ設計経験
• -ランニング費用逓減の視点での検討経験
• -基盤開発自動化の経験
• -オンプレ(OracleExadata)からクラウド環境へのデータ移

SREエンジニア

• Scala
• Node.js
• Hadoop
• Spark
• AWS
• Hive

• ・Linuxを用いたシステム開発および運用経験
• ・Hadoop等を用いた分散処理経験
• ・Linux上でのコマンドラインを用いた、
• 　トラブルシューティングやデプロイ経験

データエンジニア

• Hadoop
• Spark
• AWS

• ・AWS基本設計の経験
• ・詳細設計の経験
• ・ドキュメント作成の経験

データエンジニア

• MySQL
• Hadoop
• Catalyst
• Spark
• AWS
• Microsoft Azure
• Docker

• ・WindowsサーバおよびLinuxサーバの設計経験5年以上
• ・ミドルウェアの設計経験
• ・方式検討の上流工程経験

ネットワークエンジニア / サーバーエンジニア / データエンジニア

• MySQL
• Hadoop
• Catalyst
• Spark
• AWS
• Microsoft Azure
• Docker

• ・L2/L3スイッチの経験
• ・IPv4の経験
• ・UTMの設計/構築経験

データサイエンティスト / データベースエンジニア / データエンジニア

• Hadoop
• Spark
• AWS

• ・AWS経験 3年以上

データベースエンジニア / データエンジニア

• SQL
• Spark
• Microsoft Azure

• ・システム構築経験
• ・Azure関連の経験
• ・BI、DWHプロジェクトの経験

データエンジニア

• Scala
• Node.js
• Hadoop
• Spark
• AWS
• Hive

• ・HadoopやSparkまたはHiveを利用したビッグデータ処理基盤もしくは、
• 　データ処理パイプラインの構築・運用実務経験
• ・AWS上でのシステム設計や構築、または運用経験
• ・SQLによるデータ加工および抽出の経験
• ・ScalaやPython、もしくはJavaを用いたシステム開発実務経験

プロダクトマネージャー(PdM)

• Scala
• Node.js
• Hadoop
• Spark
• AWS
• Hive

• ・ビッグデータを用いた経験
• ・プロジェクトリーダーやプロジェクトマネージャーとしての実務経験
• ・クライアントとの折衝経験
• ・SQLに関する知見
• ・複数のRDBMSを扱った開発実務経験
• ・プログラミング言語を利用したアプリケーション開発経験
• ・パブリッククラウドを利用した開発経験
• ・分散処理ツール（Hadoop,Hive,Spark等）を用いた開発経験
• ・AWSを用いた開発経験

サーバーエンジニア / データベースエンジニア / データエンジニア

• Java
• Hadoop
• Spark

• ・SparkやHadoopのような分散処理システムの実務経験 2年程度
• ・spark on scalaもしくはspark on pythonを使用した経験

データベースエンジニア / データエンジニア

• Python
• SQL
• Linux
• Spark

• ・SQL開発経験
• ・その他開発言語での開発経験

データサイエンティスト / サーバーエンジニア / データベースエンジニア / データエンジニア

• Java
• Python
• Scala
• Hadoop
• Spark

• ・SparkやHadoopのような分散処理システムの経験 2年程度
• ・spark on scalaもしくは spark on pythonを使用した経験

ネットワークエンジニア / データベースエンジニア / プロジェクトマネージャー(PM) / AI・機械学習エンジニア / データエンジニア

• Python
• SQL
• Shell
• Linux
• Hadoop
• Spark
• AWS
• Docker
• Git
• SVN
• Subversion
• Google Cloud Platform
• Treasure Data

• ・Python、Shell、SQLの業務使用経験
• ・バージョン管理ツール(Git/SVN)業務使用経験
• ・Linux環境における開発/運用経験(LPICレベル1程度以上の知見)
• ・クラウド環境(AWS/GCP)における開発/運用経験
• ・インフラ関連(KVS、ワークフローエンジン、CI、Docker)の業務運用の知見

サーバーサイドエンジニア

• Python
• SQL
• Go
• Scala
• Apex
• Linux
• Hadoop
• Spark
• AWS
• Docker
• Git
• GitHub
• Google Cloud Platform
• Ansible
• BigQuery
• Vue.js
• Play Framework

• ・ScalaもしくはJavaを用いたWEBアプリケーションの開発経験
• ・JVM系言語(Scala or Kotlin or Java)を用いた大規模システム設計経験
• ・Webアプリ開発経験通算3年以上
• ・GCP、AWS上での開発経験3年以上
• ・アジャイル(スクラムベース)での開発経験

データエンジニア

• Python
• Spark
• Redshift
• BigQuery
• Treasure Data

• ・データ分析、統計、人工知能、機械学習、深層学習いずれかの実務経験
• 【下記から1点必須】
• ・PoCから商用化の実務経験
• ・研究開発の実務経験
• ・確率や統計および機械学習の研究経験
• ・データサイエンティストの実務経験
• ・ログ分析によるサービス改善の実務経験
• ・関連分野で調査から要約までの実務経験
• ・ビジネス課題から要件に落とし込んだ実務経験
• ・教師あり学習、教師なし学習、強化学習の実務経験
• ・機械学習モデル構築の実務経験
• ・データサイエンティストや機械学習エンジニアの実務経験

サーバーサイドエンジニア

• Java
• Linux
• MySQL
• Redis
• MongoDB
• Hadoop
• Spark
• Hive
• Spring Boot

• ・Java経験
• ・Spring Framework経験
• ・Linux経験(基本的なコマンドを理解しているレベル)
• ・スキーマ設計、クエリ等、DBに関する一般常識
• ・ソフトウェア開発の基本工程(設計、開発、テスト)の経験と実績
• ・チームの一員としてのプロジェクト推進の経験と実績
• ・英語(リーディング・ライティング)スキル
• 　※要件定義書、および既存設計書全般が英語で作成されております。

サーバーサイドエンジニア

• Java
• Ruby
• Scala
• Spark
• Google Cloud Platform

• ・Javaを用いた開発経験5年以上
• ・Java8を用いた実務開発経験
• ・アドテク系システムの開発経験

データエンジニア

• Python
• Spark
• Redshift
• BigQuery
• Treasure Data

• ・データサイエンティストの実務経験

サーバーサイドエンジニア

• Java
• Linux
• MySQL
• Hadoop
• Spark
• Git
• Jenkins

• ・バッチ等バックエンドシステム開発経験
• ・Javaでの開発経験3年以上
• ・MySQLの利用経験2年以上
• ・Linuxの運用経験3年以上

プロダクトマネージャー(PdM)

• Java
• Python
• Go
• Perl
• Hadoop
• Spark
• Hive

• ・Hadoop、Spark、Kafka、Hiveなどのビッグデータテクノロジを使用した大規模データ且つ、リアルタイムプロセッシングの経験
• ・Java、Python、Go、Bash、Perl等を使用したソフトウェア開発経験5年以上
• ・ソフトウェア開発経験5年以上
• ・要件定義、仕様策定、実装、テスト、リリース、保守運用までの一貫した開発経験

サーバーサイドエンジニア

• Java
• Linux
• MySQL
• Redis
• MongoDB
• Hadoop
• Spark
• Hive
• Spring Boot

• ・Java,Spring Framework経験
• ・Linuxスキル(基本的なコマンドを理解しているレベル)
• ・スキーマ設計、クエリ等、DBに関する一般常識
• ・ソフトウェア開発の基本工程(設計、開発、テスト)の経験と実績
• ・チームの一員としてのプロジェクト推進の経験と実績
• ・英語のリーディング、ライティングスキル
• 　※要件定義書、および既存設計書全般が英語で作成されております。

データサイエンティスト / サーバーサイドエンジニア

• Java
• Scala
• Spark
• JUnit
• AWS

• ・JavaまたはScalaを用いた実装経験
• ・サービス開発の詳細設計～単体テストまでの実務経験
• ・Junit等のテストコード実装経験
• ・下記いずれかの実務経験
• 　-AWS環境下での開発
• 　-AWS環境構築

サーバーエンジニア / サーバーサイドエンジニア

• Java
• JavaScript
• PHP
• Ruby
• Go
• Scala
• Linux
• MySQL
• PostgreSQL
• SQL Server
• Redis
• Cassandra
• Hbase
• Hadoop
• CakePHP
• Spring
• Spark
• Zend Framework
• Tomcat
• Git
• Jenkins
• JIRA
• Memcache
• Laravel
• Redmine
• React
• TypeScript
• Vue.js
• Riot.js

• ・LAMP環境下での開発経験2年以上
• ・大規模サービスの開発経験（負荷を考慮した設計経験等）
• ・オブジェクト志向の概念理解

サーバーサイドエンジニア

• Java
• Linux
• MySQL
• Redis
• MongoDB
• Hadoop
• Spark
• Hive
• Spring Boot

• ・Java、Spring Framework経験
• ・Linux経験(基本的なコマンドを理解しているレベル)
• ・スキーマ設計、クエリ等、DBに関する一般常識
• ・ソフトウェア開発の基本工程(設計、開発、テスト)の経験と実績
• ・チームの一員としてのプロジェクト推進の経験と実績
• ・英語スキル(リーディング、ライティング)
• 　※要件定義書、および既存設計書全般が英語で作成されております。

データベースエンジニア

• Java
• SQL
• Linux
• Unix
• Hadoop
• Spark
• AWS

• ・Linuxでのシステム開発経験
• ・SQLによるデータ集計の経験