【R＆D-022】Data Engineer

職種

AI・データマイニング

勤務地

東京都

年収

600万～1,000万円

仕事内容

次世代ロボティクス向け基盤モデルを支えるデータ基盤の中核を担い、大規模データパイプラインの設計および開発に携わっていただきます。

・ロボティクス基盤モデル向け高品質データの収集、処理、キュレーション、公開までを含む大規模データパイプラインの設計および実装
・データスキーマ、ストレージ基盤、クエリインターフェースの設計および運用
・VLA研究者と連携し、データ要件の整理および継続的なパイプライン改善
・RGB、Depth、点群などを含むペタバイト規模のマルチモーダルデータ処理基盤の設計およびスケーリング
・データリネージや再現性を担保した分散処理パイプラインの構築
・データ品質指標の定義および品質改善のためのフィードバックループ構築

○本ポジションの魅力
本プロジェクトは、これまでにない規模でデータ収集と基盤モデル開発を同時に進める取り組みです。NEDOから約205億円の支援を受けた、日本を代表する国家プロジェクトの一つです。
プロジェクトの成功に直結する重要な役割を担い、大きな裁量と責任を持って開発に取り組むことができます。社会に大きなインパクトを与える経験が得られる環境です。
また、論文発表や学会活動などを通じて、エンジニアとしてのキャリア形成を積極的に進めることができます。

※雇用形態：1年の有期雇用形態となりますが、基本的に毎年更新を想定しています。詳しくは面接でご確認お願い致します）

＜参考URL＞
◇AIロボット協会の公式サイトです。ミッションや活動内容、AI×ロボットの全体像を理解できます。
https://www.airoa.org/ja

◇協会の設立背景やビジョンを紹介しています。社会実装に向けた方向性を把握できます。
https://www.airoa.org/ja/about

◇設立時のプレスリリースです。事業目的や取り組み内容を整理して理解できます。
https://prtimes.jp/main/html/rd/p/000000001.000158322.html

◇最新ニュース一覧です。プロジェクト進捗や取り組みの最新動向を確認できます。
https://www.airoa.org/ja/news

◇AIロボット協会の活動全体を俯瞰できる外部記事です。業界における位置づけや意義を理解できます。
https://pc.watch.impress.co.jp/docs/news/2001880.html

応募条件

・コンピュータサイエンス、工学、または関連分野の修士号、もしくは同等の実務経験
・データエンジニアリングまたはデータ基盤開発の実務経験5年以上
・本番環境での分散データシステムの構築および運用経験
ETLおよび分散データ処理
・Spark、Flink、Rayなどを用いた大規模ETLまたはELTパイプラインの設計、運用経験3年以上
・Airflow、Kedro、Dagsterなどのワークフロー管理ツールの利用経験
・10TB以上のデータ処理ワークロードの最適化経験
データ基盤およびストレージ設計
・Delta Lake、Apache Iceberg、Hudiなどを用いた設計または導入経験
・Trino、Athena、Databricks SQL、Glue、Unity Catalogなどとの連携経験
・スキーマ進化、ACID特性、パーティショニング設計、タイムトラベル、コスト最適化の知識
・メタデータ管理、データリネージ、カタログ運用の経験
・BigQueryなどを用いた同等のデータウェアハウス経験も可
データモデリングおよび品質管理
・dbtなどを用いたデータレイヤー設計（bronze、silver、goldなど）の経験
・データ品質に関するSLA（鮮度、完全性、正確性）の定義および運用経験
・Great Expectations、DataHub、OpenMetadata、Monte Carloなどの利用経験
・スキーマバージョニング、監査ログ、データリネージの実装経験
・データアクセス制御およびカタログ設計の経験
ビジネス理解
・プロダクト、分析、AIチームと連携したデータ基盤設計の経験
・コスト削減やパフォーマンス改善などの定量的な成果実績
・アーキテクチャ設計がビジネス価値に与える影響を説明できる能力
・英語力（ビジネスレベル歓迎、日本語力があれば尚可）

【歓迎スキル】
・テラバイトからペタバイト規模のデータ処理経験
・Apache IcebergやDelta Lakeなどのデータレイク技術の高度な知識
・TrinoなどのクエリエンジンやNessieなどのカタログシステムの知識
・Spark、Flink、Rayなど分散処理技術の高度な知識
・Airflow、Kedro、Dagsterなどのワークフロー管理ツールの実務経験
・データ品質の分析、監視、改善の経験

休日休暇

土日祝日・完全週休2日制・慶弔休暇・年末年始休暇・夏季休暇・有給休暇

年間休日数

105日

就業時間

09:00～18:00

企業概要

＜協会設立の背景と創業の経緯＞
一般社団法人AIロボット協会（AI Robot Association、略称AIRoA）は、AIとロボット技術を統合し、汎用ロボット（フィジカルAI）の実現を目指すことを目的として、2024年12月に設立された非営利団体です。
近年、生成AIや大規模基盤モデルの進展により、言語や画像の分野では飛躍的な技術革新が起きています。一方で、ロボット分野においては、実世界での動作データが十分に共有されておらず、学習データの分断が技術進化の大きな障壁となってきました。企業や研究機関ごとにロボットデータが閉じた環境で管理され、再利用やスケールが難しいことが、汎用ロボットの実現を妨げてきたのです。
こうした課題を解決するため、早稲田大学や東京大学をはじめとするアカデミアの研究者と、日本を代表する製造業、IT企業、ロボティクス企業が連携し、産業の垣根を越えてデータと知見を共有する中立的なプラットフォームとしてAIRoAが誕生しました。

＜AIRoAのミッションと事業の中核＞
AIRoAの中核事業は、「ロボットデータエコシステム」の構築です。これは、複数の企業や大学が協力し、ロボットの実稼働によって得られる大規模データを収集、整備、共有し、それを基盤としてロボット用の基盤モデルを開発、公開する取り組みです。
具体的には、以下の事業を展開しています。
◇ロボット実環境データの大規模収集と管理
実際に稼働するロボットを用いて、行動、視覚、環境、操作ログなどのデータを長期間にわたり収集し、研究開発に利用可能な形で蓄積、管理しています。
◇ロボット基盤モデルおよび個別モデルの研究開発
収集したデータをもとに、視覚、言語、行動を統合的に扱うロボット基盤モデルの研究開発を推進しています。特定用途に限定されない汎用性の高いロボットAIの実現を目指しています。
◇オープンなデータおよびモデルの公開
開発したデータセットやモデルは、国内外の研究者や開発者が利用できる形で公開し、世界規模での技術発展を促進します。
◇国産汎用ロボット開発コンペティションの企画運営
ロボット基盤モデルの開発を加速するため、国際学会と連携したコンペティションやデモイベントを開催し、実証と評価の場を提供しています。

＜運営体制＞
AIRoAの理事長は、早稲田大学 理工学術院 基幹理工学部 教授の尾形哲也氏です。尾形氏は、発達ロボティクスや認知発達モデルの分野で長年研究を行い、日本のAIロボティクス研究を牽引してきた研究者です。
理事には、東京大学、京都大学をはじめとする主要大学の教授陣や、ロボティクス・AI分野の第一線で活躍する研究者、企業技術者が参画し、産学官連携による強固な運営体制を構築しています。

・尾形 哲也（理事長）：早稲田大学教授。産総研特定フェローやNII客員教授も務め、AI×ロボットの基盤モデル研究を牽引。
・松尾 豊（理事）：東京大学大学院教授。人工知能・経営戦略分野の第一人者で、日本ディープラーニング協会理事長も兼任。
・谷口 忠大（理事）：京都大学大学院教授。認知発達ロボティクス研究の専門家で、立命館大学客員教授も務める。
・牛久 祥孝（理事）：NexaScience代表取締役。オムロン サイニックエックスのリサーチVPとして産業×AI研究を推進。
・佐野 元紀（理事）：テレイグジスタンス共同創業者CTO。遠隔操作ロボットとAI活用の実装をリードする技術責任者。
・尾藤 浩司（理事）：トヨタ自動車 未来創生センター研究リーダー。先端ロボティクス研究と産業応用を担当。
・乃木 愛里子（理事）：松尾研究所所属。産業課題とAI技術をつなぐ戦略・事業推進に従事。
・岡田 陽介（理事）：ABEJA代表取締役CEO。AI企業経営者として産業界の視点から協会活動に参画。

＜会員企業および協力企業（抜粋）＞
◎正会員：株式会社ABEJA、GMOインターネットグループ株式会社、KDDI株式会社、SB Intuitions株式会社、Telexistence株式会社、トヨタ自動車株式会社 未来創生センター、日本電気株式会社、富士通株式会社、さくらインターネット株式会社、株式会社松尾研究所、三菱電機株式会社、日産自動車株式会社、株式会社PKSHA Technology、川田テクノロジーズ株式会社、株式会社ハイレゾ、株式会社デンソー、株式会社日立製作所、PwCコンサルティング合同会社、セイコーエプソン株式会社、NTTドコモビジネス株式会社、SCSK株式会社、クアルコムジャパン合同会社、パナソニックホールディングス株式会社

〇育成会員：株式会社Algomatic、コネクテッドロボティクス株式会社、株式会社Jizai、株式会社Preferred Robotics、東京ロボティクス株式会社、ugo株式会社、FastLabel株式会社、株式会社APTO、株式会社クフウシヤ、オムロンサイニックエックス株式会社、株式会社XNOVA、株式会社Insight Edge

●賛助会員：株式会社いすゞ中央研究所

◆有識者会員：
・尾形哲也：早稲田大学教授。ロボティクスや認知発達、記号創発の研究で知られる研究者。
・松尾豊：東京大学教授。人工知能・深層学習の研究と産業応用を牽引する第一人者。
・谷口忠大：立命館大学教授。記号創発やロボットの言語獲得など知能システムを研究。
・牛久祥孝：オムロンサイニックエックス研究員。画像認識や深層学習の研究開発に従事。

従業員数

20人