マルチモーダル対話エージェント”Saya”の開発に携わっていただきます。 【具体的な業務】 ・LLMやマルチモーダルLLMのプロンプトエンジニアリング ・対話エージェントの応答速度を高速化するための言語モデル開発 ・対話エージェントの新機能開発 【プロダクト一例】 ▼クライアントとの開発例 『マルチモーダルエージェント “Sayaˮ 』 ルールベース 応答検索‧⾳声認識‧⾳声合成と会話内容と合わせ、リップシンクなどに必要な⾃動⾏動⽣成のアルゴリズムを組み合わせた対話型のシステム。 ▼⾃社開発プロダクト 『 Phonoscape 』 ⾳声区間検出や空間⾳響解析などの⾳声処理技術を活⽤し、対⾯接客の現場⾳声を ⾃動録⾳し⾳声認識やテキスト分析に繋げてリアルデータを分析するAIマイクシステム 【募集背景】 当社は株式会社アイシンとの協業でマルチモーダル対話エージェント”Saya”の開発に取り組んでおります。 Sayaが様々な現場で実際に運用される中で、運用環境に応じた課題や新たな機能の必要性が明らかになっております。 より多くの環境で人々とインタラクションできる対話エージェントの実現のために、LLMや機械学習の知見を活かし、自律的に技術的な課題を発見し、成果創出まで遂行できる方を採用したいと考えております。 【他社にはないこの仕事の魅力・得られる経験】 ・実際にオフィスやイベント会場で稼働する対話エージェントを開発する経験 ・LLMや音声認識、画像認識を組み合わせたシステムを開発する経験 ・急成長していく組織に身をおくことで得られる経験・成長機会 【チームのミッション】 経験やスキルを活かすとともに新たに学び、自社やクライアントの課題を解決する機械学習を中心とした情報技術の開発を行い、世に出して価値創造を導く 【所属】 技術開発本部AI開発部 15名（パートタイマー1名、内出向3名） 【開発言語】 言語：C++、Python フレームワーク：PyTorch 【開発環境】 PC、Jetson 機械学習モデル開発についてはサーバ、ABCIを活用 ソースコード管理：GitHub 情報共有ツール：Slack・Google Workspace・Notion その他：Docker・Linux 【事業内容】 Ideinは「ソフトウェア化された世界を創る」というビジョンのもと、エッジAIを活用し、サイバー世界に閉じない実世界のリアルタイムビッグデータを計測・認識し、フィードバックすることによる価値創造のために、基盤・応用・研究開発の3本立ての事業を展開しています。 ■ 基盤 大量のエッジAIデバイスを安全かつ効率的に遠隔運用できるプラットフォームを狙うActcastを開発・運営し、国内大手製造業との連携も進めています。 ■ 応用 AIカメラやAIマイクなど、顧客課題に直接向き合い価値を届けるソリューションの提供で、ファミリーマートやKDDIなどとの事業共創を展開したり、Phonoscapeという自社プロダクトの開発・提供をしています。 ■ 研究開発 実世界に対し、そこで生まれる画像、音声、その他様々なデータを認識し、働きかける技術開発を実施し、未来の可能性を拓く取り組みです。 それぞれをバラバラではなく三位一体で推進しており、Deep Learning推論を高速化するコンパイラ技術と、大規模エッジAI運用基盤を併せ持つことが強みです。 ぜひ一緒に「最新の技術を誰もが手軽に使える未来」を創りましょう！ 【企業のミッション】 「実世界のあらゆる情報をソフトウェアで扱えるようにする」 【Ideinの強み】 ・Deep Learningモデルの推論を高速化する独自のコンパイラ技術を保有すること ・モデル設計や最適化において、計算機リソースを考慮した開発に関する知見を有しており、競争力が高いこと ・独自の技術力を活かした事業展開を進められていること （次世代自動車における、外界の認識やモーションプランニング等のアルゴリズムの研究開発など） ・様々な領域での AI を用いた事業開発実績がある 【受賞一例】 ・英Arm社「AI Partner」選出（2020） ・米NVIDIA社「Inception Program Partner」選出（2019） ・Forbes「日本のスタートアップ200」選出（2019） ・日本経済新聞社「NEXTユニコーン企業」選出（2019） ・経済産業省「J-Startup」選出（2018）

・理工系分野の修士号もしくはそれと同等の経験 　※同等の経験：理工系分野での研究発表ご経験をお持ちの方は学士号でも対象となります ・機械学習における、画像・音声・自然言語などいずれか1つ以上の実世界のデータを処理する技術を開発した経験 ・PythonまたはC/C++を使った開発経験 ・日本語ネイティブまたはビジネス上級レベルの日本語力を有すること

・理工系分野の博士号 ・社外連携が必要なプロジェクトへの従事経験 ・プロジェクトマネジメントの経験 ・コードレビュー、タスク管理などを含むチーム開発の経験 ・LLMをコンポーネントとするシステム開発の経験 ・Raspberry Pi、Jetsonなどエッジデバイス向けアプリケーションの開発経験 ・GitHub Actionsなどを用いたCI/CD構築経験 ・Dockerなどのコンテナ仮想化技術を用いた開発環境での経験 ・APIサーバの設計・開発経験 ・MMDAgentなどを用いた対話エージェントの開発経験 ・プロセス間通信やWeb APIを行うシステムの開発経験 ・機械学習技術を実世界に適用した経験

【求める人物像】 ・背景調査、課題発見、手法選定、検証実験、成果実装まで一貫して主体的に取り組める方 ・手を動かす前にゴールから逆算して計画を立案できる方 ・好奇心が強く、これまで取り組んだことのない領域でも新しいことを学びながら楽しめる方 ・情報共有や合意形成のためのツールとして、情報を過不足なく文書にまとめられる方 ・プロフェッショナルなコミュニケーションを社内においても対社外でも取れる方 ・IdeinのValuesを体現できる方 【Ideinが掲げるValues】 『　dots (performance) & circle (imagination)　』 dots (●)：大きな成功のために、多くの失敗を高速で刻む circle (○)：個人の行動は、常にチームの価値にできる ●の連続が、刻まれる日々のパフォーマンスを表し、それが集積してイマジネーションの○を形成しています。 ※詳細 https://speakerdeck.com/ideininc/ideinhui-she-shao-jie-zi-liao-ji-ji-cai-yong-zhong-92ca9fe9-009f-4795-93a8-8d61d9126536?slide=9&hsCtaTracking=eb0cd67d-1745-4648-995d-dc935c70a294%7C3b7c7f4f-494c-43eb-8aba-c119cbf07973