AI Quality Evaluation Engineer

ウーブン・バイ・トヨタについてウーブン・バイ・トヨタは、トヨタの100年に一度のモビリティ・カンパニーへの変革に寄与していきます。「自分以外の誰かのために」発明を続けたという歴史からインスピレーションを受けた私たちのミッションーそれは、モビリティの定義を拡げ、そしてモビリティが社会に貢献する方法を拡張し、人を想うイノベーションで、モビリティの常識に挑み続けることです。
私たちは4つの柱を中心に活動しています：自動運転・先進運転支援システム技術のAD/ADAS、SDV（ソフトウェア定義車両）のための車両ソフトウェア生産プラットフォームであるArene、モビリティのテストコースであるWoven City、そして協業基盤を支えるデジタル・インフラストラクチャのCloud & AIです。また、ビジネスに不可欠な機能がこれらのチームの実装を下支えし、一丸となって「事故ゼロ社会」と「幸せの量産」の実現に向けて取り組んでいます。
=========================================================================

チームについて

トヨタはモビリティの意味を再定義します。ヒト、モノ、情報、そしてエネルギーを動かし、モビリティの常識に挑み続けます。Woven Cityでは、このような様々なモビリティを生み出し、試すテストコースとして、ヒト中心の街・実証実験の街・未完成の街をコンセプトに、幸せの量産を目指します。
Woven Cityには未来のモビリティへの想いを共有する多様な仲間が集まります。Inventors（インベンターズ／発明家）、住民、ビジターは、ヒト・モビリティ・社会インフラが連携する街の形をしたテストコースで、生活をしながら様々なプロダクトやサービスを実証します。   Woven Cityに関する詳細は、以下をご覧ください：
https://www.woven-city.global/jpn/

求める人材

AIプロダクトにおける最初の専任QAエンジニアとして、LLMを用いたプロダクトの不確実性や非決定性を前提に、品質を検査するだけでなく仕組みとして成立させることに関心のある方を求めています。   本ポジションでは、単発のテスト実施にとどまらず、ユーザフィードバックや評価結果を継続的に品質改善へつなげるための評価フローの標準化・自動化を重要なミッションとしています。そのため、プロダクト開発チームだけでなく、MLOPS／データエンジニアと密に連携しながら、QAの観点を持ち込んでフィードバックループ全体を再設計・実装・運用していただきます。特に、実ユーザからのフィードバックが十分でない状況においても、QA主導で品質改善が回る最初のフィードバックループを担うことを期待しています。   このポジションのレポートラインはファンクションのリーダーとなり、勤務形態はハイブリッドです。また、月数回のウーブンシティへの出張があります。

業務内容

• AIプロダクトにおける品質の整理（正確性、一貫性、安全性、公平性、UXなど）
• シナリオテスト、探索的テスト、レッドチーミングの実施
• LLM出力の傾向分析および失敗パターンの特定
• ユーザフィードバック（ログ、評価、問い合わせ等）を活用した品質評価の設計
• 評価プロセスの標準化・再利用可能な形での整理
• 可能な範囲での品質評価フローの自動化
• 評価データの収集・集計
• 定常的な品質チェックの仕組み化
• 開発／MLOPS／データエンジニアと連携したフィードバックループの構築・運用
• 品質課題やリスクのドキュメント化およびチームへの共有

必須条件

• LLMを用いたプロダクトのQA／テストの３年以上の実務経験
• テスト設計（観点整理、テストケース作成）の経験
• 曖昧な仕様や正解が一意でない対象に対して、判断軸を立てて評価できる能力
• テストや評価プロセスの自動化経験
• 開発チームと協働しながら品質改善を進めた経験
• ビジネスレベルの英語力と日本語力

歓迎条件

• シナリオテスト、レッドチーミングの実践経験
• ユーザフィードバックやログを用いた評価・分析の経験
• 自ら課題を見つけて手を動かせる姿勢
• 特に日本語における、自然言語処理に関する基礎的な理解 =========================================================================注意事項・通常、すべての面接はGoogle Meetで実施いたします。・現在募集中の求人票は英語版と日本語版の両方で掲載しております。つきましては、いずれか一方のみにご応募いただきますようお願い申し上げます。・ご応募の際には、できるだけ英文レジュメのご提出をお願いしておりますが、何らかの理由で日本語職務経歴書をご提出いただいた場合、ポジションによっては選考過程で英文レジュメの提出をお願いすることがございますので、あらかじめご了承ください。
  待遇・福利厚生・経験に基づく業界水準に見合った給与・勤務時間 ：フレキシブルな勤務時間・年次有給休暇：年間20日（初年度は入社月により日数が異なる）・私傷病休暇：年間6日（初年度は入社月により日数が異なる）・休日：土日、祝日、その他当社が定めた日・社会保険：健康保険、厚生年金保険、労災保険、雇用保険、介護保険・住宅手当・退職金制度・レンタカーサポート・社内研修制度（ソフトウェア学習・語学学習）
  私たちのコミットメント・当社は機会均等な雇用を実現し、多様性を尊重しています。・お預かりした個人情報は、採用および入社手続きにのみ使用いたします。詳細については、個人情報規約をご覧ください。