AI 品質評価エンジニア・AI 製品開発

Team: Social Infrastructures & Platforms

Location: 東京都中央区

Commitment: 正社員

Workplace Type: hybrid

チームについて

トヨタはモビリティの意味を再定義します。ヒト、モノ、情報、そしてエネルギーを動かし、モビリティの常識に挑み続けます。Woven Cityでは、このような様々なモビリティを生み出し、試すテストコースとして、ヒト中心の街・実証実験の街・未完成の街をコンセプトに、幸せの量産を目指します。

Woven Cityには未来のモビリティへの想いを共有する多様な仲間が集まります。Inventors（インベンターズ／発明家）、住民、ビジターは、ヒト・モビリティ・社会インフラが連携する街の形をしたテストコースで、生活をしながら様々なプロダクトやサービスを実証します。
 
Woven Cityに関する詳細は、以下をご覧ください：
https://www.woven-city.global/jpn/

求める人材

AIプロダクトにおける最初の専任QAエンジニアとして、LLMを用いたプロダクトの不確実性や非決定性を前提に、品質を検査するだけでなく仕組みとして成立させることに関心のある方を求めています。
 
本ポジションでは、単発のテスト実施にとどまらず、ユーザフィードバックや評価結果を継続的に品質改善へつなげるための評価フローの標準化・自動化を重要なミッションとしています。そのため、プロダクト開発チームだけでなく、MLOPS／データエンジニアと密に連携しながら、QAの観点を持ち込んでフィードバックループ全体を再設計・実装・運用していただきます。特に、実ユーザからのフィードバックが十分でない状況においても、QA主導で品質改善が回る最初のフィードバックループを担うことを期待しています。
 
このポジションのレポートラインはファンクションのリーダーとなり、勤務形態はハイブリッドです。また、月数回のウーブンシティへの出張があります。

業務内容

• AIプロダクトにおける品質の整理（正確性、一貫性、安全性、公平性、UXなど）
• シナリオテスト、探索的テスト、レッドチーミングの実施
• LLM出力の傾向分析および失敗パターンの特定
• ユーザフィードバック（ログ、評価、問い合わせ等）を活用した品質評価の設計
• 評価プロセスの標準化・再利用可能な形での整理
• 可能な範囲での品質評価フローの自動化
• 評価データの収集・集計
• 定常的な品質チェックの仕組み化
• 開発／MLOPS／データエンジニアと連携したフィードバックループの構築・運用
• 品質課題やリスクのドキュメント化およびチームへの共有

必須条件

• LLMを用いたプロダクトのQA／テストの３年以上の実務経験
• テスト設計（観点整理、テストケース作成）の経験
• 曖昧な仕様や正解が一意でない対象に対して、判断軸を立てて評価できる能力
• テストや評価プロセスの自動化経験
• 開発チームと協働しながら品質改善を進めた経験
• ビジネスレベルの英語力と日本語力

歓迎条件

• シナリオテスト、レッドチーミングの実践経験
• ユーザフィードバックやログを用いた評価・分析の経験
• 自ら課題を見つけて手を動かせる姿勢
• 特に日本語における、自然言語処理に関する基礎的な理解