AI Agent Evaluation Lead
| 想定年収 | ~ 1,000万円程度 ( 30~ 39才 ) |
|---|---|
| 職務内容 |
<主な業務>プロダクト横断で、全社のAI精度評価の基準・プロセスを整備していきます。 ■プロンプト・設定の最適化「AIが賢く、期待通りの回答をすること」を追求します。 全社共通の評価フレームワークを構築し、各プロダクトに適用します。 ・評価基準の策定・プロンプトエンジニアリング・評価データセットの構築■品質保証プロセスの構築開発ライフサイクル全体におけるAI品質保証の「仕組み」と「ロードマップ」を策定し、各プロダクトチームへ展開します。 ・シフトレフト/シフトライトの実践・フィードバックループの構築・ロードマップ策定■全社横断での標準化推進・評価ガイドラインの策定・ナレッジ共有・評価基盤の整備<ポジションの魅力>・AIエージェント時代に不可欠な、より高度なAI品質評価スキルを実務で身につけられる・特定プロダクトに閉じず、全社横断でAI品質評価の標準化・仕組み化を推進できる・既存の安定稼働プロダクト~新規プロダクトまで幅広く関わり、品質保証の経験領域を広げられる・大きな裁量を持って、評価基準・プロセス設計から運用定着までをリードできる・0→1で仕組みを作り、成果を残すことができる |
|
求めるスキル (必要条件) |
■LLM/RAGの技術的特性への深い理解と実践経験・ChatGPT、Claude等のLLMを業務で活用した経験・RAG(Retrieval-Augmented Generation)の仕組みの理解■評価フレームワークの使用経験・Langfuse、Weights & Biases、MLflow等のツールを用いたAI/LLMの評価・モニタリング経験■データドリブンな改善スキル・データに基づいて課題を特定し、改善提案ができる・定量的な評価指標の設計・運用経験■スタートアップでの0→1フェーズへの意欲・未整備な環境でプロセスを構築することへの前向きな姿勢・変化を楽しみながら柔軟に対応できるマインド/【英語力不問/大卒以上】 |
| 勤務地 | 東京都 中央区 |
企業情報
テックタッチは、Webシステム上に操作ガイドをあと乗せするデジタルアダプションプラットフォーム「テックタッチ」を中核に、業務画面から生成AIを活用できる「Techtouch AI Hub」、顧客や従業員の声などのテキストデータを意思決定の示唆に変えるデータ戦略AIエージェント「AI Central Voice」を展開する企業です。
※「想定年収」については、当社独自のリサーチによるものでオファー金額をお約束するものではございません。当該企業の採用プロセス時には改めてのご確認をお願いいたします。
同じ職種の求人 この求人を見た人は、こちらも見ています
条件を変えて他の求人を探す
求人エントリー後の流れ
担当コンサルタントがご入力情報を拝見し、マッチングさせていただきます。
ご本人のご承諾がないまま、企業への推薦に進むようなことはございませんのでご安心ください。
クライス&カンパニーの求人情報は70%が非公開です。
現在、似た条件の非公開求人情報が
127件
あります。
ご興味をお持ちの方はこちらからご登録ください。