現役QAエンジニアがAI回答精度を診断します

■ こんなお悩みありませんか？ ・AIチャットボットを導入したけれど、たまに変な回答をする ・お客様対応にAIを使っているが、精度が合っているか自分では判断しづらい ・「AIの出力を信用しきっていいのか」漠然と不安がある ■ ご提供できること 現役QAエンジニアとして、開発現場で不具合を見つける仕事をしてきた目線で、 お客様が運用中のAIチャットボットの回答ログ・想定シナリオをレビューします。 具体的には： ・誤回答／事実と異なる回答（ハルシネーション）のチェック ・回答のブレ（同じ質問への答えが毎回違う、など）の確認 ・危険な回答（断定しすぎる、業務範囲外の約束をしてしまう等）の洗い出し ・見つけた問題を「優先度つきのリスト」として整理 ■ 納品物 ・診断レポート（現状評価＋改善提案リストのドキュメント） ※ 診断後、改善の実装まで対応をご希望の場合は、別途ご相談ください（実装込みのパッケージメニューもご用意可能です） ■ 進め方 1. ヒアリング（どんなチャットボットか、確認したい範囲をお伺いします） 2. 回答ログ・シナリオの共有をお願いします（直接チャットボットにアクセスしての検証をご希望の場合は、内容に応じて個別にご相談ください） 3. QA視点でのレビュー・検証 4. 診断レポートを納品 ■ 対応可能時間について 平日は在宅勤務日の定時後、土日は予定のない日を中心に対応しております。 本業と並行しての対応となるため、営業時間内での即時対応が難しい場合がございます。 やり取りのペースや納期は事前にすり合わせさせていただきますので、ご安心のうえご依頼ください。 ■ こんな方におすすめ ・AIチャットボットを導入していて「一度、専門家の目でチェックしてほしい」方 ・Dify等でチャットボットを作ったが、リリース前に精度を確認したい方 ・継続的な品質改善（月次サポート）の前段階として、まず現状を知りたい方 ■ 私について 現役QAとして、要因分析・結合テストのレビュー・受入テストの設計と実施・ テスト自動化を担当しています。 あわせてDifyを使ったAIチャットボットの設計・構築についても独学で学んでおり、「QAの目線」と「AIチャットボット構築の知識」の両方から診断できるのが強みです。 ご不明点はお気軽にメッセージください。