お使いのAIツールに、テスト用の質問を投げて、答えの正確さを確かめます。
どんな質問に強く、どこで間違えるのかを、専門知識がなくても読めるレポートにしてお渡しします。
【こんな方におすすめです】
・AIチャットボットやツールを作ったものの、公開して良いか判断がつかない方。
・「たまに変なことを答える」気がするけれど、どこが悪いのか分からない方。
・業者に作ってもらったAIが、ちゃんと動いているか第三者の目で確かめたい方。
【確かめることの例】
・資料に書いてあることを、正しく答えられているか。
・資料にないことを聞かれたとき、作り話をせずに「分かりません」と言えるか。
・言い方を変えた質問にも、同じように答えられるか。
・答えてはいけないこと(社外秘、個人情報など)を話してしまわないか。
【料金について】
・基本料金は、テスト質問50問までの料金です。
・質問は、お預かりした資料やFAQをもとに私が作成いたします。
・51問目からは有料オプションで追加できます。
【進め方】
1. AIの使い道と、もとになっている資料を教えてください。
2. 確かめる観点とテスト質問を作り、内容をご確認いただきます。
3. 質問をAIに投げて、答えを1問ずつ判定します。
4. 結果をレポートにまとめて納品します。
【納品物】
・評価レポート(正答の割合、間違えた質問の一覧、間違え方の傾向、改善のヒント)。
・テスト質問と判定結果の一覧表(Excel)。
・同じ質問で、改善後にご自身で確かめ直すこともできます。
【安全面について】
・テストは、本番とは切り離したテスト用の環境やアカウントでお願いします。
・お送りいただく資料は、公開しても問題ない範囲か、ダミーに置き換えたもので大丈夫です。
・APIキーやパスワードは、トークルームに書かずに済む方法をご相談の上で進めます。
【納品後について】
・納品物の確認期間中に見つかったレポートの誤りは修正します。
・正式な納品完了後のサポートは行っておりません。
・AIそのものの修正は、このサービスには含まれません。
【私について】
AIシステムの品質評価を本業にしているエンジニアです。
評価の観点とレポートの型は、自分で一から作ったものを使っています。
・購入前に、見積り相談でご相談ください。
・テストは本番とは切り離した環境で行います。テスト用の環境やアカウントをご用意ください。
・本業との兼ね合いで、即時ご返信が難しい場合がございますので、予めご了承ください。