ChatGPT、便利ですよね。
他にも様々なAIが普及しており、もはや仕事・勉学の上で欠かせない存在だと思います。
ココナラでプロフィールやサービス文を作るときにも活用している人は多いのではないでしょうか。
私は現在、売れ行きに悩む方へ向けて文章の代筆に取り組ませていただいています。
AIは不使用、いつもガチの手書きで行っています。
それはまだAIには人の心を打つような文章は作れないと感じているから。
・文章が整いすぎている
・個人的な体験談、今までの人生の歩みからくる持論といったバックグラウンドがない
・セールスライティングに忠実過ぎる
こういったことが当てはまると、人間味がなくなってきます。
たまに他の人のブログを見ていても、ちょっとAIっぽいな…と思うことがありますが、それもその人の自由ですからネ。
とにかく私個人としては、お仕事として請け負うからには本当にその人の利益になるように、気合を入れて毎回手書きです。
今までにお取引きいただいた方の文章をAIチェッカーで検査してもらったって構わない。そんな気持ちです。
なんなら私自身のプロフィールやサービスよりも、お取引相手の文章のほうが一生懸命に書いてます。
というわけで(?)今回は、
・自分が購入者さんのために手書きしたもの
・できるだけ人間が書いた文章に見えるように細かく指示してChatGPTに書かせたもの
この2つをAIチェッカーで比較してみました。
1.結論:チェッカーによって差がある
いきなり結論です。
AIチェッカーといっても判断基準や精度にバラつきがあるようで、判定は全然違う様子。
①株式会社ユーザーローカルさんの「生成AIチェッカー」
一発目から意外な結果。
手書き文章とChatGPTに私が指示して書かせた文章、どちらも判定率は同じ。
AI率10%、人間率90%でした。
私の文章が整いすぎている(褒め言葉?)のか、ChaGPTへの指示が良くて、うまいこと人間味が出せているのか。
喜んでいいのか、よくないのか。よーわからん。
ただ私が全部手書きしたものでもAI率10%が含まれているので、「AI使ってるじゃん」という疑惑をかけられたときに完全に否定できないのが困るポイントかもしれません。
②isgen AI detectorさんのisgen.ai
まずは私が最初から全部手書きしたもの。
人間っぽさ100%、AIっぽさ0%。
おお…分かってるやん…キミ!
私の手書きの苦労を分かってくれるか!いいやん。
ちゃんとAIっぽさはゼロであると判定してくれました。うれしい。
次にChatGPTに書かせたもの。
人間っぽさが81%、AIっぽさが19%。
できるだけ人間っぽい文章を書かせるように指示しているせいか、AIに丸投げでも81%は人間だと判定されています。
でもどこかに不自然さがあるのか、19%のAI要素も見抜かれている様子。
納得の結果です。
isgen.ai、一番真実に近いかもしれない。
③X Detectorさんの無料AI検出器&AIチェッカー
まずは私の手書き。
えぇー…?
100%AIであると判定されました。
ホワイ…。
次にAIに書かせたもの。
今度は人間っぽさ100%、AI率0%という結果に。逆じゃね?
これ、表記間違えてないよね…?
④Decopy AIさんのAI検出器
まずは私の手書き。
人間が書いたものであると判定されているものの、AIっぽさが26%との判定も。ちょっとグレーゾーンな印象になっています。
次、ChatGPTに書かせたもの。
こちらも人間が書いたものという判定ですが、手書きよりもAI率が低い15%。なんでや。
こちらの「AI検出器」、文章のどの部分がAIっぽいのかをマーカーで示してくれています。
それによると「購入後のお取引の流れ」のようなセールス的な部分をAIの文章だと認識している様子。
要するにこちらの「AI検出器」は、商売っぽさがある部分をAIだと判定している…のかもしれない。
ただ、サービス文を読んだお客様が購入後の流れを理解しやすいように、どうしても欠かせない部分でもあります。
2.それで?
いろいろ試しましたが、AIチェッカーによって「何をもってAIと判定するか」の基準が異なるようです。
文章が整いすぎているとAIと判定するチェッカーもあれば、商売っぽさが出るとAIと判定するものまで、さまざま。
中には私の手書きを100%AIと判断するのに、AIが書いたものを100%人間と判定するものまでありますしね…。謎。
今回の実験では②isgen AI detectorさんのisgen.aiが一番精度が高いように思いました。
手書きは完全に人間と判定する一方で、できるだけ人間っぽく書かせたAIの文章も、「ほぼ人間っぽいけど…ちょっと怪しいよ」という、人間81%、AI19%の判定。
真実にかなり近いといえます。
別にAIを使うことが悪いんじゃないんですけどネ。
今の段階では「AIが書いた=人間味がない、不自然、自分で内容を理解して書いていない」という印象を持たれるため、できるだけゼロに近づけたいというのが心情なのだと思います。
とりあえず私はisgen.aiさんを推します!というお話でしたー。