AI搭載EAの判断ログの見方|直す場所は4つのどれか

AI搭載EAの判断ログの見方|直す場所は4つのどれか

記事
マネー・副業
判断ログを取り始めて数週間。表計算で開くと、判定と理由の行が何百も並んでいる。上から読んでいくと、見送りの理由はどれももっともらしく見える。一行ずつ読み進めるほど、どこを直せばいいのかが分からなくなっていく。

つい、損益の列を横に足して、当たった回と外れた回を数えたくなる。だがそこから始めると、相場の巡り合わせと判断の良し悪しが混ざったまま、結論だけを急ぐことになる。先に見るのは損益ではなく、判断の内訳だ。

今回は、判断ログを見返す順番を置いていく。内訳の数え方、見送りの理由の分け方、比べるときの注意、そして直す場所の選び方まで。ログに何を残すかは別の話として、ここでは残っているものをどう読むかに絞ります。

最初に数えるのは、判断の内訳

ログを期間で区切り、1回ごとの結末を4つに分けて数える。AIが同意して発注した、見送った、エラーで判定できなかった、時間切れで返事が来なかった。この4つの割合が、そのEAの判断がどう回っていたかの輪郭になる。期間ごとに横へ並べておけば、ある時期から見送りが急に増えた、といった動きも見えてくる。

損益より先にここを見るのは、注文になるのが判断の一部にすぎないからだ。取引の記録だけを追っていると、見送りもエラーも目に入らない。注文にならなかった判断を読まないまま、良かった悪かったを決めることになる。内訳なら、注文が少ない時期でも、判断の数だけ材料が溜まっていく。

エラーの多い期間は、AI抜きの期間

エラーと時間切れを、発注や見送りと分けて数えるのには理由がある。当方の標準では判定が取れない回もテクニカルだけで先へ進むので、エラーが多い期間は、実質AI抜きで動いていた期間になる。その期間の成績は、AIのせいにもAIのおかげにもできない。

割合と一緒に、どこに寄っているかも見る。時間帯、銘柄、指示文の版。ある版に切り替えた日から形の崩れが増えたなら、疑うのは相場ではなく指示文の側だ。数そのものが多ければ、待つ秒数や返させる形の設計を見直す材料になる。その扱い方は別に書いたので、ここでは寄りを見つけるところまでにしておく。

内訳の4つから読むこと

見送りの理由は、どこに偏っているか

次に、見送りの行だけを抜き出して理由を読む。一行ずつの文は毎回言い回しが違うので、そのままでは数えられない。似た理由に同じ札を付けていく。値動きが荒い、直前に大きく動いた、方向が定まらない、材料が足りない。札は最初は粗くてかまわないが、途中で札を足したら、前の期間の行にも付け直しておく。

札ごとに数えて多い順に並べると、偏りが見えてくる。同じ理由ばかりが並ぶなら、渡している情報が偏っている疑いがある。荒さを示す値の単位や桁がずれていて、いつ見ても大きく見えている、ということも起こりうる。AIの判断を疑う前に、AIに見せているものを確かめたい。

理由の中に、送っていない材料が出てくることもある。渡していない指標の名前や、見せていないはずの時間足の話だ。答えが材料から離れているしるしなので、指示文の側で、渡した値だけで判断するよう縛り直す候補になる。

1回の当たり外れで、結論を出さない

判断のあとに値がどう動いたかを並べてみたくなるのは、自然なことだ。見送った直後に大きく動いた一回は、強く記憶に残る。だがその一回は、判断が悪かった証拠にも、良かった証拠にもならない。同じ場面は二度とは来ない。

並べるなら、1回ずつではなく、まとまりで見る。見送った回の全体と、発注した回の全体を比べる。値動きは、判断した時点から同じ長さだけ先を取り、回ごとに長さを変えない。回数が少ない期間からは、何も言えない。何回あれば足りるかは運用によって違うのでN回とだけ書くが、数えずに言い切ることだけはしないでおきたい。

版とモデルを変えた日で、区切る

指示文を直した日や、モデルを替えた日があるなら、ログはそこで区切る。区切らずに通して数えると、判断のしかたが違う期間が一つの数字に混ざる。版とモデル名が1行ごとに残っていれば、区切るのは表のフィルタ一つで済む。

区切った前後を比べるときも、期間が違えば相場も違う。見送りが増えたのが指示文のせいなのか、相場が荒れた時期だったからなのかは、前後を比べるだけでは分けきれない。前後の比較で言えるのは、内訳の変わり方までだと思っておいたほうがいい。同じ相場の上で比べたいなら、新旧を並べて記録するやり方がある。

直す場所は4つ、一度に1か所

読み取ったことから、直す場所を選ぶ。モデルを替える話を別にすれば、候補は4つに絞れる。AIに渡す値、指示文、判定の使い方、そしてAIに聞く手前にあるEA側の条件。渡す値や指示文を直したなら理由の偏りと形の崩れを、判定の使い方やEA側の条件を直したなら、発注と見送りの回数を見ていく。

直す場所は4つ

直すのは一度に1か所だけにしてください。二つ同時に変えると、内訳が動いてもどちらが効いたのか分からなくなります。変える前に、何をどう変えたかと、比べる起点になる日付を一行書いておく。効いたかどうかは、その日から先の内訳で見る。

当方は元金融系のシステムエンジニアで、MT5のAI搭載EAをココナラで開発しています。判定と理由を毎回記録に残す作りにしており、ログの項目や書き出す形もご依頼の内容に合わせて決めます。ログを取り始めたばかりで、どこを見ればいいか決まっていない段階でも構いません。ココナラのメッセージからご相談ください。なお、お渡しするのはソフトウェアであって、投資助言や運用の代行ではありません。
サービス数100万件のスキルマーケット、あなたにぴったりのサービスを探す