3つの正直なツール、魔法のバックテストはなし#
遅かれ早かれ、すべての人が AIリサーチを中心にプロセスを構築する ことに関して同じことを尋ねます:「これは実際に機能するのか?」
Valarnは、その質問を時間をかけて探求するための3つの別々のツールを提供しますが、それぞれが何であるかを明確に理解することが重要です。それらのいずれも予測、勝率、または実績ではありません。 それぞれは異なる質問に答え、混同すると誤った結論に至ります。
- バックテストモード — 過去の日付における完全なリサーチを実行し、先見の明はありません。
- 機械的価格バックテスト — 過去の価格に対して透明な取引ルールをテストします。
- リサーチの正確性 — 報告書のリサーチスタンスが事後にどのように変化したかを確認します。
それぞれを一つずつ見ていきましょう。
1. バックテストモード:過去の日付におけるリサーチを実行#
バックテストモードは、歴史的な取引日を設定し、完全なマルチエージェント分析をその日付のように実行します。エージェントは、選択した日付以前に存在した情報のみを参照します。
使用するには:分析を実行を開き、高度な設定を展開し、実行モードセクションを見つけてバックテストモードを切り替えます。取引日フィールドが表示されます。ヘルパーテキストは明確に述べています — 「エージェントはこの日付以前に利用可能なデータのみを使用します。」
内部では、その日付がエージェントを通じて流れます:SECの提出書類はその日付のものとして読み込まれます、ニュースとセンチメントのウィンドウはその日付で終了し、マクロデータは当時知られていたことを反映します。次に何が起こったかを覗くことはありません。
得られるのは、その日付における通常のリサーチ報告書です — 同じリサーチビュー、信頼度、エージェント、およびライブ実行で見るような議論があります。「スコア」や「正しかったか?」パネルはありません。なぜなら、これはそのツールの目的ではないからです。それはより狭く、より正直な質問に答えます:当時、エージェントはその設定をどのように考えていたのか、当時知り得た情報だけを考慮して? それは、リサーチプロセスを理解するため、歴史的な転換点を研究するため、またはその時の企業の見え方と現在の見え方を比較するために役立ちます。
2. 機械的価格バックテスト:過去の価格に対してルールをテスト#
AIとは完全に別に、Valarnはクラシックな価格バックテストを含んでいます — 株の歴史的価格に対するシンプルで透明な取引ルールのシミュレーションです。これは、任意の報告書のバックテストセクションとして見つかり、サイドバーのバックテストの下に独自のハブとしてあり、戦略ラボ、単一株、ポートフォリオ、スクリーニングのタブがあります。
戦略を選択します — Valarn Composite、Buy & Hold、Trend (50-day)、MA Crossover、RSI Mean Reversion、または52-Week Breakout — そしてValarnはそれを歴史的な日次価格に対して実行し、通常の定量的指標を報告します:総リターン、ベンチマークに対する超過リターン、CAGR、シャープレシオ、最大ドローダウン、勝率、利益ファクター、エクイティカーブ、取引リスト。これは無料の公開価格データで実行され、料金プランではオプションの「AIで説明」要約があります。
1つの注意点は、これらの数値のいずれよりも重要です。Valarnはパネル上でそれを明示しています:「Valarn Composite」戦略は透明でラベル付けされたプロキシ — AIリサーチスコアの再生ではありません。 価格バックテストは、機械的ルールが過去の価格でどのように振る舞ったかを教えてくれます。それはValarnのAIリサーチがどのように機能したかを教えるものではなく、アドバイスでもありません。 これはルールの教育的シミュレーションとして扱い、それ以上のものではありません。
3. リサーチの正確性:スタンスの経過#
「リサーチは持ちこたえたか?」に最も近いものは、報告書のリサーチの正確性カードです — そしてそれがしないことに注意してください:信号を正しいか間違っているか評価することはありません。
代わりに、それはその報告書のリサーチスタンスが公開されて以来どのように経過したかを示します — 1、5、30、90日の両方で、絶対的な観点とS&P 500および株のセクターに対して相対的に。各ウィンドウには、明確で正直なラベルが付いています:良好に経過、混合、悪く経過、または評価するには早すぎる。
Valarnはこのフレーミングに慎重であり、カード自体でもそう述べています:これはスタンスが「経過したかどうか … キャリブレーション、パフォーマンスではない。」(組織全体のキャリブレーションサマリーはエンタープライズプランで利用可能です。)
この免責事項は繰り返す価値があります。なぜなら、それがポイントだからです:これは品質監視とリサーチキャリブレーションのみです。過去の結果は未来の結果を予測せず、投資パフォーマンスやユーザーのリターンの記録ではありません。
3つを一緒に使用する#
正直に使用すれば、これらのツールはValarnのリサーチを読むためのキャリブレーションされた判断を構築するのに役立ちます — 取引システムではありません:
- バックテストモードは、先見の明がなく、歴史的な設定におけるリサーチプロセスを示します。
- 価格バックテストは、過去の価格で透明な機械的ルールがどのように振る舞ったかを示します — AIとは明確に分離されています。
- リサーチの正確性は、時間の経過とともに、スタンスが良好に経過する傾向があったかどうかを示します — キャリブレーションとして、決して実績としてではありません。
それらのいずれも勝率、「信号の正確性」、または将来のリターンを約束するものではありません。しっかりとしたリサーチビューであっても、意味のある割合で間違って見えることがあります — 市場は不確実であり、それ以外のことを装うのは不誠実です。
結論#
Valarnにおけるバックテストは理解に関するものであり、証明するものではありません。過去の日付におけるリサーチを実行して、エージェントが期間に正確なデータでどのように推論するかを確認します。機械的価格バックテストを使用してシンプルなルールをサニーチェックします — それがAIではないことを忘れずに。そして、時間の経過とともにリサーチの正確性を観察して、特定のスタンスがどれだけの重みを持つべきかをキャリブレーションします。
これらのすべては教育的で説明的です — リサーチについてより明確に考える方法であり、次に何が起こるかの保証ではありません。
Valarn
Customer Success
Valarn Research Team
