本文へ移動

検証記録 07

その未使用検証期間は、もう学習データになっている|使い回しの罠

未使用検証期間内でパラメータ最適化はしていない。ただ結果を見て、フィルターを直し、再実行しただけ。その繰り返しだけで十分に汚染します。

一つの破綻要因だけを、深く暴く。一点集中の分析 · 数値はすべて教育用に構成した例示アウトオブサンプル 過剰適合テストセット 再利用ウォークフォワード バイアスデータリーケージ
バックテスト診断パネル検証例 OOS-DECAY。教育用に構成した例示値であり、実測市場データではありません。バックテスト診断パネル検証例 OOS-DECAY · 教育用の例示値仕様変更27再利用検証PF1.93未使用検証PF0.96破綻判定境界点推定系列依存テールストレス約定現実性選択補正再現性総合点は要約であり、堅牢性の証明ではない。

01

未使用検証期間の再利用の検証結論

未使用検証期間は日付へ永久に貼られるラベルではなく、データと意思決定の関係です。その期間の結果が次のバージョンへ影響した時点で、次のバージョンにとって未使用の証拠ではありません。

本記事の数値は、破綻要因を説明するために教育用として構成した例示値です。実在する戦略成績、実測結果、推奨閾値を示すものではありません。
02

未使用検証期間の再利用で誤認しやすい見出し指標

学習期間と未使用検証期間をきれいに分けたレポートは厳密に見えます。しかしファイルには、V1の失敗を見てV2を作り、V2を見てV3を作り、全て同じ「未使用検証期間年」で評価した履歴が残りません。

自動最適化は不要です。テスト結果を理由に、時間帯フィルターを変える、銘柄を外す、ボラティリティ条件を足す、出口を捨てることも、テスト期間の情報を戦略へ移しています。

03

未使用検証期間の再利用がバックテストへ混入する経路

人間のフィードバックも最適化

未使用検証期間結果を読んで裁量的にコードを変えることも、複数モデル候補から探索している行為です。

難しい局面の日付を覚える

開発者は失敗した具体的な局面を知り、無意識にその例外へ適合するルールを作ります。

試したバージョン数が消える

最終レポートには一つの未使用検証期間曲線しか出ず、同じ期間で落とした10バージョンが見えません。

ウォークフォワードのfoldも再利用される

後続の設計判断へ影響したfoldは、最終設計に対する完全に独立した評価ではありません。

04

未使用検証期間の再利用を小規模事例で分解する

検証ファイル 07 · 未使用検証期間 使い回し データ汚染一点集中の分析 · 数値はすべて教育用に構成した例示
バージョン 同じ未使用検証期間を見て行った変更 学習期間のプロフィットファクター 再利用した検証期間のプロフィットファクター 未使用期間のプロフィットファクター
V1 原型 1.61 1.42
V3 時間帯フィルター追加 1.68 1.66
V5 ボラ例外追加 1.72 1.93
V5を新規ホールドアウトへ 追加変更なし 1.72 1.93 0.96

上昇した未使用検証期間成績は独立確認ではありません。改善のたびに同じ期間の知識を使ったからです。V5に対する最初のクリーンな検査は、本当に未使用のホールドアウトであり、そこで評価が反転しました。

05

未使用検証期間の再利用の評価を反転させる検査

日付分割だけでなく意思決定台帳を作ります。結果を見るたびに、その後どのコード、パラメータ、銘柄集合、ルールが変わり、どのデータが判断へ影響したか記録します。

開発、検証、最終ホールドアウトの役割を不変に割り当てる。
各期間で評価した全バージョンを、棄却版も含めて記録する。
ホールドアウトから重要なフィードバックを得たら最終証拠から引退させ、新しい未使用ホールドアウトを用意する。
設計選択と最終評価を分けるnested/rolling工程を使う。
未使用検証期間成績と一緒に、その結果を見た後で行った開発判断数を報告する。
06

未使用検証期間の再利用を取引一覧で確認できる範囲と限界

未使用検証期間の再利用を疑うエクスポート上の危険信号

  • 全ての戦略説明で同じ未使用検証期間期間を使用
  • 棄却版のログがない
  • 既知の未使用検証期間損失を直すためフィルター追加
  • 多数の未使用検証期間曲線を比較して最終コードを選択
  • foldが良く見えるまでウォークフォワードを再実行

未使用検証期間の再利用について取引一覧から可視化できること

  • 宣言した調整期間・検証・ホールドアウトで、バージョン別エクスポートを横断比較
  • 本当に後続または別管理のファイルで劣化が再発するか
  • fold・ローリング窓をまたぐバージョン順位の安定性
  • 必要ファイルがあれば、調整期間・再利用した検証期間・未使用ホールドアウトの差

未使用検証期間の再利用について設定・コード・市場データで別途確認すること

  • 取引エクスポートだけでは、見えないコード版を何個棄却したか分かりません。開発ログとバージョン管理履歴が必要です。
  • 意思決定へ影響した後の期間へ独立性を戻すことはできません。汚染を明示し、新しい証拠を要求するしかありません。
学術検証レポート

「未使用検証期間の再利用」を反証可能なバックテスト診断へ変換する。

検証ファイル 07/20 · 検証期間-DECAY · 一つの破綻要因を一つの反証手順で検査

01

未使用検証期間の再利用の研究要旨

検証ファイル 07/20 · 検証期間-DECAY · 一つの破綻要因を一つの反証手順で検査

本稿が検証する中心命題は、未使用検証期間を何度も見て改善すると、その期間は実質的に訓練データへ転化し、独立検証という意味を失うという一点です。問題は、表示された純利益や勝率が数学的に計算されているかどうかだけではありません。より根本的には、何を一つの観測とみなし、どの情報が当時利用可能で、どの仮定を置いた時だけ利益が成立し、仮定を少し動かした時に結論がどの程度残るかを識別できているかです。したがって分析対象は単一の成績表ではなく、データ生成過程、約定生成過程、推定過程、選択過程、資本配分過程を含む一連の研究設計です。

主要な推定対象は「研究者が一度も見ていないデータに対する汎化性能」です。観測単位は「完全に凍結されたモデル仕様と一回限りの評価期間」と定義します。この定義を曖昧にしたまま件数や平均を報告すると、分割約定、重複シグナル、同一イベント、合成価格、時刻変換などが独立した証拠として二重計上されます。見かけ上の標本数が増えても、新しい情報量が増えたとは限りません。学術的な検証では、件数を増やす前に、観測単位が推定対象に対応しているかを固定します。

本稿は、未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウトを主要な感度軸として、元の集計値、再構築値、保守的ストレス値、依存性を考慮した再標本化分布を比較します。隠れた要因は「未使用検証期間結果を見た後のルール修正、特徴量追加、閾値調整、期間選択」です。特に「多数回の試行から偶然良かった未使用検証期間だけを採用する選択効果が、見かけの汎化を作る」という裾の仕組みは、平均値や中央値だけでは見えません。そこで中心推定に加え、下位分位、期待ショートフォール、符号安定率、境界到達率、最大寄与率など、破綻側の統計量を同時に表示します。

結論は、優れたバックテストを証明することではなく、反証を試みてもなお残る部分と、仮定を変えると消える部分を分離することです。採否原則は「研究台帳で閲覧と変更を記録し、最後に一度だけ開く未接触期間または前向きペーパーテストを残す」です。これは売買推奨ではなく、TradingViewの取引一覧から得られる証拠をどこまで信用できるかを測る研究手続きです。データに含まれない市場流動性、ブローカー固有仕様、将来相場局面、障害・ギャップは別途検証が必要であり、統計的な通過は将来利益を保証しません。

本文の数値は未使用検証期間の再利用を説明するための再計算例です。実在する戦略・顧客成績・将来収益ではありません。

02

未使用検証期間の再利用の仮説・識別対象

研究者が一度も見ていないデータに対する汎化性能

帰無仮説 H₀

H₀:見かけの成績は対象の破綻要因に依存せず、合理的な摂動後も維持される。

対立仮説 H₁

H₁:見かけの成績は対象の破綻要因へ依存し、適切な再構築・摂動・再標本化で実質的に劣化する。

推定対象

研究者が一度も見ていないデータに対する汎化性能

観測単位

完全に凍結されたモデル仕様と一回限りの評価期間

潜在メカニズム

未使用検証期間結果を見た後のルール修正、特徴量追加、閾値調整、期間選択

主要ストレス軸

未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウト

03

未使用検証期間の再利用を形式化する推定量

定義を固定してから推定する。

FWER_ind=1−(1−α)^MM回の検定が独立という近似下で、少なくとも一度誤検出する確率。候補が依存する場合はこの式をそのまま補正値にしない。
Bias_sel=E[max_j θ̂_j]−max_j θ_j最大推定値を選ぶことによる期待上方バイアス。
ω_s=r_s/(N+1), λ_s=log[ω_s/(1−ω_s)], PBÔ=S⁻¹Σ_s1{λ_s≤0}各分割で、学習期間の最良候補が検証期間で得た順位r_s(最下位1・最上位N)をN+1で正規化し、検証順位が中央値以下へ落ちる分割の割合を数える。
未使用検証期間の閲覧14
ルール変更27
最良の未使用検証期間 シャープレシオ1.62
未接触シャープレシオ0.31
バックテスト過剰適合確率(PBO)の推定72%

主要な推定対象は「研究者が一度も見ていないデータに対する汎化性能」です。観測単位は「完全に凍結されたモデル仕様と一回限りの評価期間」と定義します。この定義を曖昧にしたまま件数や平均を報告すると、分割約定、重複シグナル、同一イベント、合成価格、時刻変換などが独立した証拠として二重計上されます。見かけ上の標本数が増えても、新しい情報量が増えたとは限りません。学術的な検証では、件数を増やす前に、観測単位が推定対象に対応しているかを固定します。

本稿は、未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウトを主要な感度軸として、元の集計値、再構築値、保守的ストレス値、依存性を考慮した再標本化分布を比較します。隠れた要因は「未使用検証期間結果を見た後のルール修正、特徴量追加、閾値調整、期間選択」です。特に「多数回の試行から偶然良かった未使用検証期間だけを採用する選択効果が、見かけの汎化を作る」という裾の仕組みは、平均値や中央値だけでは見えません。そこで中心推定に加え、下位分位、期待ショートフォール、符号安定率、境界到達率、最大寄与率など、破綻側の統計量を同時に表示します。

04

未使用検証期間の再利用の教育用再計算実験

表中の値は計算手順と判定反転を示す例示値です。TradingViewから取得した特定利用者の実測結果ではありません。

識別子 再計算層 操作 比較対象 診断目的
S0 表示値そのまま 元のストラテジーテスター集計を再掲 基準 見かけの結論
S1 単位再集約 完全に凍結されたモデル仕様と一回限りの評価期間 件数・依存を再評価 情報量の補正
S2 独立再計算 価格・数量・費用・通貨を行単位で再構築 照合差を分離 測定妥当性
S3 局所ストレス 未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウト 一要因だけ摂動 原因感度
S4 テール注入 多数回の試行から偶然良かった未使用検証期間だけを採用する選択効果が、見かけの汎化を作る 下位分位と境界到達を再計算 資本保全
S5 依存再標本化 複数ブロック長で経路を生成 区間・符号安定率 推定不確実性
S6 選択補正 探索・未使用検証期間の閲覧・除外を台帳化 最大値バイアスを補正 汎化可能性
S7 完全ゲート 研究台帳で閲覧と変更を記録し、最後に一度だけ開く未接触期間または前向きペーパーテストを残す 事前閾値へ照合 通過/保留/棄却

「未使用検証期間の再利用」の教育用再計算実験では処理層を一つずつ変更し、事前に定めた層だけを最後に組み合わせます。S0は真値ではなく監査対象です。S1とS2で観測単位と算術の整合性を確認し、S3とS4で局所感度とテール破綻を識別し、S5では取引集合ではなく不確実性モデルを変更します。S6は公開前の探索を補正し、S7は全バージョンへ同一ゲートを適用します。この順序により、不都合な結果が出るたび複数仮定を同時変更して説明を逃れることを防ぎます。

図表の数値は感度の読み方を示すために構成しています。統計的有意性や将来の損益を表すものではありません。

05

未使用検証期間の再利用を分解する診断図表

装飾的な使い回しではなく、四つの独立した視覚検査。

未使用検証期間の再利用回数と選択劣化教育用再計算実験。軸・閾値は診断用であり、将来予測ではありません。未使用検証期間の再利用回数と選択劣化教育用再計算実験。軸・閾値は診断用であり、将来予測ではありません。汎化性能の劣化教育用の正規化表示。絶対値ではなく、仮定変更に対する方向、傾き、境界位置を読む。
図1.未使用検証期間の再利用の主診断。表示値は手法説明用の再計算例であり、実在戦略や将来収益の推定ではありません。
学習・選択・未使用期間の汚染行列図2.学習・選択・未使用期間の汚染行列。未使用期間を見てモデルを変えた時点で、その期間は以後の独立検証ではありません。 表示値は教育用再計算例であり、実在戦略の成績や将来収益を示しません。学習・選択・未使用期間の汚染行列主題固有の推定対象を、単一の診断面へ分解学習学習選択選択未使用未使用再調整再調整最終確認最終確認赤:評価結果が後続の設計へ逆流
図2.学習・選択・未使用期間の汚染行列。未使用期間を見てモデルを変えた時点で、その期間は以後の独立検証ではありません。 表示値は教育用再計算例であり、実在戦略の成績や将来収益を示しません。
同じ未使用期間を再閲覧した回数と成績劣化図3.同じ未使用期間を再閲覧した回数と成績劣化。同じ未使用期間を確認するほど、その期間の成績は上がり、次の未接触期間は悪化する形を検査します。 表示値は教育用再計算例であり、実在戦略の成績や将来収益を示しません。同じ未使用期間を再閲覧した回数と成績劣化主要結論を反証するための、主題固有ストレス検査閲覧後の見かけ上の改善次の未接触期間同じ未使用期間を見た回数
図3.同じ未使用期間を再閲覧した回数と成績劣化。同じ未使用期間を確認するほど、その期間の成績は上がり、次の未接触期間は悪化する形を検査します。 表示値は教育用再計算例であり、実在戦略の成績や将来収益を示しません。
検証結果が次のモデルへ逆流する汚染ループ図4.検証結果が次のモデルへ逆流する汚染ループ。結果を見て変更する循環そのものを汚染経路として描き、各周回を新しい試行に数えます。 表示値は教育用再計算例であり、実在戦略の成績や将来収益を示しません。検証結果が次のモデルへ逆流する汚染ループ観測事実・仮定・意思決定を分離した因果/処理構造未使用期間を見るモデルを修正再び評価見かけ改善採用判断独立性消失
図4.検証結果が次のモデルへ逆流する汚染ループ。結果を見て変更する循環そのものを汚染経路として描き、各周回を新しい試行に数えます。 表示値は教育用再計算例であり、実在戦略の成績や将来収益を示しません。
主診断では未使用検証期間の閲覧回数、閲覧後変更数、候補総数、PBO、選択補正後指標、最終未接触成績を一つの原因軸へ分解します。曲線の高さより、未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウトを動かしたときの傾き、曲率、最初の採否境界を読みます。最良点だけを残さず、入力誤差が判定へ増幅される区間を保存します。
二変量感度は「未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウト」の相互作用を示します。色は実績確率ではなく事前ゲートまでの正規化余裕です。維持域が広く連結するか、点状の孤島かを判定し、境界線は結果を見た後に動かしません。
再標本化図の対象統計量は未接触期間の検証統計量です。独立同分布(IID)比較に加え、時系列順序と学習・検証境界を維持するパージ付き分割を複数ブロック長で再標本化し、2.5%・50%・97.5%分位、符号反転率を表示します。乱数シードと反復回数を保存します。
因果図は「検証結果の閲覧 → 仕様修正 → 同じ期間で再評価 → 適合の蓄積 → 未知データで崩壊」を追跡します。表示指標は原因ではなく中間生成物であり、入力・仮定を摂動して取引行と資本境界を再計算し、事前ゲートへ戻すことで反証ループを閉じます。
06

未使用検証期間の再利用に対する多層監査

結果の強さは、未解決の最弱層で決まる。

検証層 0101 · 推定対象の固定

独立検証では、この記事が答える対象を「研究者が一度も見ていないデータに対する汎化性能」へ固定します。未使用検証期間の再利用を、純利益や勝率の印象だけで置き換えません。対象期間、口座通貨、費用範囲、運用停止境界を分析前に宣言し、変更があれば同じ検証の微修正ではなく別仮説として版を分けます。これにより、結果を見てから問いを選び直す余地を閉じます。

検証層 0202 · 観測単位の再構築

一行を一つの独立証拠とみなす前に、観測単位を「完全に凍結されたモデル仕様と一回限りの評価期間」へ再構築します。親取引、注文レッグ、イベント、時間クラスタの件数を並記し、どの分母を平均・標準誤差・再標本化へ使ったかを明示します。集約規則を変えても未使用検証期間の閲覧回数、閲覧後変更数、候補総数、PBO、選択補正後指標、最終未接触成績の中心的結論が維持されるかを比較し、行数の多さを情報量と取り違えません。

検証層 0303 · データ来歴と設定の保存

TradingViewエクスポートの原本ハッシュに加え、銘柄、時間足、セッション、タイムゾーン、注文処理、手数料、スリッページ、通貨、Pine版を保存します。未使用検証期間の再利用では、未使用検証期間結果を見た後のルール修正、特徴量追加、閾値調整、期間選択が再現に直結するため、原本・正規化後・分析用の三層を分離し、列変換、欠損処理、重複除去を台帳化します。

検証層 0404 · 識別可能性と追加データ

取引一覧から識別できるのは、記録された時刻・価格・数量・損益から再計算できる範囲です。一方、未記録の手動試行、共有されたスクリーンショット、非公開の期間選択は追加資料がなければ直接観測できません。そこで「データで確認」「仮定で境界化」「外部データが必要」を分け、未使用検証期間結果を見た後のルール修正、特徴量追加、閾値調整、期間選択を確定事実としてではなく検証可能な連鎖として表現します。

検証層 0505 · 行単位の算術照合

表示された成績を真値とせず、モデル版、閲覧日時、仕様変更、採否判断を時系列台帳へ復元し、本当に未接触の最終ホールドアウトと前向き期間を分離する。元の表示値との総額差だけでなく、行別差、符号、時期、銘柄、注文種別への集中を確認します。照合差が特定局面へ集中する場合、それを丸め誤差として消さず、未使用検証期間の再利用を作った可能性のある一次所見として扱います。

検証層 0606 · 有限標本の不確実性

未使用検証期間の閲覧回数、閲覧後変更数、候補総数、PBO、選択補正後指標、最終未接触成績は点推定だけで報告しません。標本数、分布の歪み、裾の厚さ、打切り、選択履歴に対応した区間または再標本化分布を併記します。正規近似、分位法、ブロック法で符号が一致しない場合は「黒字」と断定せず識別不能とし、最小検出可能効果と区間下限を判断材料にします。

検証層 0707 · 系列依存とクラスタ

未使用検証期間の再利用の不確実性を独立同分布(IID)シャッフルだけで狭く見せません。時系列順序と学習・検証境界を維持するパージ付き分割を単位に、固定長ブロックと定常ブートストラップを複数の長さで実行します。乱数シード、反復回数、循環処理、欠損規則を保存し、ブロック長ごとに未使用検証期間の閲覧回数、閲覧後変更数、候補総数、PBO、選択補正後指標、最終未接触成績の分布と符号反転率を報告します。

検証層 0808 · 裾損失と運用境界

平均値の背後にある未使用検証期間結果を見た後のルール修正、特徴量追加、閾値調整、期間選択を、下位分位、期待ショートフォール、最大寄与、損失クラスタ、境界到達率で確認します。過去最大損失を損失上限とはみなさず、資本ゼロ、証拠金不足、許容ドローダウン、回復期限など複数の吸収・停止境界を定義し、最初に破られる境界を記録します。

検証層 0909 · 費用・約定・市場摩擦

手数料を一律控除するだけでは未使用検証期間の再利用の実行可能性を評価できません。スプレッド、スリッページ、資金調達、借株、ロール、換算、数量丸め、注文拒否を該当する単位へ割り当てます。基準・上方分位・危機の費用状態で未使用検証期間の閲覧回数、閲覧後変更数、候補総数、PBO、選択補正後指標、最終未接触成績を再計算し、損失局面と費用悪化が同時に起きる依存も残します。

検証層 1010 · 探索履歴と多重検定

期間、銘柄、時間足、パラメータ、出口、フィルター、表示指標の候補総数を探索母集団として数えます。未使用検証期間の再利用に都合の良い一結果だけを分母から切り離さず、未採用候補、途中棄却、検証期間の再閲覧を含めます。必要に応じてPBO、SPA検定、デフレーテッド・シャープレシオを用い、試行履歴欠損そのものを高リスク所見にします。

検証層 1111 · 相場局面への条件付け

全期間平均の内側で未使用検証期間の再利用が一つの相場状態へ集中していないかを調べます。状態分類は利益を見た後に作らず、訓練期間または外生規則で固定します。状態別の未使用検証期間の閲覧回数、閲覧後変更数、候補総数、PBO、選択補正後指標、最終未接触成績、占有率、遷移確率、費用を報告し、将来の状態混合を再加重したときに事前ゲートを維持できるかを検査します。

検証層 1212 · 経路・開始日・サイジング

同じ取引集合でも、開始日、順序、初期資本、数量丸め、停止規則で経路は変わります。未使用検証期間の再利用について固定枚数、固定R、定率複利を分離し、循環シフトとブロック順序で最大ドローダウン、回復期間、境界到達を再計算します。終端損益が同じ場合でも経路リスクが同じとは結論しません。

検証層 1313 · 反実仮想と感度曲面

反実仮想では「未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウト」を一度に全て動かさず、まず一軸ずつ局所効果を隔離します。その後、二軸の感度曲面と危機シナリオを事前規則で構成します。仕様を完全凍結した複製を研究者から隠し、一回だけ評価して、反復閲覧版との成績差を比較するという負の対照も併用し、都合のよい最悪値または最良値だけを選ばず、結論が反転する境界と傾きを保存します。

検証層 1414 · 独立実装と回帰試験

同じ仕様を別実装で再計算し、モデル版、閲覧日時、仕様変更、採否判断を時系列台帳へ復元し、本当に未接触の最終ホールドアウトと前向き期間を分離するという核心処理の行別出力を照合します。固定フィクスチャ、ゼロ件、重複時刻、極端費用、逆順序、欠損、境界値を回帰試験へ含めます。二実装が一致しても共通入力が誤っていれば同時に誤るため、入力作成者と検証者も可能な範囲で分離します。

検証層 1515 · 事前判定ゲート

採否条件は結果を見る前に定めます。本件の限定的な通過条件は「探索履歴を含む補正後も有意な優位性が残り、一回限りの未接触データで事前基準を満たすこと」です。閾値近辺では合否だけでなく区間幅と経済的重要性を併記し、一つの都合のよいモデル、ブロック長、費用状態だけが通る場合は合格ではなく感度依存と分類します。

検証層 1616 · 再現性台帳

再現性台帳には入力ハッシュ、コード版、設定、除外規則、未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウト、ブロック長、乱数シード、反復回数、全シナリオ出力を保存します。探索と確認を別名前空間にし、失敗した試行も削除しません。新しいTradingViewデータを追加した場合は旧結果へ上書きせず、版間差としてモデル版数、閲覧回数、変更理由、最終ホールドアウトの残量、前向き誤差を追跡します。

検証層 1717 · 経済的重要性

統計量を資本上の意味へ変換します。未使用検証期間の再利用によって期待値、下位分位、回復期間、境界到達率が変わったとき、想定取引回数、資金量、証拠金、継続可否へ換算します。小さい1取引差でも高回転なら累積し、低頻度でも吸収境界に近ければ重大であるため、「有意か」だけでなく縮小・再設計・棄却へ接続します。

検証層 1818 · 役割分離と停止条件

仮説作成、実装、独立再計算、承認の役割をできる限り分けます。重大な照合差、未解決欠損、再現不能、事前閾値割れがあれば自動的に保留します。因果連鎖は「検証結果の閲覧 → 仕様修正 → 同じ期間で再評価 → 適合の蓄積 → 未知データで崩壊」として監査し、通過を将来利益の認定に変換せず、前向き期間でモデル版数、閲覧回数、変更理由、最終ホールドアウトの残量、前向き誤差を同じ規則で再評価します。

07

未使用検証期間の再利用を反証する手順

研究台帳で閲覧と変更を記録し、最後に一度だけ開く未接触期間または前向きペーパーテストを残す

未使用検証期間の再利用監査のためTradingView原本を凍結する

エクスポートを変更せず保存し、ファイルハッシュ、出力時刻、戦略名、銘柄、時間足、設定値を記録します。未使用検証期間の再利用に関係する列も原本上で保持し、削除や補完は派生テーブルだけで行います。

未使用検証期間の再利用に適した観測単位を再構築する

「完全に凍結されたモデル仕様と一回限りの評価期間」へ行を束ね、生の行数、親取引数、イベント数、独立クラスタ数を並記します。別の妥当な集約でも主要結果を再計算します。

未使用検証期間の再利用の表示値を独立再計算する

モデル版、閲覧日時、仕様変更、採否判断を時系列台帳へ復元し、本当に未接触の最終ホールドアウトと前向き期間を分離する。元のストラテジーテスター表示と行別・総額で照合し、不一致の集中場所を保存します。

未使用検証期間の再利用だけを隔離する

未使用検証期間の再利用だけを主要因として、未使用検証期間の閲覧回数・仕様変更回数・最後の未接触ホールドアウトを一軸ずつ変えます。他の設定を固定し、どの仮定がどの統計量を動かしたかを識別します。

未使用検証期間の再利用の感度境界を地図化する

主要軸と相互作用軸を事前格子で組み合わせ、未使用検証期間の閲覧回数、閲覧後変更数、候補総数、PBO、選択補正後指標、最終未接触成績を再計算します。維持域が広いか、狭い孤島か、採否境界を何回跨ぐかを記録します。

未使用検証期間の再利用固有の依存を保って再標本化する

時系列順序と学習・検証境界を維持するパージ付き分割を用いて、複数の固定長ブロックと定常ブートストラップを実行します。乱数シード、反復回数、ブロック長を全て保存します。

未使用検証期間の再利用の影響点と運用境界を検査する

最大寄与、上位k件、特定期間、特定相場局面を順に除外し、下位分位と運用境界を再計算します。除外後の悪化を外れ値処理で隠しません。

未使用検証期間の再利用へ負の対照と保守条件を適用する

仕様を完全凍結した複製を研究者から隠し、一回だけ評価して、反復閲覧版との成績差を比較する。さらに未記録の手動試行、共有されたスクリーンショット、非公開の期間選択を観測不能要因として境界化し、楽観値だけを最終値にしません。

未使用検証期間の再利用を事前ゲートへ照合する

結果を見て閾値を動かさず、「探索履歴を含む補正後も有意な優位性が残り、一回限りの未接触データで事前基準を満たすこと」と照合します。通過、保留、棄却を分け、未解決差があれば保留します。

未使用検証期間の再利用の再現パッケージを保存する

入力、変換台帳、数式、図表、全シナリオ、失敗ログ、コード版を一式保存し、別環境で再実行します。前向き期間ではモデル版数、閲覧回数、変更理由、最終ホールドアウトの残量、前向き誤差を同じ規則で追跡します。

08

未使用検証期間の再利用の意思決定ゲート

曲線を信じる前に、物語の反証を試みる。

未使用検証期間の再利用の図表・数式を読む際の注意

「未使用検証期間の再利用」の図表値は、破綻機構を説明するために教育用として構成した再計算例です。線の位置や色だけから統計的有意性を読み取らず、式で定義した推定対象、単位、分母、打切り規則、費用の符号を先に確認します。感度曲面は因果効果の推定ではなく、指定した仮定の範囲内で結論がどこまで変わるかを示す診断です。再標本化分布は、独立同分布を仮定した単純シャッフルだけでなく、複数のブロック長を用いた定常ブートストラップとブロック・ブートストラップを実行し、損失の集中と相場局面の持続性を保ちます。乱数シード、反復回数、ブロック長、帯域幅、欠損処理を保存し、別実装で同じ集計を再計算できた場合にだけ再現性を主張します。

本件の限定的な通過条件は「探索履歴を含む補正後も有意な優位性が残り、一回限りの未接触データで事前基準を満たすこと」です。再構築値、局所摂動、二変量感度、依存性保持再標本化、負の対照の全てで重大な符号反転や未解決照合差がない場合に限ります。通過は将来利益の認定ではなく、現時点の証拠が事前に定めた反証へ耐えたという限定的判断です。

  • 推定対象と観測単位が事前に固定されている
  • 再計算と元表示の重大不一致が解消・説明されている
  • 主要ストレス領域が狭い孤島ではなく広く連結している
  • ブロック長・シード・区間法を変えても結論の符号が安定する
  • 上位1件・上位5件・特定相場局面除外後も経済的余裕が残る
  • 費用・約定・資本境界を含む保守シナリオで停止条件を超えない
6/6必須ゲート · 将来成績の予測ではない
09

未使用検証期間の再利用の限界・外的妥当性・再現性

すべての推論には適用境界がある。

第一の限界は、取引エクスポートが市場の完全な状態を含まないことです。板の深さ、約定キュー、通信遅延、注文拒否、ブローカーの流動性供給、実際のスワップ履歴が欠けていれば、研究者が一度も見ていないデータに対する汎化性能はモデルを介した推定になります。モデル値は複数シナリオで幅として示し、観測値と同じ書式で確定表示しません。

「未使用検証期間の再利用」で第二に確認すべき限界は構造変化です。過去に十分な標本があっても、取引制度、参加者、ボラティリティ、金利、スプレッド、データ仕様、Pine実行仕様が変われば母集団は同一ではありません。時系列を古い順に混ぜて標本数だけを増やすのではなく、ローリング窓と相場局面別に推定し、変化点の前後でパラメータが安定しているかを確認します。

「未使用検証期間の再利用」で第三に確認すべき限界は検定の再利用です。本稿の手順を何度も同じデータへ適用し、通過するまで戦略を修正すれば、検証手順自体が新しい最適化装置になります。検証後の変更は必ず新しいモデル版として扱い、未接触データまたは前向き期間を残します。記事を読んでから選んだテストも探索の一部であり、独立証拠として数えません。

「未使用検証期間の再利用」で第四に確認すべき限界は、統計的通過と実運用適合性の違いです。心理的耐性、資金拘束、税務、規制、システム障害、口座条件、最大発注量、成行禁止、流動性断絶は取引一覧CSVだけでは判断できません。バックテスト分析は隠れていた破綻リスクを早期に発見するための診断であり、投資助言、運用保証、損失上限の保証ではありません。最終判断には利用者固有の制約を別レイヤーで加えます。

限界 01識別境界

「研究者が一度も見ていないデータに対する汎化性能」は、TradingViewエクスポートに存在する列と追加仮定の範囲でのみ識別されます。未記録の手動試行、共有されたスクリーンショット、非公開の期間選択を直接観測できない場合は一点推定ではなく上下限を示し、仮定を事実のように記述しません。

限界 02構造変化

未使用検証期間の再利用の過去推定が、制度、参加者、ボラティリティ、費用、データ仕様の変更後も同じ母集団に属する保証はありません。ローリング窓と相場局面別にモデル版数、閲覧回数、変更理由、最終ホールドアウトの残量、前向き誤差を追跡します。

限界 03検証の再利用

この診断を同じデータへ繰り返し適用し、通過するまでルールを修正すれば、監査自体が新しい最適化になります。変更後は新モデル版とし、未接触期間を別に確保します。

限界 04運用適合性

統計的に探索履歴を含む補正後も有意な優位性が残り、一回限りの未接触データで事前基準を満たすこととしても、税務、規制、心理的耐性、資金拘束、最大発注量、システム障害までは証明しません。バックテスト診断と実運用審査を分離します。

限界 05欠損と異常値

未使用検証期間結果を見た後のルール修正、特徴量追加、閾値調整、期間選択に関係する欠損や異常を削除すると結論が有利になる可能性があります。除外なし、保守的代入、最悪値代入を比較し、削除前後の未使用検証期間の閲覧回数、閲覧後変更数、候補総数、PBO、選択補正後指標、最終未接触成績を併記します。

限界 06負の対照

主分析だけでなく「仕様を完全凍結した複製を研究者から隠し、一回だけ評価して、反復閲覧版との成績差を比較する」を実行します。対照でも同程度の成績が出る場合は、戦略固有の優位性より処理規則や共通市場要因を疑います。

限界 07前向き監視

通過後はモデル版数、閲覧回数、変更理由、最終ホールドアウトの残量、前向き誤差を逐次記録し、事前予測区間からの逸脱が続けば停止します。過去データへ戻って即座に再最適化する前に、実装差と構造変化を切り分けます。

限界 08共通故障と表示責任

複数手法が一致しても、同じ誤った入力や未使用検証期間結果を見た後のルール修正、特徴量追加、閾値調整、期間選択を共有すれば同時に誤ります。損失側の下位分位、失敗シナリオ、未解決差を利益側と同じ視認性で表示し、検査件数の多さを正しさの証明にしません。

10A

未使用検証期間の再利用に対する独立監査・敵対的検証所見

数式、図表、データ定義、反証可能性を別々の検査線で再確認します。

数式監査では、分子・分母、符号、単位、定義域、条件付き仮定を一式で確認しました。本件の重要注意点は次のとおりです。PBOの相対順位ω_s=r_s/(N+1)は、最下位を1、最上位をNとする向きを明示しないとロジットの符号が逆転します。N+1で割ることで0と1の端点を避けます。独立検定を仮定するFWER式は説明用の上限・基準であり、相関候補の最終補正ではありません。検証期間を見た後の仕様変更は候補数へ含めます。 式が正しくても入力列の定義が違えば同じ記号が別の量を表すため、コード上の列名、通貨、時間単位、手数料符号まで照合対象にします。

図表監査では、第一図を未使用検証期間の再利用の主診断、第二図を二変量感度、第三図を未接触期間の検証統計量の依存性保持分布、第四図を因果伝播へ役割分離しました。色は確率や実測成績ではなく事前ゲートまでの判定余裕であり、軸の単位、0の位置、分位点、打切り、上下限をキャプションと一致させます。SVGの線が滑らかでも推定精度を意味せず、曲率や境界位置を説明するための可視化として扱います。

敵対的検証では、最も不利な一例を恣意的に選ぶのではなく、仕様を完全凍結した複製を研究者から隠し、一回だけ評価して、反復閲覧版との成績差を比較するという負の対照を置き、時系列順序と学習・検証境界を維持するパージ付き分割を複数のブロック長で再標本化します。さらに未記録の手動試行、共有されたスクリーンショット、非公開の期間選択を未観測要因として上下限へ入れます。実装者が結果を知った後にブロック長、乱数シード、除外規則、図の範囲を変えられないよう、反復回数と全設定を分析前に固定します。

独立監査上の結論は「探索履歴を含む補正後も有意な優位性が残り、一回限りの未接触データで事前基準を満たすこと」を満たすかに限定します。これは優れた戦略や将来利益を認証するものではありません。重大な照合差、数式の前提外、図表と表の不一致、ブロック長での符号反転、負の対照との差不足が一つでもあれば保留または棄却とし、前向きデータでモデル版数、閲覧回数、変更理由、最終ホールドアウトの残量、前向き誤差を追跡します。

10

未使用検証期間の再利用に関係する方法論文献

一次方法論と公式プラットフォーム資料。

  1. White, H. (2000). A Reality Check for Data Snooping. Econometrica.
  2. Hansen, P. R. (2005). A Test for Superior Predictive Ability. JBES.
  3. Bailey, D. H. et al. The Probability of Backtest Overfitting.
  4. Bailey, D. H. & López de Prado, M. The Deflated Sharpe Ratio.
  5. Efron, B. (1979). Bootstrap Methods: Another Look at the Jackknife. Annals of Statistics.
  6. Politis, D. N. & Romano, J. P. (1994). The Stationary Bootstrap. JASA.
  7. Newey, W. K. & West, K. D. (1987). A Simple, Positive Semi-definite, Heteroskedasticity and Autocorrelation Consistent Covariance Matrix. Econometrica.
  8. Lo, A. W. (2002). The Statistics of Sharpe Ratios. Financial Analysts Journal.
  9. TradingView Pine Script® documentation: Strategies.

「未使用検証期間の再利用」に付した参考文献は方法論上の背景を示すもので、本稿の教育用の例示値や個別のバックテスト結果を認証するものではありません。TradingView公式資料はプラットフォーム仕様の確認に、統計論文は不確実性・選択補正の根拠に用います。

08

未使用検証期間の再利用に関するよくある質問

未使用検証期間を見るだけで汚染ですか?

見ることで知識は得ます。その知識がモデル選択、コード、パラメータ、採否へ影響したとき、実質的な汚染になります。

その期間を監視用に再利用できますか?

可能ですが、その期間に形作られた版の「最終未使用テスト」とは呼ばず、既知の検証データとして扱います。

ホールドアウトはいくつ必要ですか?

万能な数はありません。最終版に対して少なくとも一つ、意思決定から独立した評価を残す統治工程が重要です。

バックテスト診断

未使用検証期間の再利用を踏まえて、そのバックテストを信頼できるか

完成した資本曲線だけで判断せず、TradingViewの取引一覧から、利益集中、ドローダウン経路、取引順序、費用感度、系列依存をまとめて確認してください。

未使用検証期間の再利用に関する重要な注意事項

本記事は、教育用に構成したバックテストの破綻例を、教育・情報提供目的で記述的に分析するものです。投資助言、売買シグナル、将来予測、利益保証ではありません。バックテスト結果は、データ、コード、ブローカーエミュレーターの前提、コスト、サイジング、市場構造で変わります。TradingViewはTradingView, Inc.の商標です。SG Groupは独立したサービスであり、TradingViewによる承認・後援・提携を主張しません。

対応言語ページ: 英語版の記事を読む