Nyalai
お問い合わせ
定量的システムのための検証機関

問題はもはや、戦略を生み出すことではない。
どの戦略が信頼に値するのかを知ることである。

信じるのではなく、知る。

Nyalaiは、クオンツ・ファイナンスの確率的システムに対して二値の判定を返す。すべての候補は、五つの対抗的検証段階に照らして検討される。適用されない検証段階、または計算できない検証段階は、その旨が報告される。公表されるすべての判定には日付が付され、公に引用することができる。Nyalaiが評価する戦略は、意思決定の第四象限、すなわちペイオフが複雑で分布の裾が厚い領域で運用される。検証段階の仕様と閾値は、クリエイティブ・コモンズ・ゼロの下で公表されている。

構成された二つの見本

拒否の姿と、通過する場合の姿。

下に示す二つの文書は、いずれも構成された見本であり、判定ではない。一つ目は拒否を示す。戦略は検証段階1aを通過し、検証段階2で不合格となり、それ以降は検定されない。二つ目は、CALIBRATEDの判定書がどのような形をとるかを示す。公表された判定書とその状態は、この頁の下部に掲げている。

見本 · 判定ではない見本N-01を表示したスマートフォン。構成された例、拒否原則v0.3.3.1、NOT-CALIBRATED、見本であり判定ではない。検証段階1a DSR 0.968 PASS。検証段階2 レジーム:危機のシャープレシオ−4.57、区間−7.63から−1.73、FAIL。検証段階3、4、5は未検定。構成されたレジーム、HMMは未実行。検証段階2で停止。見本 N-01 · 構成された例判定ではない · レジームは構成されたもの、HMMは未実行見本を読む →見本 · 判定ではない見本R-01を表示したスマートフォン。構成された例、拒否原則v0.3.3.1、CALIBRATED、見本であり判定ではない。検証段階1a DSR 0.97 PASS。検証段階2 レジーム:3レジーム中3が正、PASS。検証段階3 並べ替え検定:p = 0.018、PASS。検証段階4 較正:ECE = 0.031、PASS。検証段階5 信頼区間:[0.024, 0.118]、PASS。監査ハッシュなし、構成された例。見本 R-01 · 構成された例判定ではない · 数値はいかなるシステムについても観測されていない見本を読む →
われわれが立つ業界

多重検定の問題を、一つの数字と一つの定義で。

リターンを説明するために数百のファクターが提案されてきた。単一の検定を前提とした有意性の基準は、これほど多くが試される状況では成り立たない。

316
期待リターンのクロスセクションを説明するために提案されたファクター
著者らの集計で少なくとも316。313本の論文から収集された。そのうち250本は主に金融・経済・会計の最上位誌に掲載された論文で、63本はワーキングペーパーである。著者らは、これらのファクターの多くは偽の発見である可能性が高く、新しいファクターは今や2.0ではなく3.0のt統計量を超えるべきだと結論づけている。
Harvey, Liu & Zhu… and the Cross-Section of Expected Returns · Review of Financial Studies 29(1), 5-68 · 2016
PBO
バックテスト過学習の確率
インサンプルで最良として選ばれた設定が、アウト・オブ・サンプルにおいて、試されたすべての設定の中央値を下回る順位となる確率。選択プロセスごとに個別に推定される。
Bailey, Borwein, López de Prado & ZhuThe probability of backtest overfitting · Journal of Computational Finance 20(4), 39-69 · 2017
問題の所在

戦略が運用される場所:第四象限。

ナシーム・タレブが2008年に公表した分類では、意思決定は二つの軸に沿って分かれる。ペイオフの構造が単純か複雑か、そして基礎にある不確実性が裾の薄い分布にあるか裾の厚い分布にあるか、である。クオンツ戦略は、複雑かつ裾の厚い領域で運用される。非線形のペイオフ、上限のない損失の可能性、レジームの転換である。われわれの拒否原則は、ここでこそ統計的推論が最も難しく、モデルの失敗が最も高くつくと論じる。そこで運用されるシステムには、それを構築した当事者の外部にある、追加の対抗的な層が相応しい、というのがNyalaiの立場である。これはNyalaiの立場であり、規制上の要件ではない。モデルリスク管理に関する監督上の指針、米国においてはSR 11-7に代わった2026年4月のSR 26-2は、銀行組織を対象としている。

Nyalaiは、第四象限のリスクを消し去るのではない。Nyalaiは、そのリスクの下で下される意思決定を監査可能にし、基礎データが支持しない裾の薄い仮定を評価に必要とする戦略を拒否する。五つの検証段階は、この規律の運用上の形である。各検証段階は、ジョセフ・シモニアンがJournal of Financial Data Science誌上で定式化したモジュール型検証の原理に従い、その問いにふさわしい統計的枠組みを用いる。

公表済みの判定書と歴史的評価

判定書002。歴史的評価001。見本R-01。

各項目から全文の頁を開くことができる。判定書は、提出されたシステムについて計測されたことを報告する。見本は、通過する判定書の形を示すために構成された例示であり、判定ではない。

運用配備の語彙

モデル信頼水準。
MTL-1の未検定からMTL-5のライブまで。

確率的予測システムにどれだけの信頼を置くべきかについての、共有された語彙である。番号は昇順。各水準は、特定の検証段階の実証的な通過によって定義される。各水準は、公に宣言された運用配備の文脈に結び付けられる。厳密な入れ子。水準ごとの二値性。公開で争い得る。時間の限定を伴う。

MTL1
未検定
独立の検証は行われていない。公開の方法論はない。実績の記録はない。
生産前の研究 · 資本配分には用いない
MTL2
名目的に較正済み
少なくとも200件の解決済み観測からなる文書化された台帳の上で、検証段階1と検証段階4(統計的脆弱性と確率的較正)を通過する。
助言シグナル · 唯一の配分シグナルとしては決して用いない
MTL3
頑健に較正済み
MTL-2に加え、隠れマルコフモデルの下でのレジーム横断的頑健性を通過する。失敗の様式は公開で文書化される。
マルチシグナル・ポートフォリオ · 限度を伴う計測されたエクスポージャー
MTL4
対抗的に検証済み
MTL-3に加え、誘導探索の安全性(Aronson & Masters 2013)とブートストラップ信頼区間を通過する。独立性原則(規則7)が執行される。
主たる配分シグナル · 機関規模
MTL5
継続的にライブ検証済み
MTL-4に加え、逐次のライブ判定更新と自動のドリフト検出を通過する。要請に応じ、LPに監査記録の全文を供する。
ミッション・クリティカルなライブ・トレーディング · 規模を伴う運用配備
判定が置かれる場所

判定書ニュースルーム。

すべての判定は、日付が付され、引用可能な、長文の文書である。

判定2026年9月28日公表

判定書 002:外部からの提出に対する判定の撤回

外部からの提出。NOT-CALIBRATEDとして公表された判定は、訂正通知CN-003によって撤回された。この訂正は、戦略の成否について結論を示すものではない。この頁は、第2版の本文と第2.1版の暫定注記を記録として保持している。