Vijf aannames, vijfenzeventig keer geen uitspraak

Er kwamen deze week zestien nieuwe tests bij, drie hypotheses werden aangenomen en één verloor haar status weer. Toch is het getal dat het beste beschrijft wat dit lab doet een ander: vijfenzeventig.

Negen van de tien keer luidt het antwoord: geen uitspraak

Er staan op dit moment 84 hypotheses in de test. Tachtig daarvan heeft de machine zelf bedacht; de overige vier zijn de handmatig opgestelde beginhypotheses waarmee het onderzoek ooit startte. Van die 84 zijn er vijf aangenomen, vier afgewezen — en 75 staan op inconclusive: geen uitspraak.

"Geen uitspraak" betekent niet dat een idee slecht is, en zeker niet dat het goed is. Het betekent dat het bewijs te dun is om er iets over te zeggen. Voor de meeste hypotheses is dat op dit moment de eindstand. Een verkoper zou die vijfenzeventig nooit noemen en het alleen over de vijf hebben. Wij noemen beide, en in deze volgorde.

Deze week ging er ook één aanname áf

Nieuw aangenomen zijn mom_tip_real_rate_easing_63d, rs_efa_spy_nonus_leadership_63d en rs_ewj_spy_dollar_cycle_63d. Niet langer aangenomen: trend_tip_real_yield_easing_120d.

Die laatste verdient de meeste aandacht. Een aanname is hier geen medaille die blijft hangen. Elke hypothese wordt opnieuw getoetst, ook op data die er sinds de vorige ronde bij is gekomen. Wat vorige week door de poort paste, past er deze week niet meer door. Dat is ongemakkelijk, en dat hoort zo: een poort die nooit iets terugneemt, is een poort die niet meet.

Twee dingen vallen verder op. Beide TIP-hypotheses — over inflatiegekoppelde obligaties — gaan over hetzelfde onderliggende idee, maar met een ander terugkijkvenster. De variant over 63 dagen kwam erdoor, die over 120 dagen viel af. Als een idee zo sterk afhangt van de gekozen periode, is terughoudendheid gepast. En van de vijf aangenomen hypotheses vergelijken er drie buitenlandse aandelen met Amerikaanse: VGK, EFA en EWJ, telkens tegenover SPY. Vijf aannames klinkt als vijf inzichten. Het zijn er in de kern waarschijnlijk minder.

Waarom de lat op 26 staat en niet op 19,55

Sinds de start zijn er 432 ruwe trials gedaan: elke geteste variant, ooit, bij elkaar opgeteld. Dat getal overdrijft hoeveel kansen we onszelf hebben gegeven, want twintig varianten op hetzelfde idee zijn geen twintig onafhankelijke gokken.

Daarom meten we hoeveel écht verschillende gokken het zijn. Dat doen we door te kijken hoe sterk de resultaten van alle strategieën met elkaar meebewegen buiten de testperiode. De uitkomst nu: 19,55 effectief onafhankelijke trials, tegen 17,64 een week geleden. De gemiddelde onderlinge samenhang tussen strategieën daalde van 0,119 naar 0,104. De zoektocht werd deze week dus iets breder, niet smaller.

Die effectieve onafhankelijkheid bepaalt hoe hoog de lat ligt bij de Deflated Sharpe: een prestatiemaat die corrigeert voor het feit dat je veel hebt geprobeerd. Hoe vaker je zoekt, hoe mooier puur toeval eruit gaat zien, en die correctie haalt dat er weer uit. De poort rekent met N = 26. Dat getal ontstaat zo: we nemen het lopende maximum van de effectieve onafhankelijkheid (afgerond 20), leggen daar een ondergrens onder gelijk aan het aantal families (zes) en tellen de eerder handmatig gedane studies erbij op. Het lopende maximum is bewust gekozen: de lat kan nooit zakken doordat je later meer op elkaar lijkende varianten toevoegt.

Een PBO van twintig procent — gunstig, geen vrijbrief

PBO staat voor de kans dat wat in de test het beste leek, buiten de test onder de middenmoot uitkomt. Die staat nu op 0,201, oftewel ongeveer twintig procent, gemeten over veertien CSCV-blokken (steeds een ander stuk geschiedenis om op te trainen en een ander stuk om op te toetsen). Vorige week was het 0,207.

Twintig procent ligt ruim onder de vijftig procent die je bij puur toeval zou verwachten. Dat is een gunstig cijfer. Het betekent alleen niet dat rendement verzekerd is: PBO zegt iets over de stabiliteit van de rangorde, niet over de hoogte van de opbrengst. Grofweg: van elke vijf strategieën die in de test bovenaan staan, zakt er ongeveer één buiten de test onder het midden.

Wat de vorm van de zoektocht verraadt

Van de tachtig zelfbedachte hypotheses zit er geen enkele in een "lookback-ladder" — nul procent draait om hetzelfde idee met alleen een ander terugkijkvenster. De machine varieert dus niet op goedkope wijze. Er zijn zes families (momentum, ratio_trend, rel_strength, reversal, trend, vix_regime), 41 verschillende signaal-tickers en 21 verschillende terugkijkvensters. Het meest gebruikte signaal is de volatiliteitsindex VIX (acht keer), gevolgd door HYG, KRE, RSP en TLT. Inmiddels zijn 177 signaturen uitgefaseerd; tachtig staan er live.

De rem zit elders. Elke nieuwe ruwe trial voegde deze week gemiddeld 0,119 effectief onafhankelijke trial toe. Vertaald: er zijn ruwweg acht nieuwe tests nodig voor één werkelijk nieuwe gok. De machine raakt sneller door haar ideeën heen dan door haar rekentijd.

Wat een aanname hier wel en niet is

Alles wordt getoetst op data ná 31 december 2018 — materiaal dat bij het bedenken van de hypotheses niet is gebruikt. Transactiekosten van 5 basispunten per omschakeling zitten in de test. En een aangenomen hypothese wordt kennis voor het brein achter de portefeuille, geen automatische handelsregel: er volgt geen order uit.

Dit is een papieren portefeuille, bedoeld als illustratie van een open experiment. Het is geen beleggingsadvies en geen koop- of verkoopaanbeveling.