Nessun modello proprietario, nessuna scatola nera. Il metodo sta in sei passaggi, e ognuno è pensato per poter essere smentito.
Posizioni chiuse, ricostruite dai registri pubblici. Nessun dato fornito da terzi, nessuna dichiarazione degli utenti.
Prima di ogni classifica è richiesto un minimo di posizioni chiuse. Un operatore con tre operazioni non è paragonabile a uno con tremila.
Il punto di confronto di un operatore è calcolato escludendolo dal calcolo. Senza questa precauzione, tutti battono la propria media.
La posizione è stabilita su un periodo, poi verificata sui successivi. Un vantaggio che non sopravvive al cambio di periodo non è un vantaggio.
Se il metodo dà lo stesso risultato su dati mescolati, non misura nulla. Questo controllo gira a ogni ricostruzione.
Mai aggiornamenti per aggiunte. La base riparte da zero e ripercorre tutto lo storico, anche precedente alla creazione dello strumento.
Se uno di essi fallisce, la base della notte non viene pubblicata e resta in servizio la precedente. Un sito che mostra un numero sbagliato è peggio di un sito che non mostra nulla.
| Controllo | Cosa impedisce |
|---|---|
| Numero di operatori | Una base troncata da un incidente di lettura |
| Numero di fasce | Una suddivisione rotta che renderebbe le posizioni non confrontabili |
| Nessun operatore senza posizioni | Righe vuote contate come operatori |
| Presenza delle perdite totali | Il difetto esatto che aveva falsato la nostra prima misura |
| Crescita del tasso di successo | Una classifica invertita o casuale |
| Calo delle perdite totali | La stessa verifica, presa dall'altro capo |
| Dimensione della griglia di riferimenti | Riferimenti calcolati su troppi pochi casi |
Sull'indicatore ponderato per gli importi, la seconda e la terza fascia si invertono. L'inversione viene da pochi operatori con volumi molto grandi, che pesano molto in una media ponderata. Avremmo potuto togliere l'indicatore o smussare gli estremi. Abbiamo preferito lasciarlo visibile e spiegarlo: i due indicatori non ponderati, invece, crescono regolarmente senza eccezioni.