OTICA : l'ICA par transport optimal

après blanchiment, toutes les directions ont la même variance : seules les moins gaussiennes désignent les sources

1 · MODÈLE ET CRITÈRE

$$X=AS,\qquad Z=\hat\Sigma^{-1/2}(X-\bar X)$$$$Y=WZ,\qquad W^\top W=I$$
$$F(W)=\sum_{j=1}^{d}W_2^2\big(Y_j,\,\mathcal N(0,1)\big)$$$$=\sum_{j=1}^{d}\frac1n\sum_{i=1}^n\big(y_{(i)j}-q_i\big)^2$$

\(S\) : deux sources indépendantes de variance 1 ; \(A\) : mélange inconnu. Les composantes \(Y_j\) ont déjà variance 1 : il suffit de trier chacune et de la comparer aux moyennes \(q_i\) de \(\mathcal N(0,1)\) sur ses tranches de probabilité \(1/n\). En dimension 2, \(W\) est une rotation d'angle \(\theta\).

2 · À TOI : FAIS TOURNER LES AXES

données blanchies \(Z\) et axes \(w_1, w_2\) — glisse pour tourner
critère \(F(\theta)\) découvert au fil de l'exploration — période 90° (permutation et signe)
loi de \(y_1=w_1^\top z\) et densité \(\mathcal N(0,1)\)
loi de \(y_2=w_2^\top z\) et densité \(\mathcal N(0,1)\)
sources :

Tourne les axes dans le nuage (ou ← →, Maj : 5°) : quand ils longent les bords du carré, les deux histogrammes s'aplatissent et \(F\) est maximal. À 45° de là, chaque composante mélange les deux sources à parts égales et ressemble le plus à une gaussienne. Essaie ensuite « 2 gaussiennes ».

3 · RAPPELS

4 · CLASSIFICATION

sourcesnuage blanchi\(F(\theta)\)sources retrouvées
2 uniformescarré tournémaximum net, côtés du carréoui
2 Laplaceétoile à quatre branchesmaximum le long des branches, plus bruité (queues lourdes)oui
uniforme + Laplacebande à bords francs, étirée en pointesmaximum netoui
uniforme + gaussiennebande à bords francs, bords flous dans l'autre sensmaximum moins haut : une seule source contribueoui (au plus une gaussienne)
2 gaussiennesdisqueplat, au bruit prèsnon : toute rotation convient