Causal Masking

Tecnica usata nei Transformer autoregressivi che, tramite una maschera, impedisce a ciascuna posizione di attendere ai token futuri, ammettendo l'attenzione solo alle posizioni precedenti e a sé stessa. Garantisce che la predizione dipenda solo dal passato.