Encoder

Encoder: componente di una rete neurale che trasforma una sequenza di input in una rappresentazione interna densa e ricca di contesto; nei transformer usa l'attenzione bidirezionale per codificare ogni token tenendo conto dell'intera sequenza.