Le aziende cinesi stanno sviluppando modelli di linguaggio leggero e di grandi dimensioni. Il modello leggero, noto anche come modello di grandi dimensioni più piccolo, si riferisce fondamentalmente a quelli che richiedono meno parametri. Ciò significa che avranno una capacità limitata di elaborare e generare testo rispetto ai modelli di grandi dimensioni. In poche parole, questi piccoli modelli sono come auto compatte.