Kiinalaiset yritykset kehittävät kevyitä suuria kielimalleja. Kevyempi malli, joka tunnetaan myös pienempänä suurena mallina, viittaa periaatteessa niihin, jotka vaativat vähemmän parametreja. Tämä tarkoittaa, että niillä on rajoitettu kapasiteetti käsitellä ja tuottaa tekstiä suuria malleja verrattuna. Yksinkertaisesti sanottuna nämä pienet mallit ovat kuin kompakteja autoja.