ચીની કંપનીઓ હળવા વજનના મોટા ભાષાના નમૂનાઓ વિકસાવી રહી છે. હળવા વજનનું મોડેલ, જેને નાના મોટા મોડેલ તરીકે પણ ઓળખવામાં આવે છે, તે મૂળભૂત રીતે ઓછા પરિમાણોની જરૂર હોય છે. આનો અર્થ એ છે કે મોટા મોડેલોની તુલનામાં તેમની પાસે પ્રક્રિયા કરવાની અને ટેક્સ્ટ જનરેટ કરવાની મર્યાદિત ક્ષમતા હશે, સરળ શબ્દોમાં કહીએ તો, આ નાના મોડેલો કોમ્પેક્ટ કાર જેવા છે.