الشركات الصينية تطور نماذج لغات كبيرة خفيفة الوزن. النموذج الخفيف الوزن، المعروف ايضا باسم نموذج كبير أصغر، يشير بشكل أساسي إلى تلك التي تتطلب عدد أقل من المعلمات. هذا يعني أنها ستحصل على قدرة محدودة على معالجة وتوليد النص مقارنة بالنماذج الكبيرة. ببساطة، هذه النماذج الصغيرة مثل السيارات المدمجة.