الشركات الصينية بتطور نماذج لغات كبيرة خفيفة الوزن. النموذج الخفيف الوزن، المعروف أيضا باسم نموذج كبير أصغر، يشير أساسا إلى تلك التي تتطلب عدد أقل من المعلمات. وهذا يعني أنها ستحصل على قدرة محدودة على معالجة وتوليد النص مقارنة بالنماذج الكبيرة. ببساطة، هذه النماذج الصغيرة مثل السيارات المدمجة.