شرکت های چینی در حال توسعه مدل های زبان بزرگ سبک هستند. مدل سبک ، که به عنوان یک مدل بزرگ کوچکتر نیز شناخته می شود ، اساساً به آنهایی که به پارامترهای کمتری نیاز دارند ، اشاره دارد. این بدان معنی است که آنها در مقایسه با مدل های بزرگ ، ظرفیت محدود برای پردازش و تولید متن دارند. به عبارت ساده ، این مدل های کوچک مانند اتومبیل های جمع و جور هستند.