บริษัทจีนกําลังพัฒนาแบบจําลองภาษาขนาดใหญ่ที่มีน้ําหนักเบา รุ่นขนาดเล็กที่รู้จักกันในนามแบบจําลองขนาดใหญ่เล็ก ๆ โดยพื้นฐานหมายถึงสิ่งที่ต้องการปาราเมตรน้อยกว่านี้ นั่นหมายความว่าพวกเขาจะมีศักยภาพในการประมวลผลและสร้างข้อความที่จํากัดเมื่อเทียบกับรุ่นใหญ่ โดยง่าย ๆ รุ่นเล็ก ๆ เหล่านี้คล้ายกับรถยนต์ขนาดเล็ก