موازية

لدى Moonshot AI مكتبة MoonEP مفتوحة المصدر، وهي مكتبة اتصالات متوازية للخبراء (EP) لأعباء العمل الموزعة لمزيج الخبراء (MoE). أعلن…