字節跳動擴散語言模型 iLLaDA 媲美 Qwen2.5

iLLaDA 是一個 8B 參數的擴散語言模型，生成方式不同於 ChatGPT 這類自回歸模型。在基礎層級上，iLLaDA 的表現可與 Qwen2.5 並駕齊驅，但經過微調後表現稍遜。此模型由人民大學與字節跳動研究人員共同發表。