Tülu 3 405B 是由 Allen Institute for AI 开发的开源语言模型，具有 4050 亿参数。

DeepSeek-V3是一个强大的Mixture-of-Experts (MoE) 语言模型，拥有671B的总参数量，每次激活37B参数。

DRT-o1-14B是一个神经机器翻译模型，旨在通过长链推理来提升翻译的深度和准确性。

Skywork-MoE是一个具有146亿参数的高性能混合专家(MoE)模型，拥有16个专家和22亿激活参数。

Vidu是由生数科技联合清华大学发布的中国首个长时长、高一致性、高动态性视频大模型。

MoE-LLaVA是一种基于大规模视觉-语言模型的专家混合模型，展现出在多模态学习中出色的性能。

Vary 是一个用于大规模视觉语言模型的官方代码实现。