Phixtral 2x2 8
简介 :
phixtral-2x2_8是第一个由两个microsoft/phi-2模型制作的混合专家模型,受到mistralai/Mixtral-8x7B-v0.1架构的启发。其性能优于每个单独的专家模型。该模型在AGIEval、GPT4All、TruthfulQA、Bigbench等多个评估指标上表现优异。它采用了自定义版本的mergekit库(mixtral分支)和特定配置。用户可以在Colab notebook上以4位精度在免费的T4 GPU上运行Phixtral。模型大小为4.46B参数,张量类型为F16。
需求人群 :
可用于文本生成、模型评估、深度学习研究等领域
总访问量: 29.7M
占比最多地区: US(17.94%)
本站浏览量 : 66.5K
使用场景
在深度学习研究中使用phixtral-2x2_8模型进行文本生成
利用phixtral-2x2_8模型进行模型评估
在GPU上以4位精度运行phixtral-2x2_8模型
产品特色
使用混合专家模型进行文本生成
在Colab notebook上以4位精度在GPU上运行模型
模型大小为4.46B参数,张量类型为F16
AIbase
智启未来,您的人工智能解决方案智库
简体中文