Zephyr 141B-A35B
huggingfaceh4/zephyr-orpo-141b-a35b
模型权重Zephyr 141B-A35B is A Mixture of Experts (MoE) model with 141B total parameters and 35B active parameters. Fine-tuned on a mix of publicly available, synthetic datasets.
It is an instruct finetune of Mixtral 8x22B.
#moe
模态
上下文
66K
发布时间
2024年4月12日
知识截止日期
2024年1月
目前无法通过 EU 区域内路由使用。 区域内路由文档