🧠 Young-R1金融推理模型
这是一个使用 mergekit 工具创建的预训练语言模型融合体。
📋 融合详情
🔧 融合方法
本模型采用 SCE (Sequence-level Coordinate Encoding) 融合方法,以 ./DeepSeek-R1-Distill-Qwen-7B 作为基础模型进行融合。
📦 融合模型
本次融合包含了以下模型:
./Fin-R1
⚙️ 配置信息
创建本模型使用的 YAML 配置如下:
models:
- model: ./DeepSeek-R1-Distill-Qwen-7B
- model: ./Fin-R1
merge_method: sce
base_model: ./DeepSeek-R1-Distill-Qwen-7B
parameters:
max_iter: 1000
normalize: true
int8_mask: true
tokenizer_source: base
dtype: float16
🌟 模型特点
- 以
DeepSeek-R1-Distill-Qwen-7B为基础,具备强大的通用语言理解能力 - 融合
Fin-R1模型,增强金融领域推理和分析能力 - 采用先进的 SCE 融合技术,实现参数的最优整合
📄 许可证
本模型遵循基础模型的相同许可证。详细信息请参考原始模型许可证。
🙏 致谢
- 感谢 mergekit 团队提供的模型融合工具
- 感谢原始模型作者们的杰出工作