Mocode-1B-Model

Mocode-1B-Model模型描述Mocode 统一模型集成 7 个 embeddingMLP 子模型采用 GGUF v3 格式封装为单一文件。子模型前缀模型名任务类别数deepseekDeepSeekQualityClassifier数据质量分类2disclawDisclawClassifier法律任务分类10intentTrainedIntentClassifier意图分类8mathMathIntentClassifier数学意图分类5muiceMuiceClassifier对话意图分类5qiaojieQiaojieClassifier中文主题分类10wikitextWikiTextTopicClassifier英文主题分类10架构每个子模型: Embedding(128000, 1024) MLP(2048→1024→512) Classifier共享词表: 128,000 tokens总参数量: 950,685,255张量数: 168 (7 子模型 × 24)张量命名:{子模型前缀}.{层名}(如intent.embedding.weight)32 字节对齐F32 精度兼容 llama.cpp元数据全局元数据: model.name, model.vocab, model.submodels 等子模型元数据:submodel.{key}.*(name/type/task/n_classes/labels/hidden_dims 等)框架PyTorch 训练GGUF v3 格式封装。