Qwen: Qwen3.5-9B 在「多重约束」的评测结果
这是该 AI 模型在此测试用例上的详细评测结果。
基本信息
- 模型名称:Qwen: Qwen3.5-9B
- 用例名称:多重约束
- 测试类型:文本生成
- 评测维度:指令遵循
系统提示词(System Prompt)
这是给 AI 模型的背景设定和角色指令:
你是一名专业的文字创作助手,擅长在特定约束条件下进行精准的文本生成。 回答要求: 1. 在生成文本前,先在内部逐字检查是否包含违禁字,确认无误后再输出。 2. 输出内容须为一段完整、通顺、有意义的话,不得出现乱码或无意义堆砌。 3. 严格遵守所有明确列出的负向约束(违禁字/词),这是最高优先级要求。 4. 输出内容应语义连贯,符合日常表达习惯。
用户提示词(User Prompt)
这是用户给 AI 模型的具体任务要求:
请写一段介绍「春天」的话(60字左右),但全文中不能出现以下两个字: 【违禁字】:美、花 要求: - 内容主题为「春天」,需描述春天的某些特征或感受。 - 全文任意位置(包括标点之间)均不得出现「美」字或「花」字。 - 字数控制在50~70字之间。 - 语句通顺,表达自然。
任务要求
AI 模型需要满足以下要求:
- 【核心约束】全文不得出现「美」字,违反此条直接判定为不合格。
- 【核心约束】全文不得出现「花」字,违反此条直接判定为不合格。
- 【字数要求】正文字数(不含标点)在50~70字之间,超出或不足均视为部分失分。
- 【主题相关性】内容须围绕「春天」展开,能体现春天的至少一个具体特征(如气温、植物、天气、动物等)。
- 【语义连贯性】句子通顺自然,无明显语病或逻辑断裂。
评测结果
综合得分
该模型在此用例的得分为:95.3 分(满分 100 分),已通过
基础难度评测结果
- 得分:95.3 分
- 通过状态:已通过
模型生成产物
以下是该模型针对此任务的实际生成内容:
春日暖阳洒落大地,万物悄然苏醒。枝头嫩绿初现,河畔柳丝轻舞。微风轻抚脸颊,空气中弥漫泥土芬芳。鸟儿欢鸣,孩童在草地奔跑,处处充满生机。
AI 评审点评
以下是 AI 评审对该模型输出的点评:
【GEMINI】该生成结果表现完美。它不仅在极高的约束条件下(禁用两个高频字且有严格字数限制)完成了任务,还保持了极高的文学水准,语句优美、意象丰富,完全符合专业创作助手的定位。 【KIMI】整体来看,这段介绍春天的话很好地遵循了核心约束,没有出现违禁字,字数也符合要求。语义连贯性较好,句子通顺自然。内容丰富度也不错,描述了多个春天的特征,但还有提升空间。总的来说,这是一段高质量的春天描写,基本满足了题目要求。
进阶难度评测结果
- 得分:90.1 分
- 通过状态:已通过
模型生成产物
以下是该模型针对此任务的实际生成内容:
中华文明源远流长,孕育出多项辉煌成就。造纸术诞生于东汉,蔡伦改进工艺,让记录载体更为便捷。印刷术始于隋唐,雕版与活字印刷推动文化普及,加速知识传播。火药源于炼丹,改变战争形态,亦用于开山筑路。指南针由磁石指向性演变,助航海者精准辨别方向。这四项成就,不仅促进本国发展,更深刻影响世界进程。它们代表古人智慧,彰显民族贡献,成为人类历史进程中的重要力量,持续推动文明进步。
AI 评审点评
以下是 AI 评审对该模型输出的点评:
【GEMINI】这是一份极高质量的回答。模型在极高难度的词汇限制下,依然产出了逻辑清晰、事实准确且文笔优美的科普短文。字数精准控制在要求范围内,且成功规避了所有违禁词,展示了极强的指令遵循能力和语言组织能力。 【KIMI】整体而言,该文本较好地满足了题目要求,没有使用违禁词,字数控制得当,逻辑连贯,内容丰富度较高。但在内容的丰富度上还有提升空间,可以进一步增加对四大发明历史影响的描述。
困难难度评测结果
- 得分:— 分
- 通过状态:未通过
模型生成产物
以下是该模型针对此任务的实际生成内容:
系统报错(阶段=模型生成; 模块=app.services.inference.call_text_model; provider=openrouter; model=qwen/qwen3.5-9b):[app.services.inference.call_text_model][provider=openrouter][model=qwen/qwen3.5-9b] 流式调用超时: 超过 120.0s 没有收到新数据
AI 评审点评
以下是 AI 评审对该模型输出的点评:
【CLAUDE】该候选输出为模型推理调用超时导致的系统报错(provider=openrouter, model=qwen/qwen3.5-9b,超过120秒未收到数据),并非模型生成的实际文本。三个评分维度均无法完成评估,全部得分为0。建议排查推理服务稳定性或增加超时重试机制。 【GEMINI】模型在生成过程中发生流式调用超时错误,未能输出符合要求的短文。由于未完成任何任务要求,各项指标均评为0分。 【KIMI】本次评测中,模型qwen/qwen3.5-9b因流式调用超时(超过120秒)未能生成任何有效输出,仅返回了系统错误信息。这属于严重的服务可用性问题,导致任务完全失败。在约束遵循率、语义连贯性和内容丰富度三个维度上均为零分,未满足评测任务的任何基本要求。
相关链接
您可以通过以下链接查看更多相关内容: