AI 猜不出「小嘴 more 了 mee」:谐音梗测试该怎么设计
一句被改成中英混排、还带错别字的中文谐音梗「小嘴 more 了 mee」,让几个主流大模型全都答偏。文章拆解这句话的原意与难点,分析模型为什么倾向于给出多解而非押注,并给出可复现的测试方法:多次采样、拆分识别与解释、设置对照组,同时讨论这类“不规范输入”测试到底有没有意义。
标签
共 1 篇相关文章
一句被改成中英混排、还带错别字的中文谐音梗「小嘴 more 了 mee」,让几个主流大模型全都答偏。文章拆解这句话的原意与难点,分析模型为什么倾向于给出多解而非押注,并给出可复现的测试方法:多次采样、拆分识别与解释、设置对照组,同时讨论这类“不规范输入”测试到底有没有意义。