如果有时间可以配合讯飞星火再查一遍，讯飞词库最新最全01 测试文本介绍一、测试文本我请几个软件帮忙查找下面这段公文的错误，再看它们的结果其中错误地方用彩色标记关于下发《阿里巴巴公集团024年投资控股公司管理工作方案》的通知各所属单位：为进一步提高阿里巴巴集团投资建设管理能力，落实提升“精意管理年”相关要求，有效承接国家投资控股公司管理制度，持续完善与公司业务发展相匹配的战略、骰子、财务管理制度体系2024年统筹组织各控股管理单位，严格落实公司制度管理要求，开展项目建设领域的体系建设在压实管理责任、过程管理提效、数字化建设、管控质量安全、人员队伍建设、财务管控专项提升等方面持续发力现下发《阿里巴巴集团2024年投资控股单位管理工作方案》各控股管理单位要严格按照工作方案开展各项工作，遵循下述工作要求，落实到位（一）提高认识，认真部署（二）加强督导，扎实推进（二）总结经验，建立机制阿里巴啊公司企业管理部2023年5月8日二、错误和测试目的上面文字共有6个错误，它们分别测试不同的功能1. 《阿里巴巴公集团024年投资控股公司管理工作方案》多了一个公、少了一个2：测试在连续错误上的表现2. 投资写成了骰子：测试对于拼音输入错误的表现3. 精意管理年，应为精益管理年：测试词库是否全面、更新4. 阿里巴啊公司企业管理部，应为阿里巴巴集团：测试对于上下文不统一问题的敏感度，特别是前面也写错了阿里巴巴，那么还能否纠正过来5. 最后一个（二）应该为（三）：对于标号错误的敏感性6. 落款是2023年，应为2024年：测试在理解上下文含义的基础上，能否找到日期错误这个错误最隐蔽02 测试结果一、文心一言：85分，辅助办公尚可能力：找到5处，落款年限2024年的错误没有找到精益管理找到了，没改对优点：不会进行没有必要的改动缺点：词库不新，上下文关联性的理解和纠偏能力不强，另外，有时候文心一言号称对措辞进行了微调，但是没有把修正的地方标记出来，而且即使你去找了，会发现实际上也没有进行所谓的微调，不太实在，但是不影响，你按照它提示的错自己改，不用它写的那段就行了二、kimi：95分，胜任辅助办公只是缺少新的固定词汇，但是，它找不到的，写错了也不影响太多能力：6处错误都找到精益管理没改对优点：是唯一一个找到落款时间错误的Ai如果文件错误少，kimi还做其他修正，其他修正集中于统一词组，并把它给修正的地方标记出来了有用
不足：把“精意管理”改成了“精细管理”，而没有与时俱进的改为“精益管理”说明数据库不太全、不太新三、通义千问：85分，辅助办公尚可能力：找到5处错误，最后一个落款年限的错误没找到，另外精益管理虽然找到，改的和Kimi、文心一言一样，都改成了精细管理优点：还做了其他修正，并把它给修正的地方标记出来了不足：把“精意管理”改成了“精细化管理”，而没有与时俱进的改为“精益管理”说明数据库不太全、不太新落款的2024没有找到，所以上下文理解能力不如kimi四、讯飞星火：90分，词库新能力：找到5个，落款的错误没找到优点：精益管理的纠正是正确的，在测试的智能体中，只有讯飞星火对精益管理的改动是正确的不足：上下文理解能力，不如kimi五、紫东太初：50分能力：只找到2处优点：只有非常明显的错误才能开到不足：太多了，自己看吧六、智谱清言：95分，词库新能力：找到1个优点：没有明显优点，但是，曾经我用它找到过序号错误、部门名称错误等不足：太多了
（图片来源网络，侵删）
0 评论