近日，科大讯飞股份有限公司在人工智能领域取得了新的技术进展，据天眼查信息显示，公司于6月6日公布了一项名为“大模型评估方法、装置、设备、系统及程序产品”的专利。
这项专利提出了一种创新的大模型评估方法，该方法旨在通过多维度、自动化的手段，提升大模型评估的准确性和效率。具体而言，该方法首先收集目标大模型在问答过程中产生的对话数据，这些数据构成了评估的基础。
接着，该专利利用问答对话之间的逻辑跟随关系，从对话中抽取指令，并对这些指令进行打分，得到第一得分。同时，方法还会提取问答对话中的答案信息，并将这些信息与前序答案进行对比，计算出第二得分。还对答案信息的回复质量进行评价，得出第三得分。
在获得这三个得分后，该专利通过综合这三个维度的得分，得出一个目标得分，以此作为对目标大模型评估的依据。这种方法不仅实现了对多轮次对话特点的全面考量，还通过自动化的评估流程，显著降低了人工参与度，减少了因个人主观判断带来的偏差。
据天眼查进一步的信息显示，科大讯飞此次的专利创新，对于提升大模型的评估效率和准确性具有重要意义。随着人工智能技术的不断发展，大模型的应用场景越来越广泛，对模型的评估也变得越来越重要。
科大讯飞通过此次的专利创新，不仅为自身在大模型评估领域树立了新的技术标杆，也为整个行业提供了新的思路和方法。未来，随着该专利技术的进一步推广和应用，有望为人工智能领域的发展注入新的动力。
科大讯飞在人工智能领域一直保持着较高的研发投入和技术创新能力。此次的专利创新，再次证明了其在该领域的领先地位和持续创新能力。随着人工智能技术的不断发展和应用，相信科大讯飞将继续为行业带来更多创新性的技术成果。
