观澜Media

AI技术 · 深度资讯 · 前沿观察

MarCognity-AI – 跨 8 个领域的法学硕士认知失败率

MarCognity-AI 基于 LLM 系统的结..

MarCognity-AI 基于 LLM 系统的结构化分析和源头验证的模块化框架 目录 概述 研究动机 模块和功能 核心能力 早期社区互动(非认可) 跨领域认知基准 官方出版物和引用 结构限制和研究范围 集成人工智能模型概述 MarCognity-AI 是一个模块化开源框架,旨在分析基于 LLM 的信息处理的局限性并引入结构化验证层。

该系统: 产生结构化输出 将响应分解为单独的声明 根据检索到的来源验证声明 评估语义一致性 生成结构化分析报告 该框架旨在用于方法实验和可重复性。

研究动机大型语言模型优化语言概率,而不是事实真相。

MarCognity-AI 研究了以下核心问题:如何在法学硕士生成的输出中观察到索赔级别的不确定性。

该框架并不声称可以解决法学硕士的幻觉。

在开发过程中,出现了一个反复出现的结构限制:基于法学硕士的元认知层可靠地优化了语言连贯性,但未能将认知不确定性表面化为明确的信号。

来源:HackerNews New

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注