Beancount.io LogoBeancount.io
Mike Thrift

Mike Thrift

Marketing Manager

查看所有作者

OpenHands:AI 软件代理开放平台及其对财务自动化的意义
·mike

OpenHands:AI 软件代理开放平台及其对财务自动化的意义

OpenHands 是一个采用 MIT 许可证、基于 Docker 沙箱的代理平台,其中 CodeAct 在 SWE-Bench Lite 上达到了 26% 的成绩——这是一个发人深省的基准测试,它确立了 AI 代理如今能够可靠完成的任务范围,以及为什么首批富有成效的财务部署应当是严格限制范围的,而非完全自主的。

ai
open-source
automation
llm
+4
Fin-RATE:大语言模型在跨周期和跨实体财务分析中的失败表现
·mike

Fin-RATE:大语言模型在跨周期和跨实体财务分析中的失败表现

Fin-RATE 对 17 个大语言模型进行了基准测试,涵盖了来自 2,472 份 SEC 文件的 7,500 对专家精选的问答。研究揭示了在纵向追踪下准确率暴跌 18.60%,而金融专业模型 Fin-R1 在跨实体任务中的表现下降了 54 点——检索流程而非骨干模型才是核心瓶颈。

llm
ai
machine-learning
analytics
+3
FinDER:真实分析师查询揭示金融 RAG 中 74% 的召回率差距
·mike

FinDER:真实分析师查询揭示金融 RAG 中 74% 的召回率差距

FinDER 针对标普 500 指数 10-K 文件,使用 5,703 个真实的对冲基金分析师查询对 RAG 进行基准测试;E5-Mistral 仅实现了 25.95% 的上下文召回率,而充满缩写的查询导致精确率下降了 8.2 个百分点——这证明了查询归一化而非更好的嵌入,才是修复金融 AI 流水线的首要方案。

ai
llm
machine-learning
finance
+3
迷失在中间:大语言模型中的位置偏差及其对金融 AI 的影响
·mike

迷失在中间:大语言模型中的位置偏差及其对金融 AI 的影响

Liu 等人发表的 TACL 2024 论文表明,大语言模型在处理埋藏在长上下文中间的信息时,性能会下降多达 20 个百分点——这种 U 形性能退化影响了包括 Claude-1.3-100K 在内的所有受测模型——这对 RAG 流水线在金融和会计应用中应如何排列检索到的段落具有具体的指导意义。

llm
ai
machine-learning
data-science
+3
AD-LLM 基准测试:GPT-4o 在文本异常检测中零样本 AUROC 达到 0.93+
·mike

AD-LLM 基准测试:GPT-4o 在文本异常检测中零样本 AUROC 达到 0.93+

AD-LLM 在五个 NLP 数据集上针对三种异常检测角色(零样本检测器、数据增强引擎和模型选择顾问)对 GPT-4o 和 Llama 3.1 8B 进行了基准测试;GPT-4o 的零样本 AUROC 达到了 0.93–0.99,但基于 LLM 的模型选择仍然不可靠,这对金融审计 AI 具有直接影响。

llm
ai
machine-learning
data-science
+3
CausalTAD:用于大语言模型表格异常检测的因果列排序
·mike

CausalTAD:用于大语言模型表格异常检测的因果列排序

CausalTAD 通过在序列化前重新排列表格列以遵循因果依赖关系,改进了基于大语言模型的表格异常检测,在混合类型基准测试上将平均 AUC-ROC 从 AnoLLM 的 0.803 提升至 0.834——这对于检测结构化账本数据中的异常具有直接意义。

llm
ai
machine-learning
fraud-detection
+3
AnoLLM:针对金融数据表格式异常检测的 LLM 微调
·mike

AnoLLM:针对金融数据表格式异常检测的 LLM 微调

AnoLLM (ICLR 2025) 将表格式异常检测重新表述为 LLM 密度估计 —— 在正常行上进行微调,并通过负对数似然进行评分。它在混合类型欺诈数据集上优于传统方法,但在纯数值数据上没有优势,这对检测 Beancount 账本分录中的异常具有实际意义。

ai
llm
machine-learning
fraud-detection
+3
LLM 在 Beancount DSL 生成中得分仅为 2.3%:LLMFinLiteracy 基准测试
·mike

LLM 在 Beancount DSL 生成中得分仅为 2.3%:LLMFinLiteracy 基准测试

LLMFinLiteracy 基准测试发现,五个约 7B 参数的权重开放模型生成完全正确的 Beancount 交易的成功率仅为 2.3%。失败原因集中在会计推理而非语法上,这表明“编译器在环”反馈是构建可靠回写代理的关键缺失环节。

llm
beancount
plain-text-accounting
ai
+4
TableMaster:基于大语言模型的表格理解自适应推理
·mike

TableMaster:基于大语言模型的表格理解自适应推理

TableMaster 是一个仅包含提示词的流水线,在 WikiTQ 基准测试中,使用 GPT-4o-mini 达到了 78.13% 的准确率,比 Chain-of-Table 高出 13 个百分点。它通过结合核心关注表格提取(table-of-focus extraction)、语义文本化(semantic verbalization)以及在文本和符号推理之间的自适应切换来实现这一目标。本文介绍了该架构对 Beancount 等财务账本 AI 智能体的意义。

ai
llm
machine-learning
beancount
+4
利用大语言模型进行零样本异常检测:GPT-4 在表格数据上的表现
·mike

利用大语言模型进行零样本异常检测:GPT-4 在表格数据上的表现

GPT-4 在 ODDS 基准测试中,无需微调即可达到 74.1 的平均 AUROC,几乎与传统 ECOD 基准(75.5)持平,但在多维异常和高方差数据集上表现不佳;本文对零样本大语言模型异常检测进行了批判性回顾,并探讨了其对自动化 Beancount 账本审计的影响。

ai
llm
fraud-detection
machine-learning
+3
DocFinQA:基于完整 SEC 申报文件的长文本财务推理
·mike

DocFinQA:基于完整 SEC 申报文件的长文本财务推理

DocFinQA 将 FinQA 精选的 700 字段落替换为完整的 123,000 字 SEC 申报文件,使上下文长度增加了 175 倍,这导致 GPT-4 在长文档上的准确率几乎减半。检索流水线在 HR@3 时有 45% 的概率无法找到正确的切片 —— 而长文本模型并不能替代检索。

ai
llm
machine-learning
finance
+3
TheAgentCompany:在真实企业任务中评估大语言模型智能体
·mike

TheAgentCompany:在真实企业任务中评估大语言模型智能体

TheAgentCompany 在包含 GitLab、OwnCloud 和 RocketChat 的模拟内网环境中测试了 175 个真实的职场任务。表现最好的模型(Gemini-2.5-Pro)仅完成了 30% 的任务,且每项任务成本高达 4 美元,这表明自主智能体在会计和财务工作流中仍远未达到可用水平。

ai
llm
automation
machine-learning
+3
显示第 13–24 篇,共 87 篇