# 分析

金融AI系统的数据分析技术与指标

8 篇博文 [查看所有标签](https://beancount.io/zh/bean-labs/research-logs/tags) [返回所有帖子](https://beancount.io/zh/bean-labs/research-logs)

2026年7月3日 阅读需 1 分钟

## [LLM 异常检测综述 (NAACL 2025)：强大的分类体系，缺失的表格数据覆盖](https://beancount.io/zh/bean-labs/research-logs/2026/07/03/llm-anomaly-ood-detection-survey)

NAACL 2025的分类法依然成立，但表格覆盖缺失。金融AI团队必须自行适配视觉模型方法。

Mike Thrift

ai llm machine-learning

2026年6月29日 阅读需 1 分钟

## [Fin-RATE：大语言模型在跨周期和跨实体财务分析中的失败表现](https://beancount.io/zh/bean-labs/research-logs/2026/06/29/fin-rate-real-world-financial-analytics-tracking-evaluation-benchmark)

Fin-RATE 显示 LLM 在纵向追踪上的准确率骤降 18.60%，真正的瓶颈是检索流程，而非模型本身。

Mike Thrift

llm ai machine-learning

2026年6月27日 阅读需 2 分钟

## [迷失在中间：大语言模型中的位置偏差及其对金融 AI 的影响](https://beancount.io/zh/bean-labs/research-logs/2026/06/27/lost-in-the-middle-language-models-long-contexts)

当答案位于上下文中段时，LLM 得分最多会低 20 分，因此金融 RAG 流程应把最佳段落放在最前或最后。

Mike Thrift

llm ai machine-learning

2026年6月26日 阅读需 2 分钟

## [AD-LLM 基准测试：GPT-4o 在文本异常检测中零样本 AUROC 达到 0.93+](https://beancount.io/zh/bean-labs/research-logs/2026/06/26/ad-llm-benchmarking-llms-anomaly-detection)

AD-LLM 发现 GPT-4o 在文本异常检测的零样本任务上达到 0.93–0.99 AUROC，但 LLM 模型选择对金融审计 AI 而言仍不可靠。

Mike Thrift

llm ai machine-learning

2026年6月12日 阅读需 1 分钟

## [τ-bench：评估 AI 代理在现实世界工具调用领域的可靠性](https://beancount.io/zh/bean-labs/research-logs/2026/06/12/tau-bench-tool-agent-user-interaction-real-world-domains)

τ-bench 发现顶尖大模型在零售工具调用任务上从 pass\@1 的 0.692 降至 pass\@4 的 0.462。在账本上执行写回的智能体也面临同样的稳定性悬崖。

Mike Thrift

ai llm machine-learning

2026年5月15日 阅读需 1 分钟

## [ConvFinQA：模型落后专家21个百分点（68.9%）](https://beancount.io/zh/bean-labs/research-logs/2026/05/15/convfinqa-chain-numerical-reasoning-conversational-finance-qa)

ConvFinQA最佳模型得分为68.9%的执行准确率，而人类专家为89.4%——这一21个百分点的差距仍是多轮账本对话面临的挑战。

Mike Thrift

ai llm machine-learning

2026年5月12日 阅读需 1 分钟

## [FinanceBench：为什么基于向量存储的 RAG 在真实财务文档上表现不佳](https://beancount.io/zh/bean-labs/research-logs/2026/05/12/financebench-open-book-financial-qa-benchmark)

FinanceBench 用 16 种 AI 方案测试了 10,231 个真实 SEC 文件问题：共享向量存储 RAG 只答对 19%，可见检索并非瓶颈。

Mike Thrift

ai llm machine-learning

2026年4月24日 阅读需 1 分钟

## [自洽性：多数投票采样提升思维链准确性](https://beancount.io/zh/bean-labs/research-logs/2026/04/24/self-consistency-chain-of-thought)

自一致性对多条采样的推理路径进行多数投票，而非单一贪婪解码，在 GSM8K 上提升 17.9 个点且无需额外训练。

Mike Thrift

ai llm machine-learning

[免费开始→](https://beancount.io/sign-up/?next=%2Fledger%2F) [文档](https://beancount.io/zh/docs)

## Where to look next

- [Sitemap](https://beancount.io/sitemap.xml) - all pages with hreflang alternates
- [LLMs index](https://beancount.io/llms.txt) - curated links for AI agents (also /llms-full.txt for full docs)
- [Documentation](https://beancount.io/docs) - every doc is also available as text/markdown via .md suffix or Accept negotiation
- [REST API reference](https://beancount.io/docs/api-reference) - interactive endpoints, schemas, authentication, and code samples
- [OpenAPI spec](https://beancount.io/openapi.json) - OpenAPI 3.1 spec for this website's public content endpoints; the product contract for ledger operations is at https://beancount.io/api-gateway/v1/openapi.json
- [GraphQL](https://beancount.io/graphql) - public, read-only content API over the blog and research logs (no credentials, no ledger data): 12 query fields over 23 types
- [MCP server](https://beancount.io/mcp) - Model Context Protocol at https://beancount.io/api-gateway/mcp
