# 分析

金融AIシステムのためのデータ分析技術と指標

8件 [全てのタグを見る](https://beancount.io/ja/bean-labs/research-logs/tags) [すべての投稿に戻る](https://beancount.io/ja/bean-labs/research-logs)

2026年7月3日 約1分

## [LLM異常検知サーベイ (NAACL 2025)：強力な分類体系、欠如した表形式データへの対応](https://beancount.io/ja/bean-labs/research-logs/2026/07/03/llm-anomaly-ood-detection-survey)

NAACL 2025の分類法は有効だが、表形式データの対象が欠けている。財務AIチームは視覚モデル手法を自ら適応させる必要がある。

Mike Thrift

ai llm machine-learning

2026年6月29日 約1分

## [Fin-RATE：LLMは期間横断および企業横断の財務分析にいかに失敗するか](https://beancount.io/ja/bean-labs/research-logs/2026/06/29/fin-rate-real-world-financial-analytics-tracking-evaluation-benchmark)

Fin-RATEは、LLMの精度が経時追跡で18.60%に崩壊することを示す。制約となるボトルネックはモデルではなく検索パイプラインにある。

Mike Thrift

llm ai machine-learning

2026年6月27日 約1分

## [Lost in the Middle：LLMにおける位置バイアスと金融AIへの影響](https://beancount.io/ja/bean-labs/research-logs/2026/06/27/lost-in-the-middle-language-models-long-contexts)

LLMは答えが文脈の中間にあると最大20ポイント低くスコアリングするため、金融RAGパイプラインは最良の箇所を最初か最後に配置すべきだ。

Mike Thrift

llm ai machine-learning

2026年6月26日 約1分

## [AD-LLMベンチマーク：GPT-4oがテキスト異常検知においてゼロショットで0.93以上のAUROCを達成](https://beancount.io/ja/bean-labs/research-logs/2026/06/26/ad-llm-benchmarking-llms-anomaly-detection)

AD-LLMはGPT-4oがテキスト異常検知でゼロショットAUROC 0.93〜0.99を達成するが、金融監査AIではLLMモデル選択が依然信頼できないと判明。

Mike Thrift

llm ai machine-learning

2026年6月12日 約1分

## [τ-bench: 実世界のツール使用ドメインにおけるAIエージェントの信頼性の測定](https://beancount.io/ja/bean-labs/research-logs/2026/06/12/tau-bench-tool-agent-user-interaction-real-world-domains)

τ-benchはトップLLMが小売ツール使用タスクでpass\@1 0.692からpass\@4 0.462へ低下すると判明。台帳に書き戻すエージェントも同じ一貫性の崖に直面する。

Mike Thrift

ai llm machine-learning

2026年5月15日 約1分

## [ConvFinQA: モデルは専門家に21ポイント差で及ばず（68.9%）](https://beancount.io/ja/bean-labs/research-logs/2026/05/15/convfinqa-chain-numerical-reasoning-conversational-finance-qa)

ConvFinQAの最良モデルの実行精度は68.9%で、人間の専門家の89.4%に対して21ポイントの差があり、マルチターンの台帳チャットが直面する課題を示しています。

Mike Thrift

ai llm machine-learning

2026年5月12日 約1分

## [FinanceBench：ベクトルストアRAGが実際の財務書類で失敗する理由](https://beancount.io/ja/bean-labs/research-logs/2026/05/12/financebench-open-book-financial-qa-benchmark)

FinanceBenchは実際のSEC提出書類の10,231問で16のAI構成を検証：共有ベクターストアRAGは19%しか正解せず、検索がボトルネックではないことがわかる。

Mike Thrift

ai llm machine-learning

2026年4月24日 約1分

## [自己整合性：多数決サンプリングによる思考連鎖の精度向上](https://beancount.io/ja/bean-labs/research-logs/2026/04/24/self-consistency-chain-of-thought)

自己一貫性は1回の貪欲デコードではなく多数のサンプリング推論経路を多数決し、追加訓練なしでGSM8Kで17.9ポイント向上させます。

Mike Thrift

ai llm machine-learning

[無料で始める→](https://beancount.io/sign-up/?next=%2Fledger%2F) [ドキュメント](https://beancount.io/ja/docs)

## Where to look next

- [Sitemap](https://beancount.io/sitemap.xml) - all pages with hreflang alternates
- [LLMs index](https://beancount.io/llms.txt) - curated links for AI agents (also /llms-full.txt for full docs)
- [Documentation](https://beancount.io/docs) - every doc is also available as text/markdown via .md suffix or Accept negotiation
- [REST API reference](https://beancount.io/docs/api-reference) - interactive endpoints, schemas, authentication, and code samples
- [OpenAPI spec](https://beancount.io/openapi.json) - OpenAPI 3.1 spec for this website's public content endpoints; the product contract for ledger operations is at https://beancount.io/api-gateway/v1/openapi.json
- [GraphQL](https://beancount.io/graphql) - public, read-only content API over the blog and research logs (no credentials, no ledger data): 12 query fields over 23 types
- [MCP server](https://beancount.io/mcp) - Model Context Protocol at https://beancount.io/api-gateway/mcp
