# テクノロジー

金融AIシステムに関連する技術研究とソフトウェアエンジニアリング

8件 [全てのタグを見る](https://beancount.io/ja/bean-labs/research-logs/tags) [すべての投稿に戻る](https://beancount.io/ja/bean-labs/research-logs)

2026年7月10日 約1分

## [WildToolBench: なぜ現実世界のツール利用においてLLMのセッション精度は15%を超えないのか](https://beancount.io/ja/bean-labs/research-logs/2026/07/10/wildtoolbench-benchmarking-llm-tool-use-in-the-wild)

WildToolBenchは、1,024件の実ユーザータスクでセッション精度15%を超えるLLMはなく、隠れた意図と指示の遷移が最も鋭い失敗モードと判明。

Mike Thrift

ai llm automation

2026年6月27日 約1分

## [Lost in the Middle：LLMにおける位置バイアスと金融AIへの影響](https://beancount.io/ja/bean-labs/research-logs/2026/06/27/lost-in-the-middle-language-models-long-contexts)

LLMは答えが文脈の中間にあると最大20ポイント低くスコアリングするため、金融RAGパイプラインは最良の箇所を最初か最後に配置すべきだ。

Mike Thrift

llm ai machine-learning

2026年6月15日 約1分

## [OSWorld：デスクトップAIエージェントの成功率は12%、人間は72%のタスクで成功](https://beancount.io/ja/bean-labs/research-logs/2026/06/15/osworld-benchmarking-multimodal-agents-real-computer-environments)

OSWorldはデスクトップAIエージェントが実タスクの12.24%で成功、人間は72.36%。失敗の75%は推論ではなく視覚運動のグラウンディングに起因する。

Mike Thrift

ai machine-learning automation

2026年6月1日 約1分

## [StructRAG (ICLR 2025): 適切なドキュメント構造の選択により、GraphRAGを28ポイント上回る](https://beancount.io/ja/bean-labs/research-logs/2026/06/01/structrag-inference-time-hybrid-information-structurization)

StructRAGは各クエリをテーブル、グラフ、カタログ、アルゴリズム、またはチャンク構造にルーティングし、GraphRAGを28ポイント上回り、22倍高速に動作する。

Mike Thrift

ai llm machine-learning

2026年5月31日 約1分

## [シングルエージェント：同等トークンでマルチホップにおいてMASに匹敵](https://beancount.io/ja/bean-labs/research-logs/2026/05/31/single-agent-outperforms-multi-agent-equal-token-budget)

等しい思考トークン予算の下では、シングルエージェントLLMはマルチホップ推論においてマルチエージェントシステムに匹敵するかそれを上回り、よりシンプルな金融エージェント設計が有利です。

Mike Thrift

ai llm machine-learning

2026年5月9日 約1分

## [Self-RAG：LLMのための適応的リトリーバルと自己批判](https://beancount.io/ja/bean-labs/research-logs/2026/05/09/self-rag-learning-to-retrieve-generate-critique-self-reflection)

Self-RAGはいつ検索するか、結果を自己採点するかをLLMに学習させ、PopQAで55.8%、FactScoreで80.2を達成し、5つのベンチマークでChatGPTを上回ります。

Mike Thrift

ai machine-learning llm

2026年5月6日 約1分

## [AgentBench: LLMをエージェントとして評価する — 金融AIの信頼性への教訓](https://beancount.io/ja/bean-labs/research-logs/2026/05/06/agentbench-evaluating-llms-as-agents)

AgentBenchはGPT-4が4.01、最高のオープンソースLLMが0.96と採点。これらの失敗は、稼働中の台帳でBeancount書き戻しエージェントを壊すものそのものです。

Mike Thrift

ai llm machine-learning

2026年5月2日 約1分

## [MemGPT: 92.5% マルチセッション想起率 vs 32.1% ベースライン](https://beancount.io/ja/bean-labs/research-logs/2026/05/02/memgpt-towards-llms-as-operating-systems)

MemGPTのOS型メモリ階層がGPT-4のマルチセッションチャット精度を32.1%の固定コンテキストから92.5%に向上—複数年台帳エージェントに必須。

Mike Thrift

ai llm machine-learning

[無料で始める→](https://beancount.io/sign-up/?next=%2Fledger%2F) [ドキュメント](https://beancount.io/ja/docs)

## Where to look next

- [Sitemap](https://beancount.io/sitemap.xml) - all pages with hreflang alternates
- [LLMs index](https://beancount.io/llms.txt) - curated links for AI agents (also /llms-full.txt for full docs)
- [Documentation](https://beancount.io/docs) - every doc is also available as text/markdown via .md suffix or Accept negotiation
- [REST API reference](https://beancount.io/docs/api-reference) - interactive endpoints, schemas, authentication, and code samples
- [OpenAPI spec](https://beancount.io/openapi.json) - OpenAPI 3.1 spec for this website's public content endpoints; the product contract for ledger operations is at https://beancount.io/api-gateway/v1/openapi.json
- [GraphQL](https://beancount.io/graphql) - public, read-only content API over the blog and research logs (no credentials, no ledger data): 12 query fields over 23 types
- [MCP server](https://beancount.io/mcp) - Model Context Protocol at https://beancount.io/api-gateway/mcp
