# 기술

금융 AI 시스템과 관련된 기술 연구 및 소프트웨어 엔지니어링 주제

8개 게시물 [모든 태그 보기](https://beancount.io/ko/bean-labs/research-logs/tags) [모든 게시물로 돌아가기](https://beancount.io/ko/bean-labs/research-logs)

2026년 7월 10일 약 5분

## [WildToolBench: 실제 환경의 도구 사용에서 LLM의 세션 정확도가 15%를 넘지 못하는 이유](https://beancount.io/ko/bean-labs/research-logs/2026/07/10/wildtoolbench-benchmarking-llm-tool-use-in-the-wild)

WildToolBench는 실제 사용자 과제 1,024건에서 어떤 LLM도 세션 정확도 15%를 넘지 못하며, 숨은 의도와 지시 전환이 가장 심각한 실패 유형이라고 밝힌다.

Mike Thrift

ai llm automation

2026년 6월 27일 약 5분

## [Lost in the Middle: LLM의 위치 편향과 금융 AI에 미치는 영향](https://beancount.io/ko/bean-labs/research-logs/2026/06/27/lost-in-the-middle-language-models-long-contexts)

LLM은 답이 컨텍스트 중간에 있을 때 최대 20점 더 낮은 점수를 받으므로, 금융 RAG 파이프라인은 최상의 구절을 처음이나 끝에 배치해야 합니다.

Mike Thrift

llm ai machine-learning

2026년 6월 15일 약 4분

## [OSWorld: 인간이 72% 성공하는 작업에서 데스크톱 AI 에이전트의 성공률은 12%에 불과함](https://beancount.io/ko/bean-labs/research-logs/2026/06/15/osworld-benchmarking-multimodal-agents-real-computer-environments)

OSWorld에 따르면 데스크톱 AI 에이전트는 실제 작업의 12.24%를 성공하고 인간은 72.36%를 성공하며, 실패의 75%는 추론이 아닌 시각운동 그라운딩에서 비롯됩니다.

Mike Thrift

ai machine-learning automation

2026년 6월 1일 약 5분

## [StructRAG (ICLR 2025): 적절한 문서 구조 선택으로 GraphRAG보다 28점 높은 성능 달성](https://beancount.io/ko/bean-labs/research-logs/2026/06/01/structrag-inference-time-hybrid-information-structurization)

StructRAG는 각 질의를 표, 그래프, 카탈로그, 알고리즘, 청크 구조로 라우팅해 GraphRAG를 28포인트 이기고 22배 더 빠르게 실행된다.

Mike Thrift

ai llm machine-learning

2026년 5월 31일 약 5분

## [싱글 에이전트: 동일 토큰 예산에서 멀티 홉 추론 시 멀티 에이전트와 동등한 성능](https://beancount.io/ko/bean-labs/research-logs/2026/05/31/single-agent-outperforms-multi-agent-equal-token-budget)

동일한 추론 토큰 예산에서 싱글 에이전트 LLM은 멀티 홉 추론에서 멀티 에이전트 시스템과 동등하거나 더 나은 성능을 보입니다—더 간단한 금융 에이전트 설계를 선호합니다.

Mike Thrift

ai llm machine-learning

2026년 5월 9일 약 5분

## [Self-RAG: LLM을 위한 적응형 검색 및 자기 비판](https://beancount.io/ko/bean-labs/research-logs/2026/05/09/self-rag-learning-to-retrieve-generate-critique-self-reflection)

Self-RAG는 언제 검색하고 스스로 결과를 채점할지 LLM이 결정하도록 학습시켜 PopQA에서 55.8%, FactScore에서 80.2를 기록하며 다섯 벤치마크에서 ChatGPT를 앞선다.

Mike Thrift

ai machine-learning llm

2026년 5월 6일 약 4분

## [AgentBench: LLM을 에이전트로 평가하기 — 금융 AI 신뢰성을 위한 교훈](https://beancount.io/ko/bean-labs/research-logs/2026/05/06/agentbench-evaluating-llms-as-agents)

AgentBench는 GPT-4에 4.01점, 최고 오픈소스 LLM에 0.96점을 주었다. 이러한 실패는 실시간 원장에서 Beancount 기록 에이전트를 망가뜨리는 바로 그 요인이다.

Mike Thrift

ai llm machine-learning

2026년 5월 2일 약 5분

## [MemGPT: 92.5% 다중 세션 회상 vs 32.1% 기준선](https://beancount.io/ko/bean-labs/research-logs/2026/05/02/memgpt-towards-llms-as-operating-systems)

MemGPT의 OS 스타일 메모리 계층은 GPT-4 다중 세션 채팅 정확도를 고정 컨텍스트의 32.1% 대비 92.5%로 끌어올립니다—다년간 원장 에이전트에 필요합니다.

Mike Thrift

ai llm machine-learning

[무료로 시작하기→](https://beancount.io/sign-up/?next=%2Fledger%2F) [문서](https://beancount.io/ko/docs)

## Where to look next

- [Sitemap](https://beancount.io/sitemap.xml) - all pages with hreflang alternates
- [LLMs index](https://beancount.io/llms.txt) - curated links for AI agents (also /llms-full.txt for full docs)
- [Documentation](https://beancount.io/docs) - every doc is also available as text/markdown via .md suffix or Accept negotiation
- [REST API reference](https://beancount.io/docs/api-reference) - interactive endpoints, schemas, authentication, and code samples
- [OpenAPI spec](https://beancount.io/openapi.json) - OpenAPI 3.1 spec for this website's public content endpoints; the product contract for ledger operations is at https://beancount.io/api-gateway/v1/openapi.json
- [GraphQL](https://beancount.io/graphql) - public, read-only content API over the blog and research logs (no credentials, no ledger data): 12 query fields over 23 types
- [MCP server](https://beancount.io/mcp) - Model Context Protocol at https://beancount.io/api-gateway/mcp
