#fintech
Исследования финтеха, платформы и инфраструктура для современных систем учёта
FinMCP-Bench: лучший из шести LLM даёт лишь 3,08% точных совпадений на 613 реальных финансовых задачах MCP — падение в 20 раз от одного инструмента к многошаговым.
FinTrace: передовые LLM выбирают нужные финансовые инструменты (F1 ~0,9), но получают лишь 3,23/5 за использование результатов — именно здесь ломаются агенты с записью.
FinToolBench обнаруживает несоответствие намерений выше 50% у всех протестированных LLM, значит частое использование инструментов не даёт лучших ответов в финансах.
BloombergGPT обучен на 569 млрд финансовых токенов, но GPT-4 сравнялся с ним без финансового предобучения. Для бухгалтерских агентов инструменты важнее модели.
