#machine-learning
Tecniche di machine learning per l'analisi e l'automazione dei dati finanziari
FinRAGBench-V (EMNLP 2025) è il primo benchmark su larga scala per RAG multimodale con citazioni visive in finanza, coprendo oltre 112.000 pagine di documenti e 1.394 coppie QA annotate da umani. I modelli migliori raggiungono solo il 20–61% di richiamo delle citazioni a livello di blocco, e il recupero multimodale supera quello solo testuale di quasi 50 punti percentuali.
WildToolBench rileva che nessun LLM supera il 15% di accuratezza di sessione su 1.024 task reali, con intenti nascosti e transizioni di istruzioni come fallimenti più acuti.
La fiducia verbalizzata di GPT-4 raggiunge solo ~62,7% AUROC, appena sopra il caso. Agenti finanziari incerti necessitano di calibrazione migliore.
JSONSchemaBench rileva che la copertura crolla dall'86% sugli schema semplici al 3% su quelli complessi: l'output strutturato LLM può emettere JSON non conforme in silenzio.
FinMCP-Bench valuta il migliore di sei LLM a solo il 3,08% di exact match su 613 task finanziari MCP reali, un crollo di 20× dal single-tool al multi-turn.
FinTrace valuta 13 LLM su 800 traiettorie di compiti finanziari annotate da esperti, attraverso 9 metriche, scoprendo che i modelli all'avanguardia ottengono una forte selezione degli strumenti (F1 ~0.9) ma solo 3,23/5 nell'utilizzo delle informazioni — il passaggio in cui gli agenti ragionano su ciò che gli strumenti restituiscono.
FinToolBench rileva disallineamento di intento oltre il 50% per ogni LLM testato: chiamare più strumenti non significa risposte migliori sui task finanziari.
OmniEval valuta i migliori sistemi RAG al 36% di accuratezza numerica su 5 tipi di task finanziari: gli agenti contabili vanno validati prima di scrivere le registrazioni.
La tassonomia NAACL 2025 regge, ma la copertura tabellare manca. I team di finanza AI devono adattare da soli i metodi dei modelli visivi.
Sottrarre il bias posizionale dai pesi di attenzione LLM recupera fino a 15 punti di accuratezza RAG con prove a metà contesto, aiutando le pipeline di agenti finanziari.
ReDAct passa da un modello piccolo a uno grande solo quando la perplessità segnala incertezza, tagliando i costi del 64% a pari accuratezza per i flussi di lavoro degli agenti.
L'agente CodeAct di OpenHands segna il 26% su SWE-Bench Lite, mostrando cosa fanno gli agenti IA oggi. L'automazione finanziaria va limitata, non autonoma.
