
Gli LLM Ottengono il 2,3% sulla Generazione di DSL Beancount: Il Benchmark LLMFinLiteracy
LLMFinLiteracy rileva che cinque modelli da ~7B scrivono transazioni Beancount corrette solo nel 2,3% dei casi, fallendo sul ragionamento contabile.
#financial-literacy
Ricerca sulla rappresentazione della conoscenza finanziaria e competenza degli LLM

LLMFinLiteracy rileva che cinque modelli da ~7B scrivono transazioni Beancount corrette solo nel 2,3% dei casi, fallendo sul ragionamento contabile.
FinMaster Benchmark: i top LLM raggiungono il 96% sull'alfabetizzazione finanziaria ma solo il 3% sui bilanci. La propagazione degli errori costa 21 punti.