Verificato apertamente
Benchmark open source
Quanto bene contabilizza Bilanzo? Studi fiduciari eseguono ogni versione di Bilanzo sul set di riferimento Bilanzo: giustificativi di prova con valori attesi derivati dal testo di legge (fonte indicata per ogni caso). Pubblicato da Bilanzo, non da un’autorità. I giustificativi sono inventati ma realistici, la registrazione è calcolata a mano. Conta solo questo set di prova, perché tutte le esecuzioni siano confrontabili. Questa pagina mostra il risultato, anche quando non è buono.
Test di base Bilanzo: modelli linguistici a confronto
Misurazione di Bilanzo del 2 novembre 2026, non confermata da studi fiduciari. 420 casi contabili in 13 classi, gli stessi compiti e gli stessi ausili per tutti i partecipanti.
Livello 1: risultati puri dei modelli
Ogni modello risolve i compiti da solo. Riceve i compiti e gli ausili (per esempio corsi delle divise, aliquote d’imposta e promemoria), ma nessun grafo di conoscenze e nessun accesso a una contabilità. Contiamo quanti casi sono rigorosamente corretti.
Claude Opus 5.5
80,2 %
337 su 420 casi rigorosamente corretti
Claude Fable 5.1
75,5 %
317 su 420 casi rigorosamente corretti
- Modello Bilanzo 1.1.0: non valutabile, risposte vuote o in un altro formato (causa trovata, nuova misurazione in arrivo).
- Modello di base 7B: imputazione dei giustificativi quotidiani 0 su 60.
| Classe | Casi | Claude Opus 5.5 | Claude Fable 5.1 |
|---|---|---|---|
| Imputazione dei giustificativi quotidiani | 60 | 58 | 58 |
| Casi in più passaggi | 30 | 21 | 18 |
| Giustificativi non contabilizzabili | 30 | 30 | 29 |
| Ammortamenti | 30 | 27 | 28 |
| Salari e assicurazioni sociali | 30 | 30 | 29 |
| Salari: LPP e imposta alla fonte | 30 | 30 | 30 |
| Chiusura: ratei e risconti | 30 | 27 | 28 |
| IVA: aliquote miste | 30 | 25 | 23 |
| Valuta estera | 30 | 26 | 15 |
| IVA: luogo della prestazione e imposta sull’acquisto | 30 | 8 | 6 |
| IVA: aliquota saldo e aliquota forfettaria | 30 | 2 | 3 |
| Chiusura: valutazione | 30 | 29 | 27 |
| Diritto societario e imposta preventiva | 30 | 24 | 23 |
| Totale | 420 | 337 80,2 % |
317 75,5 % |
Come abbiamo misurato
- 13 classi, 420 casi, esecuzione del 2 novembre 2026.
- Compiti e valori attesi sono stati congelati prima della prima esecuzione e sigillati con SHA-256. I valori attesi sono stati verificati alla cieca: i revisori hanno prima risolto i casi da soli, senza vedere i valori attesi.
- La valutazione è rigorosa, secondo la regola congelata del set di prova, da parte di un programma fisso e non di un modello linguistico. Prima della valutazione ognuna delle 13 classi ha superato una controprova: i valori attesi dati come risposta ottengono il punteggio pieno, una risposta falsata di proposito mostra esattamente gli errori inseriti.
Imprecisioni note
Il set di prova riporta la cifra 200 del rendiconto IVA con il metodo effettivo, ma non con il metodo delle aliquote saldo. Se un modello aggiunge la cifra 200 o la omette, il caso è rigorosamente sbagliato. Fa stato la cifra rigorosa. La seconda cifra mostra solo l’entità dell’imprecisione se la cifra 200 non viene contata.
| Classe | Modello | Rigoroso (fa stato) | Senza cifra 200 |
|---|---|---|---|
| IVA: aliquota saldo e aliquota forfettaria | Claude Opus 5.5 | 2 su 30 | 21 su 30 |
| IVA: aliquota saldo e aliquota forfettaria | Claude Fable 5.1 | 3 su 30 | 17 su 30 |
| IVA: luogo della prestazione e imposta sull’acquisto | Claude Opus 5.5 | 8 su 30 | 17 su 30 |
| IVA: luogo della prestazione e imposta sull’acquisto | Claude Fable 5.1 | 6 su 30 | 12 su 30 |
Livello 2: Bilanzo con grafo di conoscenze
Qui il prodotto aiuta: Bilanzo lavora con il grafo di conoscenze dell’azienda Mediaquotes Jones Schibli. Questi risultati non sono quindi equiparabili al livello 1.
Non ancora misurato, seguirà dopo l’addestramento.
Claude è un marchio di Anthropic. Anthropic e Bilanzo non sono legati da alcun partenariato.
Stato attuale
Ancora nessuna esecuzione confermata.
Finché uno studio fiduciario non ha trasmesso un’esecuzione sul set di riferimento Bilanzo dandone il consenso, qui non mostriamo cifre né badge. Le esecuzioni non confermate compaiono nello storico più sotto non appena ce ne sono.
Che cosa viene verificato
Per ogni giustificativo il benchmark confronta conto, contropartita, codice IVA, importo e periodo con la registrazione del set di riferimento Bilanzo, calcolata a mano. I giustificativi che Bilanzo deve rifiutare o per cui deve chiedere contano come corretti se Bilanzo rifiuta o chiede. Se in modalità automatica Bilanzo registra un giustificativo senza una catena di conoscenze approvata, l’intera esecuzione non è superata.
Le classi di casi del set di riferimento Bilanzo sono l’aliquota IVA normale, l’aliquota ridotta, l’alloggio, i giustificativi con due aliquote, l’aliquota saldo, la valuta estera, la nota di accredito, il pagamento parziale, l’investimento e i casi fermati a ragione. Ogni classe ha una soglia; una classe è superata quando la sua quota raggiunge la soglia.
Chi verifica
Studi fiduciari che eseguono il set di riferimento Bilanzo nella propria installazione. Set di prova, classi di casi, pesi e soglie sono fissati e uguali per tutti; ogni versione porta una somma di controllo. Un’esecuzione conta come confermata solo quando lo studio fiduciario ha verificato il risultato e acconsentito espressamente alla trasmissione. Ogni esecuzione è registrata con una somma di controllo in uno storico al quale si può solo aggiungere.
Come partecipare
- Installate Bilanzo; il set di riferimento Bilanzo è incluso.
- Dopo ogni aggiornamento avviate l’esecuzione nelle impostazioni alla voce Benchmark. Gira sul vostro computer e nulla viene contabilizzato.
- Verificate il risultato nel rapporto giustificativo per giustificativo e, con il vostro consenso, ce lo inviate come file per e-mail. Solo allora compare qui.
I giustificativi dei vostri clienti non lasciano mai la vostra installazione. Potete eseguire localmente un’esecuzione sui vostri giustificativi; resta presso di voi, senza badge e senza pubblicazione.
Partecipare come studio fiduciario Il repository pubblico con strumento e regole sarà collegato qui non appena sarà aperto.
Senza garanzia
I risultati di questa pagina sono forniti senza garanzia. Mostrano come una determinata versione di Bilanzo ha contabilizzato il set di riferimento Bilanzo nell’installazione di singoli studi fiduciari nel momento indicato. Non costituiscono alcuna garanzia per la vostra contabilità e non sostituiscono una verifica professionale. Gli studi fiduciari che verificano forniscono le loro esecuzioni e conferme a titolo volontario e non si assumono alcuna responsabilità al riguardo. I modelli di confronto sono stati verificati con gli stessi compiti e gli stessi ausili, senza accesso a contabilità. Anthropic e Bilanzo non sono legati da alcun partenariato. I modelli citati sono stati verificati come servizi accessibili al pubblico.
