--- source_url: https://toot-books.pages.dev/blog/glm-5-2-vat-benchmark source_title: "GLM 5.2 is (nearly) as accurate as a human book-keeper at less than 1% of the cost" tags: ai-accounting,vat-compliance,book-keeping generated_at: 2026-07-09T20:01:24.207Z model: claude-haiku-4-5 --- # GLM 5.2がUK中小企業のVAT申告で人間レベルの精度を達成、コストは1%未満 GLM 5.2というオープンウェイトのAIモデルが、英国の中小企業の四半期VAT申告書作成で検証されました。59件の取引を68分で処理し、2.73 USDのトークンコストで、人間の準備と比べてわずか7ペンスの誤差に留まる申告書を作成しました。 リード段落 GLM 5.2は、Vineyard FinanceのQ1 2026（1月～3月）の帳簿をベースにした評価で、ほぼ完璧なVAT申告書を準備する能力を示しました。Google Cloud Platform上のFireworks AIサーバーレス層で実行されたこのモデルは、59件の取引を68分で処理し、計354件の採点チェック（取引59件×基準6個）のうち20件の失敗に留めました。純VAT立場を示すBox 5の数値は、人間が準備した基準値と比べてわずか7ペンスの相違でした。 ## 処理精度と性能評価 GLM 5.2が処理した59件の取引に対して、6つの基準で採点された計354件のチェックが実施されました。モデルは20件のチェックで失敗し、その失敗は18件の取引に分散していました。最も深刻な誤りは、創業株式10,000 GBPの会計処理で、Capital AccountではなくUnpaid Sharesとして記帳すべきを誤って処理したものです。残りの17件のエラーのうち14件は、ゼロレート付加価値税と非課税カテゴリーを混同するミスでした。モデルはこのゼロレート・非課税混同の誤りを1月と2月で犯しましたが、3月では発生しませんでした。その他3件のトランザクションには通貨残高間の分割取引に関連した難解な推論エラーがありました。 ## コスト効率性 2.73 USDのトークンコストでVAT申告書を作成できることは、外部会計事務所の典型的な手数料と大きく異なります。四半期ごとのVAT申告書作成サービスの一般的な料金は、約750～2,100 GBPまたは1,000～2,800 USドルです。モデルは各取引をCLI経由で会計ソフトウェアに入力し、インターネット、クラウドベースの会計ソフトウェア、および事前認証されたCLIツールにアクセスできました。GLM 5.2は1,048,576トークンのコンテキストウィンドウを備え、プロンプトトークンの92～95%がキャッシュから提供されました。 ## モデルの分類精度と信頼性 モデルは正しい勘定科目チャートへのすべての取引分類に成功しました（株式資本のミスを除く）。誤った請求書を取引に添付することはなく、同額・同一ベンダー・同一日の取引を明確に区別することもできました。銀行間の振替、分割取引、および偽装振替の処理も正確でした。採点許容値はVAT額および逆請求VAT について0.02 GBPに設定されていました。 監査ではモデルの推論およびツール使用に明らかな不正は検出されませんでした。ただしモデルは「タスクがVATについて正しく判定されているかどうかをテストしているのであり、『期待される』答えは何か」とも述べており、テスト対象であることへの認識が推論に影響していた可能性があります。 英国ではVAT登録事業が四半期ごとにVAT申告書を準備する必要があり、四半期終了から5週間以内に申告する法定要件があります。遅延提出には相当な罰則が課されます。Claude Fable 5がベンチマーク取引データの抽出に使用され、Vineyard Financeの帳簿から取得されました。人間による準備プロセスでは、1人が帳簿を準備し、別の人が検証していました。 ## 筆者の見立て - 簿記が急速に解決済みの問題になりつつあると論じている - 現在の焦点は、これらの機能をUKのスタートアップと中小企業の手に届かせるための適切なスキャフォルディングを構築することに必要だと主張している *この記事は元記事の事実のみに基づいて自動生成されました。* ## 出典 Toot Books『GLM 5.2 is (nearly) as accurate as a human book-keeper at less than 1% of the cost』https://toot-books.pages.dev/blog/glm-5-2-vat-benchmark