米国税務AI評価のための高精度合成税務事例データセットの構築
Shaip社が、企業税務AIテストのために、連邦税および州税の申告書、関連書類、公認会計士スタイルのワークフロー、財務分野の専門家による検証、匿名化管理機能を備えた、現実的な米国税務事例2,000件をどのように作成したか。
プロジェクト概要：AI評価のための合成税務データセット
税務AIシステムの性能向上に伴い、評価データの質が重要な差別化要因となっています。クライアントは、連邦申告要件に加え、カリフォルニア州、テキサス州、ニューヨーク州、イリノイ州、フロリダ州といった各州の申告要件の違いも網羅した、現実的な個人税務事例の大規模データセットを必要としていました。各事例は、実際の公認会計士のワークフローを再現し、完全な受付プロンプト、裏付けとなる資料、調整済みの税務申告書、概要、難易度ラベルを含む必要がありました。
Shaip社は、 2,000件の完全に照合された税務事例を生成できる、実運用可能なデータセットパイプラインの設計を依頼されました。このパイプラインは、プログラムのニーズの拡大に応じて、 5,000件まで拡張できる運用能力を備えています。データセットは、近年の課税年度を網羅し、中程度からやや複雑な事例全体にわたってバランスの取れた複雑さを反映し、一貫性、匿名化、フォーマット、重複排除に関する厳格な品質管理を維持する必要がありました。
主要データセット指標
データセットのボリューム
2,000件の税務訴訟
拡張性
5,000件まで拡張可能
サポート文書
1件あたり7～15件の書類
配送スループット
週あたり300～400データセット
税務AI評価における課題
- すべてのケースにおいて、納税者の説明、原資料、最終申告書が内部的に一貫性を保ち、現実的な公認会計士（CPA）スタイルのワークフローを反映するようにした。
- 5つの州にわたる州固有の税務ロジックを処理しつつ、連邦政府の様式および概要との整合性を維持する。
- HSA（医療貯蓄口座）、複数州にまたがる所得、K-1、ACA（医療費負担適正化法）様式、スケジュールC、キャピタルゲイン、および海外口座を含む、中程度からやや複雑な税務シナリオを作成する。
- 厳格なデータ整合性、フォーマット、および完全性基準を維持し、PDFのみでの配信、不完全なファイル、重複ファイル、または構造的に矛盾のあるファイルの拒否などを実施する。
- 匿名化または合成データセットを用い、識別情報削除のための安全対策と多段階レビューを実施することで、プライバシーを保護する。
Shaipの合成税務データソリューション
データ戦略
Shaip社は、評価とテスト用に設計された、現実的な個人税務事例2,000件の作成を中心にプロジェクトを構築しました。ワークフローは、一貫性や品質を損なうことなく、将来的に5,000件まで規模を拡大できるよう設計されています。事例は過去5年間の納税年度を網羅するように設計されており、特に直近の申告期間からの事例が多く含まれています。
ケースデザインとインテークモデリング
各ケースには、個人情報、申告状況、扶養家族、雇用状況、株式報酬、退職所得、1099所得、K-1、賃貸収入、海外所得、控除、税額控除、コンプライアンス履歴、州固有の要件などを網羅した詳細な顧客情報収集質問票が含まれていました。これにより、各シナリオが実際の税務業務における情報収集段階を反映したものとなりました。
ドキュメントパッケージの作成
各ファイルセットを実際の状況に即した形で評価できるように、すべてのケースには、W-2、1099-INT/DIV/B、1099-R、1099-NEC/MISC、K-1、1095-A、住宅ローン利息フォーム、固定資産税請求書、証券会社の明細書、賃貸契約書、銀行取引明細書、事業経費領収書、HSA/IRA記録などの裏付けとなる記録一式が添付されています。
申告書の作成と照合
各データセットには、記入済みの連邦税および州税の申告書（フォーム1040および該当する付表を含む）に加え、必要に応じて州の申告書および関連する控除または証明書類が含まれていました。簡略化された要約には、調整後総所得（AGI）、課税所得、総税額、支払額、還付金または未払い残高、罰金、実効税率、および州レベルの要約フィールドが記載されていました。
複雑性フレームワーク
事例は難易度別に整理され、レベル2（中程度）とレベル3（やや複雑）のシナリオに重点が置かれました。これには、複数州にまたがる申告状況、HSA（医療貯蓄口座）の利用状況、スケジュールC所得、キャピタルゲイン、ACA（医療費負担適正化法）に基づく申告、海外口座、K-1に基づく税務ロジックなどが含まれます。
品質保証および受入管理
Shaipは、論理的一貫性、税務フィールドのマッピング、文書の完全性、米国税務テンプレートへの構造的適合性、および最終的な監査対応準備といった厳格な品質要件に基づいて納品を調整しました。ワークフローには、PDFの誤り、財務情報の欠落、データセットの重複、フィールド配置の不一致などに関する拒否基準も考慮されています。
プライバシーとコンプライアンス
すべてのデータは、合成データまたは適切に匿名化されており、実際の個人情報（PII）は含まれておらず、複数段階の匿名化レビューが実施されています。これにより、データセットはプライバシー保護を維持しながら、企業のテストニーズに対応できることが保証されました。
合成税務データセットの範囲
| データセットコンポーネント | 対象領域 |
|---|---|
| ケースボリューム | 2,000の例 |
| 拡張性 | 最大5,000ケースまで拡張可能 |
| 地理 | カリフォルニア、テキサス、ニューヨーク、イリノイ、フロリダ |
| ケースごとの書類数 | 7～15件の文書 |
| 難易度 | レベル2とレベル3の焦点 |
| 連邦政府様式 | 1040、スケジュール1～3、A、B、C、D、E、SE、および該当する様式 |
| 州のフォーム | 関連する州の申告書、スケジュール、クレジット、およびバウチャー |
| 要約出力 | 連邦税と州税の概要 |
| 配送フォーマット | PDFのみ |
| 週間の処理量 | 300～400データセット |
成果：企業向け税務AI評価データセット
- フレームワークを作成しました 2,000件の高精度税務訴訟 内部評価およびテスト用に設計されています
- 生産規模を拡大するための運用準備を確立 5,000の例
- 連邦税と5州の税制ワークフロー全体にわたる現実的なモデルテストを可能にした。
- 各ケースは、真のCPAスタイルの受付、文書化、ファイリング、および要約ロジックを反映するように構成されています。
- 個人情報の匿名化、照合、完全性、およびPDFフォーマットに関する厳格な管理機能を組み込んでいます。
今回の取り組みは、Shaipがいかにして税務AIチームが一般的な事例を超え、実際の申告の複雑さ、複数文書の推論、管轄区域固有の税務行動を反映したエンタープライズグレードの評価データセットへと移行するのを支援できるかを示す好例です。その結果、モデルのベンチマーク、品質保証、および社内製品検証のためのより強固な基盤が構築されます。
Shaip社は、非常に複雑な税務データに関する取り組みに、構造、厳密性、そして拡張性をもたらしました。複雑な連邦および州の申告要件を、現実的で整合性の取れたケースデータセットに変換する同社の能力は、当社のAI評価ワークフローの強固な基盤となりました。
