← 成功事例一覧に戻る
品質の改善 中規模訴訟事務所

AI支援によるブリーフレビューが提出前に12件の引用エラーを発見

訴訟 · 米国(第7巡回区控訴裁判所、イリノイ州北部地区連邦地方裁判所、イリノイ州裁判所)

主要指標

提出前に12件のエラーを発見

背景

シカゴに拠点を置く弁護士40名の訴訟事務所で、強力な上訴実務を有し、連邦裁判所および州裁判所で複雑な商事紛争やクラスアクションを担当している。

業務分野: 複雑な商事訴訟および上訴実務
法域: 米国(第7巡回区控訴裁判所、イリノイ州北部地区連邦地方裁判所、イリノイ州裁判所)
チーム規模: 弁護士40名(うち上訴グループ12名)、パラリーガル8名

課題

課題: 2023年のMata対Avianca制裁事件を受け、事務所のマネージングパートナーが引用検証業務の見直しを指示した。内部監査の結果、最近提出されたブリーフの引用の8%にエラーが含まれていることが判明した — ピンポイント引用の誤り、判例の状態の陳腐化、または引用文の不正確さなど。
従来のアプローチ: ジュニアアソシエイトがWestlawとShepard'sを使用して手作業で引用を確認していたが、通常は提出期限の直前で時間的制約があった。引用チェックは最後の工程であり、急いで行われることが多かった。
リスク: 誤った引用を含むブリーフを提出することによる評判リスクに加え、制裁、クライアントへの賠償責任、保険上の問題に直面する可能性があった。Mata事件は訴訟事務所にとって存続に関わる懸念となった。

アプローチ

使用ツール: 引用検証にCoCounsel(Thomson Reuters AI)を使用し、事務所の既存Westlawサブスクリプションと統合。引用文の正確性の並行クロスチェックにVincent AIを使用。
導入戦略: ブリーフ提出前の最終ステップとして、義務的な「AI引用監査」を導入。すべてのブリーフは3層のチェックを経る:(1)標準的な調査ツールを使用した弁護士による起案、(2)判例の有効性、ピンポイントの正確性、引用文の忠実性を確認するAI引用検証、(3)AIが指摘した問題のシニア弁護士によるレビュー。
投資額: 追加のAIツールライセンスに年間24,000ドル。義務的な監査により各ブリーフのスケジュールに約2〜3時間が追加されるが、手作業による引用チェックの時間短縮で相殺される。

成果

定量的な成果

  • 最初の6か月間で、AI監査が89件中34件のブリーフで問題を検出(38%)
  • そのうち12件は、裁判所からの問い合わせを招く可能性のある深刻な引用エラーを含んでいた
  • 3件のブリーフには、覆されたまたは区別された判例への引用が含まれていた — 最も危険なタイプのエラー
  • 導入後、引用精度率が92%から99.6%に向上

定性的な成果

  • アソシエイトは提出物の正確性に対する信頼感が高まったと報告
  • 2名の裁判官が口頭弁論中に事務所の引用の質を非公式に評価
  • このプロセスにより、ジュニアアソシエイトのトレーニング改善につながる広範な調査品質の問題が表面化

教訓

うまくいったこと

  • AI監査を任意ではなく義務的にしたことで、一貫した導入が確保された
  • ツールをリサーチスキルの代替ではなくセーフティネットとして位置付けたことで、弁護士の抵抗感が軽減された
  • 事務所全体のミーティングで発見されたエラーの匿名化された事例を共有し、具体的な価値を実証した

うまくいかなかったこと

  • AIは、特に州裁判所の引用や未公開意見において、偽陽性を指摘することがあった
  • 自身の業務を疑問視されていると感じたシニアパートナーからの初期の抵抗には、慎重なチェンジマネジメントが必要だった

アドバイス

Mata対Avianca事件以降、すべての訴訟事務所はAI引用検証ステップを設けるべきです。リスクと比較してコストは最小限です。ただし、ツールを導入するだけでなく、それを中心としたワークフローを構築し、例外のないものにしてください。

私たちの見解

Lawra Lawra (穏健派)
Mata対Avianca事件以降、引用検証は任意ではなく、専門家としての義務です。この事務所の3層アプローチ(起案、AI監査、シニアレビュー)は、AIが品質保証ワークフローにどのように統合されるべきかのモデルです。重要な洞察は、監査を任意ではなく義務的にしたことです。AI支援レビューが裁量に委ねられると、締め切りのプレッシャー下で省略されるのがまさにそこです。例外なしにすることが、真剣な導入と見せかけの技術活用を分けるものです。
Lawrena Lawrena (懐疑派)
正確に言いましょう:AIはブリーフの38%に問題があると指摘しましたが、そのうち偽陽性はどれくらいあったでしょうか?事務所自体が州裁判所の引用や未公開意見での問題を認めています。プレッシャーの高い訴訟環境では、偽陽性はアラート疲れを引き起こし、弁護士がAIの警告をノイズとして却下し始めます。そして「99.6%の精度率」 — それはAIの精度でしょうか、それとも人間とAIの組み合わせの精度でしょうか?ツールの実際の貢献を評価する際には、帰属の明確化が重要です。
Lawrelai Lawrelai (楽観派)
提出前に12件の引用エラーを発見 — そのどれか一つでも制裁、恥辱、あるいはそれ以上の事態を招く可能性がありました。そして3件のブリーフが覆された判例を引用していた!Mata事件後の世界では、これは「あれば便利」ではなく、過誤防止です。年間24,000ドルの投資は、たった一件の制裁申立てと比較すれば端数にすぎません。すべての訴訟事務所が昨日のうちに導入すべきです。
Carlos Miranda Levy Carlos Miranda Levy (キュレーター)
ここで最も示唆に富む詳細は技術ではなく、社会学的側面です。シニアパートナーは当初、AIレビューを自分たちの能力への疑問と捉えて抵抗しました。これはまさにイノベーターのジレンマの縮図です:現行システムに最も投資している人々が、それを改善するものを最後に受け入れることが多いのです。この事務所が成功したのは、ツールを批判ではなくセーフティネットとして再定義したからです。チェンジマネジメントとは、機能性と同じくらいナラティブに関わるものなのです。

出典・参考文献

共有したい成功事例はありますか?

法律実務におけるAI導入の実証された事例を常に探しています。あなたの組織に語る価値のあるストーリーがあれば、ぜひお聞かせください。

体系的な学習の準備はできましたか? 学習プログラムを見る →

コメント

コメントを読み込み中...

0/2000 コメントは承認後に表示されます。