powered by TechFeed
表示モード
Deep Dive

AIは若手弁護士を即戦力にするが、AIなしの判断力は育たない — 3ヶ月のフィールド実験が示す「成果と成長のトレードオフ」

10月24日、The Decoderが「AI makes junior patent attorneys instantly better but may quietly stunt their professional growth」と題した記事を公開した。AIが若手特許弁護士のパフォーマンスを即座に向上させる一方、AIなしの判断力は伸びない可能性を示した3ヶ月間のフィールド実験の報告だ。「AIは若手の経験不足を補う」という直感的な期待に、この研究は静かに疑問を投げかけている。

10月24日、The Decoderが「AI makes junior patent attorneys instantly better but may quietly stunt their professional growth」と題した記事を公開した。AIが若手特許弁護士のパフォーマンスを即座に向上させる一方、AIなしの判断力は伸びない可能性を示した3ヶ月間のフィールド実験の報告だ。「AIは若手の経験不足を補う」という直感的な期待に、この研究は静かに疑問を投げかけている。


AIで成果は上がった——でもAIを外すと?

Google資金提供のもと実施されたこの研究(NBER Working Paper)は、特許弁護士を対象に2つのタスクで構成されている。

  • ドラフティング:特許クレームの文章を新規に作成する作業。参加者の3分の2はGoogle Labsの未公開AIアシスタント「InFlow」を使用可能、残りの3分の1はAIなし。
  • レッドライニング:既存の特許ドラフトを批判的にレビューする作業。全参加者がAIなしで実施。

この設計がポイントだ。ドラフティングは「AIありの即時パフォーマンス」を測り、レッドライニングは「身についた判断力」を測る。レッドライニングは実務でもAIなしで行うことが多い業務であり、本当の実力が出やすい。独立した事務所の特許弁護士が、執行可能性・技術的正確性・戦略的曖昧性・網羅性・明確性の5軸でブラインド採点した。


若手はAIで化けるが、外すと元に戻る

ドラフティングでは、AI使用グループが10日後・90日後ともに明確に高スコアを記録した。特に経験7年未満の若手弁護士での改善が顕著で、低評価の割合が大幅に減少した。AIが経験差を縮める効果は、ライティング・カスタマーサービス・ソフトウェア開発など他分野の先行研究とも一致する。

問題はレッドライニングだ。AI使用グループは全体としてはスコアが高かったが、その優位はベテラン弁護士によるものだけだった。若手はドラフティングで最大の恩恵を受けたにもかかわらず、レッドライニングでは優位がゼロ。むしろスコアの分布が二極化し、中間層が消えて低評価と高評価の両方が増えた。

研究者はこの二極化を「AIが一部の若手のスキル習得を加速させた一方、他の若手ではスキル習得そのものを代替してしまった」と読む。つまりAIから最も恩恵を受けた弁護士が、最も持続的なスキルを身につけられていないという逆説が生じた。

補足的なテキスト分析も興味深い。ベテランは欠陥のあるドラフトを構造から組み直し、法的原則に基づいて修正した。若手は深刻な欠陥を指摘するだけで修正せず、「AIへの指示書」のようなコメントを残すにとどまった。この傾向はAI非使用の対照群の若手にも見られたため、研究者はこれを「AI依存で生まれた癖」ではなく「若手の元々の基礎力不足」と判断している。


他分野でも同じパターンが出ている

この結果は特許業界に限った話ではない。類似の知見はすでに複数の分野から報告されている。

Anthropicの研究では、AIを使って新しいプログラミングライブラリを学んだ若手開発者が、フォローアップテストでAIなしで学んだグループより17%低いスコアを記録した。同社のエンジニアリング部門では若手ポジションの比率低下も報告されており(詳細は同リンク先を参照)、スキル習得の問題が採用構造にも波及しつつある状況がうかがえる。

BCGの2023年のコンサルタント研究では、GPT-4を使ったとき、スキルの低いコンサルタントほど大きく改善した。これは今回のドラフティング結果と鮮やかに対応する一方、「AIなしでの実力がどう変化したか」は測定されていない点で、今回の研究が一歩踏み込んでいる。

さらにMIT Media Labは、ChatGPTへの思考の外注による「認知的負債(cognitive debt)」の兆候を報告しており、AIへの依存が長期的な思考力の形成を妨げる可能性を示唆している。

Stanfordの研究者は、AIが「教科書的な知識」——つまり若手が職場で主に提供できるもの——をほぼ代替できると指摘し、これがエントリーレベルの求人減少につながっていると論じている。


「認知のコモンズの悲劇」

研究者が指摘するのは、個別の企業レベルでは自動化による生産性向上が合理的な選択であっても、若手人材の育成コストが業界全体に分散してしまうという構造的問題だ。一部の研究者はこれを「認知のコモンズの悲劇」と呼ぶ。

今回の研究にはサンプルサイズの小ささ、参加企業の代表性の問題、ベースライン測定なし、3ヶ月という期間の短さなど複数の限界がある。ただし、クライアントとの面談や法廷での即時判断のような場面では、AIがリアルタイムで利用できない状況が長く続く見込みであり、AIなしの判断力をいかに育てるかという問いは消えない、と研究者は結論づけている。

詳細はAI makes junior patent attorneys instantly better but may quietly stunt their professional growthを参照していただきたい。