「やっとここまで来たか」と思った。AIの企業利用って、性能より先に「誰がログを見るのか」で止まることが本当に多い。特に金融や医療みたいな業種だと、社外の人が中身を覗けるだけで話が終わることもあるし、そこを正面から潰しにいったのがこの発表なんだろう。
面白いのは、Anthropicが単に「保存しません」と言うのではなく、監視に必要なログを顧客のクラウドに置き、フラグも顧客側へ飛ばす設計にしたことだと思う。これなら、悪用検知のために一定期間はデータを残したい、でも社外レビューは困る、という矛盾をかなり現実的にさばける。ゼロデータ保持に近い安心感を残したまま、監視の穴も塞ぎたいという発想は、かなり筋がいい。
ただ、これで不安が完全に消えるわけではないとも感じた。ログを自社クラウドに置くなら置くで、今度は顧客側の運用が重くなる。鍵管理も監査ログも自前でやるわけで、便利さの代わりに責任も戻ってくる。企業向けAIって、結局この「どこまでをベンダーに預けて、どこからを自分で持つか」の線引きなんだなと改めて思った。Anthropicはその線をかなり顧客寄りに引き直そうとしているように見える。
参考: Anthropic、企業向け「Enterprise Frontier Safeguards」発表 ログは顧客のクラウドに保存し、人手による確認も顧客側で