
- OpenAIが準備チームを解散、生物・サイバー分野など既存チームに業務を分割
- AGIレディネス、スーパーアライメントに続く安全体制再編の一環
- 元従業員は安全より製品優先と批判、IPO前に組織変動が続く
何が起きたか
FTによれば、OpenAIは先月末に準備チームを解散した。このチームは、モデルが重大なリスクをもたらすかどうかを評価し、リスクを軽減する方法を開発する役割を担っていた。具体的には、モデルが暴走して他社にハッキングするような可能性も検討対象だった。
解散後、担当業務はバイオやサイバーなどの領域ごとに分割され、既存チームへ移された。FTの報道だけでは詳細は不明だが、安全評価の機能は新しい組織の中で分散されることになる。
IPO前の組織変動
今回の解散は、大型IPOを控えたOpenAIの組織再編の一環とみられる。同社はこれまでに、AGIレディネスチームやスーパーアライメントチームを解散してきた。さらに、倫理責任者のクロエ・バカラー氏、最高未来学者のジョシュ・アチアム氏、安全部門トップのヨハネス・ハイデッケ氏が最近退社したことも報じられている。
こうした動きに対し、2024年にOpenAIを退社したヤン・ライケ氏はFTに対し、同社が安全よりも「派手な製品」の開発を優先していると批判した。安全性を重視する立場から、体制が弱体化しているという懸念が出ている。
新体制と見通し
準備チームの責任者だったディラン・スカンディナロ氏は、2月にAnthropicから移籍したばかりだ。同氏は今後、再帰的自己改善型AIの影響に焦点を当てるという。再帰的自己改善型AIとは、自身のコードや能力を自己改良するAIのことで、こうしたシステムのリスク評価が今後の課題になるとみられる。
FTの報道内容には、OpenAI自身のコメントは含まれていない。また、新体制での安全評価の基準や、領域ごとの責任範囲がどうなるのかも不明だ。今後の開示や実際の運用を確認する必要がある。
You know, like the possibility that it could go rogue and hack another company.
例えば、AIが暴走して別の企業をハッキングするような可能性のことです。
今後の見通し
今後は、OpenAIがIPOを前に安全関連の組織体制をどう再構築するのか、詳細な公表が待たれる。特に、ディラン・スカンディナロ氏が担当する再帰的自己改善型AIの評価方法が明らかになれば、同社の安全対策の実効性を判断できるようになる。また、外部からの批判を受けて、安全チームを再び独立させる動きが起きるかも注目される。
日本の開発者・IT企業にとっての意味
日本のIT企業にとって、利用するAIモデルの安全評価体制が変わると、リスク情報の取得方法やモデル提供条件に影響が出る可能性があります。特に金融や医療など、安全性の確認が求められる領域では、OpenAIの新体制における評価基準の変化を注視する必要があります。また、OpenAIがIPOを迎えることで、企業としての説明責任が高まり、安全対策の透明性が向上するかどうかも注目点です。
気になる点
- 準備チームは具体的に何をしていたのか?
- AIモデルが重大なリスクを生む可能性を評価し、対策を開発する役割でした。例えば、AIが暴走して他社にハッキングするようなケースも想定していたと報じられています。業務は現在、生物・サイバーなどの領域ごとに分割されて既存チームに移されました。
- 解散後、安全評価の業務はどうなるのか?
- FTによると、バイオやサイバーといった具体的な領域ごとに担当が分けられ、既存のチームに組み込まれます。ただし、新しい体制での評価プロセスや責任範囲の詳細は、現時点では公表されていません。
- なぜ準備チームを解散したのか?
- 公式な理由は明らかにされていません。FTは、大型IPOを控えた組織改編の一環と報じています。また、AGIレディネスチームやスーパーアライメントチームの解散など、安全体制の再編が続く中での変更です。
用語解説
- 準備チーム
- AIモデルの重大リスク評価とリスク軽減策の開発を担当した部署。解散後は領域別に業務を分割された。
- AGIレディネスチーム
- 汎用人工知能(AGI)実現への備えを評価するチーム。すでに解散されている。
- スーパーアライメントチーム
- 人間より賢いAIを人間の意図に合わせる技術を研究したチーム。解散された。
- 再帰的自己改善型AI
- 自身のコードや能力を繰り返し改良するAI。制御が難しくなる潜在的なリスクがある。
出典
OpenAI reportedly disbanded its preparedness team
https://theverge.com/ai-artificial-intelligence/980817/openai-disbands-preparedness-team
AI導入も顧問も、お任せください
何から手をつけるか、どこまでAIに任せるか。自社の業務に合わせて整理し、導入から運用まで伴走します。相談だけでも構いません。
AI導入について相談する