見出し画像

ミッションが文化をつくる:Anthropicの初期文化とトム・ブラウンの信念

本記事では、AIスタートアップ「Anthropic」の共同創設者であり、GPT‑3の構築に深く関わったエンジニアであるトム・ブラウン(Tom Brown)の経験を通じて、LLM(大規模言語モデル)システム設計やインフラ開発に関する重要な教訓を読み解きます。失敗を経て成功に至るまでの歩みを、彼自身の言葉や具体的な取り組み、キーモーメントに注目しながら、読者にわかりやすく伝えます。


1. トム・ブラウンのキャリアと初期の挑戦


1-1. 小さなスタートアップ、狼のようなマインドセット

ブラウンは、MIT卒業後、友人のスタートアップ「Linked Language」で初期エンジニアとして働き始めました。学校では、「タスクが与えられて対応する犬のような」受動的な姿勢だったが、スタートアップでは、「自分たちで食料を狩る狼」のような主体性が求められることを痛感した、と振り返っています(引用部要約)。このマインドセットの転換が、その後の彼の挑戦を支える基盤となりました。

1-2. スタートアップ経験と再挑戦

その後、Linked Languageを離れ、Mopubなどでの経験を経て、自らDevOps領域のYCスタートアップに参加します。しかし、Docker登場前という時期のため、なかなか製品の方向性を明確にできず苦戦。これは「何を作るかが不明確でも挑戦を続ける」経験として重要な教訓になったようです。

2. GPT-3のエンジニアリング設計とスケーリングへの貢献


2-1. OpenAIでの転機、AI研究への勇気

Grouperなど諸々の起業経験を経て、ブラウンは、2021年にOpenAIに合流しました。自身の数学的な自信のなさにも関わらず、「AI研究という重要なミッションへの貢献」という思いからチャレンジ。最初の9カ月は、機械学習の仕事には関わらず、Starcraft 環境の構築から関わり、足場を築いていったといいます。

2-2. GPT-3の構築と「スケーリング法則」の確信

GPT‑2までTPUで構築していたが、GPT‑3ではGPUへの移行を手がけました。この移行により、より柔軟かつスケールしやすいプラットフォームが可能になりました。また、スケーリング法則を目の当たりにして、「正しいレシピと計算資源でスケールすれば自然と知能が向上する」という転機的発見に至ります。

3. Anthropicへのスピンオフとミッション重視の文化


3-1. スピンオフの背景とミッションへの忠誠

トム・ブラウンは、GPT‑3の開発後、安全性への懸念からOpenAIを離れ、Anthropicを共同設立しました。Anthropicは、「AIを安全に」「人類に害を与えない」形で開発するという長期的ミッションを大前提としており、これがメンバー全員の共通の出発点となりました(Wikipediaより)。

3-2. 初期プロダクトとチャットモデル開発

設立から約1年は、主に「トレーニングインフラの構築」と「必要な演算資源の確保」に集中。Claudeの初期バージョンは、ChatGPTの後、Slack Botとして内部で試験的に導入され、ってからAPIやClaude AIとしての外部展開に至ります。その中でも特に「Claude 3.5 Sonnet」のリリースがターニングポイントでした。これによりコード支援分野で爆発的な需要と評価獲得──特に、YCスタートアップ界隈においては「Claude Code」が標準となるほどの存在感を示しました。

4. 開発文化とインフラ設計に学ぶもの


4-1. ペアプログラミングと学びのカルチャー

Anthropic内部では、ブラウンが「8時間にわたるペアプログラミングセッション」を組んで新人メンバーと共にコードを書くなど、非常に協力的で学びあう文化が根付いています。これは、単なる知識共有ではなく「実践を通じたスタイルの継承」として機能しています。

4-2. 多様なハードウェアの活用による柔軟性

Anthropicは、GPUだけでなく、TPUやTraniumなど、複数のアクセラレータを戦略的に活用しています。これにより、性能最適化と演算資源の柔軟な活用を両立しています。ただし、それには多数のプラットフォームを横断する性能工学チームにかかる負担も伴います。

4-3. 解釈可能性とインタープリタビリティへの投資

Claude 3 Sonnetなどに対して「辞書学習」によって数百万の特徴(features)を抽出し、Gold Gate Bridgeのような具体的な概念と対応させるなど、「ブラックボックスではないAI」を目指す取り組みが進行中です。

5. 教訓と今後の示唆


5-1. 「愚直に動くこと」の価値

ブラウンが述べる「“do the stupid thing that works”」という思想──安全性に関する理念を掲げつつも、実際には「動作する手法・スケールするアプローチをまず採用すべき」という現実主義も併せ持っています。

5-2. ミッション中心の組織文化の強み

Anthropicが設立時から「ミッションのために集まった人」が中心であることで、規模が約2,000人に膨れ上がっても「政治的な無駄」が抑止され、スケールしても文化が維持されている点が重要です。

5-3. 若い技術者へのアドバイス

最後に、ブラウン自身がかつての自分に向けて薦めるマインドは、「リスクを取れ」「他人があなたを誇らしく思うような取り組みをせよ」「外的な評価(学歴やブランド)ではなく、内的な理想に忠実に生きよ」というものです。

結び


トム・ブラウンの歩みは、未完成から始まり、信念と実践、スケーリングと安全性のバランスを志向しながら、AI分野で自身の道を切り開いた道標となっています。スタートアップ経験からスケーリング法則との出会い、異なるハードウェアを活かす柔軟なインフラ設計、安全性を中核に据える開発カルチャーに至るまで、その教訓は、これからAIに挑むすべての技術者・起業家にとって価値あるものです。

オススメ記事


Next Big Wave(成長株・アイデアの種・トレンド深掘り)



いいなと思ったら応援しよう!