トランスフォーマーペーパー「重要なアップデート」！ 8人全員が辞職し、Googleは『Attention Is All You Need』の著者全員のメールアドレスを削除した。

Transformer に関する画期的な論文は、arXiv で長い間放置されていました。

ちょうど昨日、ネットユーザーは、Google が論文「Attention Is All You Need」の著者全員の電子メール アドレスを消して削除したことを発見しました。

論文アドレス: https://arxiv.org/pdf/1706.03762v6.pdf

そして、紙の上部に太字の赤いフォントで次のメモを書きます。

Google は、出典を明記することを条件に、この記事の表と図をジャーナリズムまたは学術的な作業で使用する場合に限り複製することを許可します。

2017年から2023年まで、以下の写真が歴史となりました。

Google の動きも非常にタイムリーでした。

少し前に、Transformer の唯一の著者であるリオン・ジョーンズが、7 月末に Google を退職して自分のビジネスを始めると発表した。

論文の更新版であるバージョン 7 は、昨日 Llion Jones 氏によって提出されました。

ネットユーザーの間で熱い議論

あるネットユーザーは「著者全員の電子メールアドレスが取り消し線で消された論文は見たことがない。どうやらグーグルのやり方はユニークらしい」と叫んだ。

Google 以外の人々 (OpenAI など) がその成果を使って素晴らしい成果を上げている間に、彼らの研究が実質的に中止されたことがどの程度影響しているかはわかりません。あるいは、ベイエリアのすべてのベンチャーキャピタル企業が多額の資金を集めて、望むものに投資するようになるかもしれません。

LinkedInによると、アシシュとニキは2022年12月にこのスタートアップを設立したようだ。それは結局どうなるのだろうか。

あるネットユーザーは、その2つの組み合わせかもしれないと返信した。 Google は、生成 AI ブームの背後にある基礎技術の大部分を発明しましたが (A100 を除く)、その後、そのいずれも製品として実装することを拒否しました。

彼らはセキュリティに重点を置いていると主張していますが、検索ビジネスを混乱させたくはなく、テクノロジーが成熟するまでにはもっと時間がかかると考えている可能性が高いと思います。 Google はイノベーションのジレンマに直面している。

一部のネットユーザーもトランスフォーマー八字の概要を述べた。

新しいシリコンバレーの「8人の裏切り者」

それで、残りの 7 人は今どこにいますか?

Jakob Uszkoreit は、Transformer アーキテクチャの主な貢献者として認められています。

彼は2021年半ばにGoogleを退社し、ニューラルネットワークを使ったmRNAの設計に取り組むInceptive Labsを共同設立した。

これまでに、彼らは2,000万ドルを調達し、20人以上のチームを擁しています。

アシシュ・ヴァスワニは2021年末にGoogleを退社し、AdeptAILabsを設立した。

AdeptAILabsは急速な発展段階にあると言えます。

現在、同社は4億1500万ドルを調達しただけでなく、評価額も10億ドルを超えています。

また、チームの規模も40名を超えました。

しかし、アシシュは数か月前にアデプトを去った。

ニキ・パーマーはトランスフォーマーズ紙の唯一の女性著者である。

彼女は2021年末にGoogleを退社し、前述のAshish VaswaniとともにAdeptAILabsを設立した。

しかし、ニキも数か月前にアデプトを去りました。

ノアム・シャジールは20年間勤務したグーグルを2021年末に退社した。

その後、彼はすぐに友人のダン・アビトボルとともに Character AI を設立しました。

同社の従業員数はわずか20名程度ですが、効率性は非常に高いです。

彼らは現在、約2億ドルを調達しており、ユニコーン企業になる寸前です。

エイダン・ゴメスは2019年9月にGoogle Brainを退社し、CohereAIを設立した。

3年間の着実な成長を経て、同社は現在も拡大を続けており、Cohereの従業員数は最近180人を超えました。

同時に、同社の調達資金は4億ドルの大台を突破しようとしている。

TensorFlowの共著者の一人であるLukasz Kaiser氏は、2021年半ばにGoogleを退社し、OpenAIに加わった。

イリア・ポロスキンは2017年2月にGoogleを退社し、2017年6月にNEAR Protocolを設立した。

現在、NEARの評価額は約20億ドルです。

一方、同社は約3億7500万ドルを調達し、大規模な二次資金調達を実施している。

リオン・ジョーンズは2023年8月にGoogleを退社し、同月にAI研究科学者としてスタートアップのステルス・スタートアップに入社した。