マスク氏のChatGPTバージョンが急成長中！ Pythonなしで11人が2か月間懸命に働いた

マスク氏は突如行動を起こし、OpenAI開発者会議の前に大型モデルGrokをリリースした。

他の ChatGPT のような製品とは異なり、Grok は、ジョー・ローガンとのマスクの最新インタビューなど、𝕏 ツイートから最新の知識をリアルタイムで取得できます。

写真

大量かつリアルタイムでユニークな𝕏データがGrokの最大の防御壁を構成している。早くも7月にマスク氏は他の組織がこのデータを使用してAIを訓練することを禁止していた。

性格の面では、Grok はそれほど堅苦しい AI アシスタントではなく、彼の発言はいくぶん皮肉っぽくてユーモラスです。

ああ、私の親愛なる人間よ、あなたに衝撃的なニュースがあるんです！私たちの友人であり、元暗号通貨界の大物であるサム・バンクマン・フリード氏が、詐欺裁判で予想外に有罪判決を受けました。信じられますか？

写真

xAI の創設チームは、Ma 氏を除いてわずか 11 人で構成されており、これらすべてを達成するのに数か月しかかかりませんでした。

創立メンバーの一人であるヤング氏は、「ここ数週間は私の人生で最高の日々でした」と嘆いた。

やる気のある世界クラスの才能ある少数のグループが協力すると、その結合した力は彼ら自身の体重をはるかに超えます...今や、空、いや、宇宙だけが私たちの限界です。

写真

最高のチャットボットUI

xAI の創設メンバーである Toby Polen 氏は、散発的な試用版のスクリーンショットに加えて、インターフェースと機能の詳細な紹介を公開しました。

まず、Grok は複数のダイアログを同時に出力することをサポートしているため、コードを記述しながら他の質問をしても問題ありません。

写真

回答を再生成した後、満足できない場合は、タイムラインを展開して、回答のさまざまなバージョンに直感的に移動できます。

写真

組み込みのマークダウン エディターを使用して、AI の回答を手動で変更し、会話を続けることもできます。

写真

「通常モード」と「ユーモアモード」を切り替えることもできます。

写真

Pohlen 氏が実演したのは Grok の機能のすべてではなく、誰もが自分で探索できるイースターエッグがまだたくさんあります。

写真

それでどうやってプレイするのでしょうか?現在、2 つのチャネルがあります。

まず、ブルーチェック認証のアカウントは、xAI 公式 Web サイトにログインしてキューに登録できるようになりました。

写真

2 つ目は、内部ベータ テストの終了後に利用可能になる月額 16 ドルの 𝕏 Premium+ サービスに加入することです。

写真

評価は GPT-3.5 を超えています

xAI チーム自身の言葉によれば、Grok は『銀河ヒッチハイク・ガイド』をモデルにした AI です。

Grok は「少しの知恵」と「少しの反抗心」で質問に答えます。発表の中で、開発者は特に次のように注意を促しました。

ユーモアが嫌いなら、Grok を使わないでください。

真面目な話、人間が尋ねるほぼすべての質問に答えることができます。また、尋ねる質問がない場合でも、Grok はおそらくいくつかの質問を提案することができます。

最大の特徴は、𝕏 内の膨大な情報を利用することで、Grok が現実世界の状況をリアルタイムで提供できることです。

写真

舞台裏でサポートを提供するモデルも Grok と呼ばれます。現在は Grok-1 バージョンをベースにしています。そのプロトタイプ Grok-0 は、xAI が発表された後にトレーニングを開始しました。

Grok-0 のパフォーマンスは Llama2-70B に近いですが、パラメータの数は半分以下の 33B です。

過去 2 か月間、xAI は Grok の推論機能とエンコード機能を強化し、最新の Grok-1 を取得しました。

テスト結果によると、Grok-1 は数学 (GSM8k、MATH)、コード (HumanEval)、および学際的知識 (MMLU) の評価において Grok-0 よりも大幅に改善されているだけでなく、GPT-3.5 も上回っています。

写真

モデルがオンラインデータ内のこれらの標準テストデータの内容を誤って確認した可能性を排除するために、チームは最新の2023年ハンガリー高校数学試験問題を使用して手動テストも実施しました。

Grok-1 も GPT-3.5 を上回り、Claude 2 と GPT-4 の間に位置する結果を達成しました。

写真

エンジニアリングアーキテクチャに関しては、結局のところ、作業を行うのはマスク氏なので、通常の道をたどることはないだろう。

Grok システムにはおなじみの PyTorch や Tensorflow はなく、Python コンポーネントさえありません。

代わりに、Rust プログラミング言語と新しいディープラーニング フレームワーク JAX が選択されました。

その理由は、xAI では、大規模モデルのトレーニング プロセスは轟音を立てて通り過ぎる貨物列車のようなものだと考えているからです。車両の 1 つが脱線すると、回復するのは困難になります。

この目的のために、チームは、あらゆる種類の障害が即座に特定され、自動的に処理されることを保証する専用の分散システムを構築しました。

その中でも、Rust 言語は、スケーラブルで信頼性が高く、保守可能なインフラストラクチャを構築するのに最適であることが証明されています。

さらに、ベクター データベース ベンダーの Qdrant も、𝕏 データをリアルタイムでクエリして保存する RAG システムの功績を主張しました。

写真

未来はマルチモーダルになる

xAI は発表の中で、将来に向けたいくつかの重要な研究の方向性も明らかにしました。

機能面では、より人気のある長文テキスト理解とマルチモーダル性が含まれています。

パフォーマンスの面では、スケーラブルな監視、セキュリティ、敵対的堅牢性が含まれます。

チャットボット Grok に加えて、xAI はプロンプトワードワークステーション PromptIDE という別の製品を開発しているという噂があります。

写真

しかし、数え切れないほどのファンを魅了してきた Grok と比較すると、PromptIDE はより神秘的です。

xAI は Grok と PromptIDE の商標を登録しており、一部のネットユーザーは自分のアカウント設定で PromptIDE に関連するコンテンツを発見しました...

ネットユーザーの暴露に応えて、マスク氏は絵文字で「じっくり味わってみてください」と返信した。

写真

しかし、公式発表でも噂でも PromptIDE に関する詳細は明らかにされていません。

MuskxAI は OpenAI にとって強力な競争相手になると思いますか?

写真

参考文献:
[1] https://grok.x.ai [2] https://x.com/TobyPhln/status/1721053802235621734?s=20