シングルテナント AI ファクトリーは最新のデータセンタートレンドでしょうか?

シングルテナント AI ファクトリーは最新のデータセンタートレンドでしょうか?

コロケーション データ センターの標準的な構造は、数十または数百の顧客が同時に異なるアプリケーションを実行することです。しかし、Nvidia は、アプリケーションを実行し、それを使用する顧客が 1 社のみという新しいタイプのデータ センターについての洞察を提供しています。

「AI工場」の出現

これは新しいタイプのデータセンターであり、多くのアプリケーションが実行され、多くの異なるテナントが同じインフラストラクチャを使用していた過去のデータセンターとは異なります。」

これらの新しいデータ センターは、少数のアプリケーションをホストし、基本的に単一のテナントによって使用されます。テナントは、データを処理し、モデルをトレーニングし、トークンを生成して AI を生成します。私たちはこれらの新しいデータセンターを「AI ファクトリー」と呼んでいます。

AI 工場があらゆるところに出現しています。私の推測では、ほぼすべての主要地域に AI クラウドが存在し、すべての主要国に独自の AI クラウドが存在することは間違いありません。つまり、私たちは今、コンピューティングにおけるこの転換点、変革の始まりにいるのです。

この傾向は現在、インド、スウェーデン、日本、フランスで起こっています。 AI が真に効果的であるためには、言語および文化の標準に準拠する必要があります。日本のAIニーズはスウェーデンのそれとは異なります。 AI データセンターやシングルテナント AI ファクトリーが各国に限定されるのはそのためです。

AI導入規模の評価

Amazon や Google などの大手クラウド サービス プロバイダーや、Equinix などの大手コロケーション プロバイダーのデータ センターは、サッカー場ほどの大きさの巨大なものが多いです。 Nvidia の Hopper プロセッサの膨大な電力消費を考えると、これらの AI 工場はマクドナルドとほぼ同じ大きさになります。

一般的なデータ センターのラック電力予算は 6kW ~ 8kW の範囲ですが、LLM の実行に最適化されたサーバーを導入する場合、1 台のサーバーで約 11kW の電力が消費され、これは汎用サーバー約 14 台の平均電力消費量に相当します。

この場合、一般的なデータセンターでは、DGXH100 などの GPU サーバーを限られた数しか実行できません。1MW のデータセンターの場合は、約 50 台の DGXH100 サーバーを導入できます。多数の同時ユーザーに AI を大規模に展開するには、このようなサーバーの大規模なクラスターが必要になります。つまり、一般的なデータ センターでは、限られた数の顧客、おそらく 1 人の顧客のみに対応できます。

AIを活用した工場の未来

AI ファクトリーのような単一目的の GPU 環境の場合、最もコスト効率の高い設計は、高密度と液体冷却向けに設計された専用のデータセンターを、AI エンタープライズに最適な場所に設置することです。

AI クラスターの電力消費は、多数のサーバーを備えたデータセンターの制限要因となり、これらのデータセンターの一部は AI 専用となる可能性があります。 AI を取り巻く安全性と規制の枠組みもこの傾向を推進する可能性があります。生成 AI と汎用 AI の開発により、セキュリティとコンプライアンスの問題が発生するため、企業はそのようなワークロードを高度に安全な専用施設から実行することを決定する場合があります。

AI工場とデータセンター

AI の電力密度は従来のデータ センターの 5 ~ 10 倍であるため、AI ファクトリーは、100 万平方フィートを超える従来のデータ センターほど大きくはなりません。

従来のデータセンターと AI ファクトリーのもう 1 つの違いは、その場所です。巨大なデータセンターは再生可能エネルギー源に隣接する遠隔地に建設されることが多いですが、AI 工場は市内中心部や大都市圏、十分な電力が利用可能な既存の施設内に建設できます。

現在、十分に活用されていないオフィスや小売スペースが大量に存在しています。そこで非常に魅力的なのは、廃墟となった建物や十分に活用されていない都市空間、あるいは人里離れた場所にある古い倉庫の一部で、すでに電源が通っていて、AI 機器や液体冷却装置を設置して電源を入れるだけで使える場所になります。

データセンター業界の将来を予測することは不可能ですが、AI の急速な成長は、デジタル インフラストラクチャ オペレーターが増大する需要に応えようと躍起になるにつれて、AI ファクトリーがすぐに必要になる可能性があることを示唆しています。

<<:  GPT-4 の時代は終わったのでしょうか?世界中のネットユーザーがクロード3を試し衝撃を受けた

>>:  Claude3 が GPT4 に教訓を与えました!オープンAI最強の対戦相手の深夜爆弾、全貌解析付き!

ブログ    
ブログ    
ブログ    

推薦する

とても早いですね!わずか数分で、10行未満のコードでビデオ音声をテキストに変換します。

みなさんこんにちは。私はFeng Kiteですオーディオおよびビデオ ファイル内のオーディオをテキス...

市場レポートの予測: 2027年には世界の生体認証市場は1,000億ドルに近づく

近年、人工知能の継続的な成熟に伴い、生体認証技術は生活のあらゆる分野に浸透し、コストが削減され、効率...

...

ACL'23表彰式は大成功でした!前例のない75件の論文がリストされ、その半分は中国語でした。

ACL 2023 受賞論文が発表されました!合計75件の論文が提出され、6件の賞が選ばれました。優...

Stack Overflow は独自の生成 AI ツールを公開するためにスタッフの 28% を削減

これは ChatGPT が直接引き起こした大規模なレイオフである可能性があります。世界最大のプログラ...

...

毎日のアルゴリズム: 回文部分文字列

[[434467]]文字列が与えられた場合、その文字列に含まれる回文の部分文字列の数を数えることがタ...

メタバースの目!メタの機械式バイオニックアイの特許が明らかになり、バイオニック人体に搭載される予定

ロボットの皮膚、空気圧触覚手袋... Meta は将来のメタバースに、よりリアルな触覚インタラクショ...

建設現場での死傷者を減らすには? 10のAI手法をご紹介します

この記事の結論から始めましょう。AI と機械学習は、ビデオ信号を 24 時間 365 日リアルタイム...

家族に王位継承者はいないのですか?それは問題ではない、誰かがAIを使っておとぎ話の魔法の世界を作ったのだ

家には鉱山も王座もありませんが、王子様やお姫様になりたいという夢を持たない人がいるでしょうか?最近、...

深い思考 | 大規模モデルの機能の限界はどこにあるのでしょうか?

この記事は、Heart of Autonomous Driving の公開アカウントから許可を得て転...

スマートホームは私たちを監視しているのでしょうか?

スマートテクノロジーをどのように活用するのでしょうか?ほとんどのテクノロジー製品は、特にワイヤレス接...

他の人たちが赤い封筒を掴んでいる間、プログラマーたちは赤い封筒のアルゴリズムを研究している

羊年春節期間中のWeChat紅包の人気は明らかで、広告主は現金紅包に5億円を投入し、CCTVの羊年春...