GPT-4ではMITでコンピュータサイエンスの学位を取得できない

GPT-4ではMITでコンピュータサイエンスの学位を取得できない

ある研究者が、MITのコンピューターサイエンスの学位の宿題や試験問題を解くことができると主張するチャットボットを訓練するために、講師の同意なしにコースの教材を収集したことで批判されている。

この物議を醸している論文では、エリート大学が設定したさまざまなコースから取得した 4,500 の質問のデータセットで GPT-4 をトレーニングおよびテストする方法について説明しています。

論文の要約には、「MITの数学、電気工学、コンピューターサイエンスの分野の卒業要件に対する大規模言語モデルの能力を評価しました。結果は、GPT-3.5がMITのコースのうち3分の1を正常に学習し、卒業要件を満たしている一方、GPT-4は適切なプロンプトエンジニアリングを通じて画像によって引き起こされるいくつかの問題を排除した後、すべてのコースの卒業要件を完全に達成していることを示しています。」と書かれています。

この論文はその後、物議を醸す研究方法について批判を受けた。例えば、テストされる前に、GPT-4 はコース内のすべての質問の回答にアクセスし、その回答を採点していた。論文の共著者として記載されているArmando Solar-Lezama教授と第一著者のIddo Droriは、これらのデータセットを収集するための事前の許可を得ていない可能性があります。

同校の教師の中には、授業の教材をドロリ氏と共有していなかったとレジスター紙に語った者もいる。一方、Solar-Lezema 氏は、論文の序文を書いただけで、Drori 氏がこれらのデータセットを使用して GPT-4 をトレーニングしていることを知らなかったと語り、GPT-4 はすでに MIT でコンピューターサイエンスの学位を取得する価値があるとさえ主張しました。

この論文はarXivから撤回されており、Drori氏は現在MITにいません。

米国連邦取引委員会(FTC)は、生成AIは独占禁止法上の懸念を引き起こすと述べている。委員会は、生成AIをめぐる誇大宣伝を注意深く監視し、この技術が社会に浸透するにつれて、支配的なプレーヤーが競争を阻害しないようにしている。

FTCは、市場が成熟するにつれて、企業はデータ、ハードウェア、人材など、モデルの開発に必要なリソースを管理する方法を見つけようとする可能性があると警告した。 彼らは、自社のAIサービスを低価格で提供したり、顧客を自社のプラットフォームに閉じ込めたりすることで、競合他社よりも安い価格を狙う可能性のあるクラウドサービスプロバイダーを注意深く監視している。同時に、大手テクノロジー企業は、新しいテクノロジーや専門知識を活用するために新興企業を買収することで、その力を強化する可能性があります。

FTCは、オープンソース運動により開発者が独自のシステムを構築しやすくなることでこうした懸念の一部は相殺される可能性があるものの、セキュリティ保護策なしにソフトウェアが一般に公開されれば、依然として技術が悪用される可能性があると指摘した。

<<: 

>>:  DAMOアカデミーが大規模モデルテストベンチマークを発表: GPT-4はかろうじて合格、他のモデルはすべて不合格

ブログ    
ブログ    
ブログ    
ブログ    
ブログ    
ブログ    

推薦する

...

OpenAI のもう一つの「大ヒット作」: AI に芸術的創造性を与える

OpenAIがまた爆弾発言をしました。昨年夏に人気の言語モデルGPT-3を発表したOpenAIの研究...

1日で13.5%も急落!オラクル株は2002年以来最大の下落

オラクルの株価は現地時間9月12日に13.5%急落し、20年以上で最大の下落を記録した。その理由は、...

PHP 再帰アルゴリズムとアプリケーションの紹介

PHP は動的な Web ページを開発するための最適なテクノロジーです。プログラミングに役立つ基本的...

イノベーションを統合し、障壁を下げ、PaddlePaddleは人工知能を推進して大規模な工業生産を実現します。

5月20日、中国国家深層学習技術応用工程研究室と百度が共催する「WAVE SUMMIT 2021 ...

中関村科学技術の張傑氏との対話:大規模モデルを実装するには従うべき「テクニック」がある

ゲスト | 張潔インタビュー | 張小南編集者 | 徐潔成制作:51CTO テクノロジースタック(W...

...

AIは黄金時代を迎えているのか、それとも冬を迎えようとしているのか?

人工知能開発の世界的なブームは今も急速に進んでおり、止まる気配はありません。現在、数十カ国が経済成長...

ブロックチェーンが人工知能に力を与える方法

現在、データはデジタル環境に残っており、共有する動機はほとんどありません。これにより、Google、...

人工知能の将来の動向

人工知能 (AI) が普及し、人生を変えるような意思決定に組み込まれるようになるにつれて、透明性の必...

JVM チューニングの概要: 新世代のガベージ コレクション アルゴリズム

ガベージコレクションのボトルネック従来の世代別ガベージ コレクション方式では、ある程度、アプリケーシ...

大規模モデルの観点から見た因果推論

1. 因果推論と大規模モデル近年、因果推論は研究のホットスポットとなり、多くのシナリオに適用されてき...

95 年以降の DAMO アカデミーのインターン生がマイクロソフトに勝ち、最も難しい NLP タスクの世界記録を更新

アリババAIは、常識QA分野の権威あるデータセットであるCommonsenseQAで新たな世界記録を...

コグニティブ時代のIBMの新しいカスタマーサービスセンターは、人間と機械のコラボレーションでより大きな価値を生み出します

これは厳しい試練となるだろう年初に突然発生した疫病は、世界に「一時停止ボタン」を押し、伝統的な運営モ...

PyTorch ガイド: ディープラーニング モデルのトレーニングを高速化する 17 のヒント!

PyTorch でディープラーニング モデルをトレーニングする場合、モデルのトレーニングを高速化す...