この新しい AI エレクトロニクスにはシリコンが使われていません。脳のニューロンをシミュレートすることができ、サイエンス誌にも掲載された。

この新しい AI エレクトロニクスにはシリコンが使われていません。脳のニューロンをシミュレートすることができ、サイエンス誌にも掲載された。

この記事はAI新メディアQuantum Bit(公開アカウントID:QbitAI)より許可を得て転載しています。転載の際は出典元にご連絡ください。

ペロブスカイトをシリコンの代わりに使用して電子機器を開発すると、実際に AI 計算を完了できるのでしょうか? ? ?

周知のように、ペロブスカイトは重要な材料として、主にドーピング後のSCI および博士論文(手動犬頭)の製造に使用されます。

今回、この技術は新しいAI電子機器の開発に使用され、サイエンス誌に掲載されました。その結果は目を見張るものでした。

心拍リズム認識タスクにおける平均パフォーマンスは従来のハードウェアの5.1 倍であり、動的ネットワークを柔軟にシミュレートしてトレーニングのエネルギー消費を削減することもできます。

ニューロモルフィックコンピューティングによるエネルギー消費の削減

この研究は主に、ペロブスカイトに異なる量の水素をドープすることで人間の神経活動をシミュレートし、それによってさまざまな機械学習タスクを実行します。

これは主にペロブスカイト自体の特性に基づいています。

ペロブスカイトは水素イオンを容易に吸収する独特の結晶構造を持っています。水素イオンを添加すると材料の導電性が変化するため、状態を切り替えられる AI 電子デバイスに材料を準備できるようになります。

ここで研究者らは、ネオジムとニッケルを混合したペロブスカイト材料を使用しました。

この物質に異なる量の水素イオンを混合することで、成分のさまざまな状態を変化させ、脳のニューロンの活動をシミュレートすることができます。

具体的には、この材料に大量の水素イオンを加えると、その電子が最終的にニッケル原子に移動し、原子の電気的特性が変化し、それが材料の導電性に影響を与えます。

このとき、外部から電界を印加することで水素の電子移動を制御することができ、水素含有量を制御することで電子部品を4 つの異なるモード間で切り替えることができます。

4 つのモードは、ニューロン モード、シナプス モード、抵抗モード、メモリ コンデンサ モードです。

ドーピングがない場合、または水素イオンを少量ドーピングした場合、材料は抵抗モードになり、情報の保存と処理に使用できます。

電気パルスによって刺激されると、ハードウェアはメモリ コンデンサ モードに切り替えることができます。メモリ コンデンサは、脳の構造を模倣したニューラル ネットワーク システムの一般的なコンポーネントです。

ニューロン パターンは複数の信号を蓄積し、その時点でコンポーネントの抵抗が大きく変化し、刺激を受けたときの人間の脳のニューロンの活動をシミュレートします。

シナプスパターンは、ニューロンの信号の強度に基づいて入力を変換します。

ペロブスカイトに水素をドーピングするというアイデアは、研究者たちがニューロモルフィック・コンピューティングを使ってこの新しいデバイスを作りたかったために生まれました。

これは通常のノイマン型コンピューティング システムとは異なる構造で、主に人間の脳内のニューロンとシナプスの活動をシミュレートすることで機械学習タスクを実行します。

その最大の利点は、コンピューティングのエネルギー消費を削減できることであり、これは将来、より複雑で大規模な AI 計算を解決する上で非常に重要です。

その結果、AI 計算を実行するときに、ハードウェアのさまざまな部分をアクティブ化またはシャットダウンする必要がなくなり、ハードウェアを制御して対応するモードに調整するだけで済みます。

研究者らはまた、この電子機器の内部状態は準安定であり、水素イオンを置き換えなくても6か月間準安定状態を維持できると述べた。

実験結果

では、このハードウェアはさまざまなニューラル ネットワークでどのように機能するのでしょうか?パフォーマンスを検証するための鍵となります。

ここで、研究者たちは 2 つのニューラル ネットワークをテストとして使用しました。

1 つ目は、人間の脳の働きを模倣した機械学習システムであるリザーバー コンピューティング ネットワークです。

これは、情報をリザーバーに入力し、そこでデータがさまざまな方法でリンクされ、分析のためにリザーバーから送信されることによって機能します。

その結果、ネットワークを大量のデータで事前にトレーニングする必要はなく、出力前のネットワークの最後の層の勾配降下法のみが必要になります。

鍵となる貯留層は、今回提案された新しい電子機器と従来のハードウェアをそれぞれ使用して計算されます。

従来の理論上のリザーバーや実験上のリザーバーと比較すると、この新しいリザーバー (H-NNO) は、使用するデバイスが少なく、MINIST (手書き数字認識)、SpokenDight (音声数字認識)、ECGHeartBeat (心拍数認識) の 3 つのタスクで同じパフォーマンスを達成できます。

平均性能はそれぞれ1.4倍1.2倍5.1倍向上しています。

さらに、この新しい電子デバイスに基づいて設計された動的ニューラル ネットワークは、増分学習の処理でも非常に優れたパフォーマンスを発揮します。

以下のネットワーク(GWR)は赤い鳥と黄色い鳥を識別できるシステムです。理想的には、ネットワークが新しいタイプの入力 (bluebird) を検出すると、システムはノードを追加してネットワークを拡張します。

入力に何らかの動物が長時間現れない場合、対応するノードはエネルギーを節約するためにシャットダウンされます。

研究者たちは、手書き数字認識データセットをテストに引き続き使用しました。

まず、0~4の範囲の数字を認識するようにネットワークに教えました。次に範囲を 0 ~ 9 に拡大してしばらくトレーニングし、その後 0 ~ 4 のみを認識します。

結果は、5〜9の数字が表示されなくなると、ネットワーク内の関連ノードが徐々にシャットダウンされることを示しました。

次の図 i ~ iii では、数字は対応する開いているノードを示し、黒い領域は閉じているノードを示します。

研究者たちは、この動的ニューラル ネットワークを静的ネットワークと比較し、増分学習シナリオでは、MNIST と CUB-200 データセットの両方で動的ネットワークの方がパフォーマンスが優れていることを発見しました。

下の図 BE からわかるように、MINIST データセット テストでは、動的ネットワークの最終精度は静的ネットワークの 2.1 倍であり、データセット CUB-200 の最終精度は静的ネットワークの 2.5 倍です。

北京航空航天大学の張海天教授が共同筆頭著者および責任著者である。

北京航空航天大学の張海天教授が本論文の共同筆頭著者および責任著者である。

彼はペンシルベニア州立大学で材料科学と工学の博士号を取得しています。

2018年、米国ギルブレス研究フェローを受賞し、パデュー大学工学部にて独自研究を実施(共同教授:シュリラム・ラマナサン、カウシク・ロイ)

昨年9月、張海天さんは北京航空航天大学の材料科学工学部にフルタイムで入学した。

主な研究分野は、機能性相変化材料の制御と、ニューロコンピューティングデバイス、磁気機能材料、ナノ材料などへの応用です。

論文リンク:

https://www.science.org/doi/10.1126/science.abj7943

<<:  メタバース軍団を結成しよう! 「Google Lab」が生まれ変わる、700人超の謎のチームのメンバーは?

>>:  生活における人工知能の主な応用

ブログ    
ブログ    

推薦する

ディープラーニングを使用してビデオから車両速度を推定する

私が解決したい問題は、車にカメラが付いていて、車がどれくらいの速さで走っているのかを知りたいというこ...

上位 10 の古典的なソートアルゴリズムの JS バージョン

序文読者は自分で試してみることができます。ソースコードはここ (https://github.com...

米国政府が警告: ​​ChatGPT は重大なセキュリティリスクをもたらす

最近、米国連邦政府は、ユーザーはChatGPTのサイバーセキュリティリスク、特にフィッシングやマルウ...

NLP フィールド インデックス ツール、3000 以上のコード ベース、論文や GitHub ライブラリのワンクリック検索

検索について言えば、学術的な検索も科学です。検索を上手に使いこなすと、必要な学術情報を素早く見つける...

私の国のドローンは新たな段階に入り、成熟した開発にはまだ3つのレベルを通過する必要があります

[[428031]]先日の建国記念日、ドローンは間違いなく「最もクールな存在」でした。交通の補助、景...

AIは新たな科学革命を先導している

この記事はLeiphone.comから転載したものです。転載する場合は、Leiphone.com公式...

ガートナー: 2024 年の主要な戦略的テクノロジー トレンド

2024 年までに、AI は企業で主流となり、クラウド サービス、セキュリティ、持続可能性も影響力を...

...

5G の出現はフェデレーテッド ラーニングにどのような影響を与えるでしょうか?

世界中の開発チームが AI ツールの作成を急いでいるため、エッジ デバイスでのアルゴリズムのトレーニ...

...

コーディングが ChatGPT を圧倒します! UIUCと清華大学が共同で7BパラメータのMagicorderをリリース、コードデータの重みは完全にオープンソース

オープンソースの「ビッグコードモデル」が登場しました。 UIUC 清華大学の研究者チームは、70 億...

データ拡張とは何ですか?

十分なトレーニング データがあれば、機械学習モデルは非常に優れたパフォーマンスを発揮します。残念なが...

医療用ロボット:世界第2位のロボットの現状と今後の応用展望

医療用ロボットという用語は、監督なしで事前にプログラムされたタスクを自律的に実行する機械のイメージを...

LeCun が喧嘩を始めた、LLM は全く理屈が通らない!大規模モデルの出現は、最終的には文脈学習と切り離せないものである。

大規模言語モデルは推論できますか?出現したさまざまな能力の源は何でしょうか?少し前に、LeCun 氏...