Stability AI は、プログラミング用の最初の生成 LLM AI 製品である StableCode を発表しました。この製品は、プログラマーが日常業務を完了するのを支援し、初心者開発者に実用的な学習ツールを提供するように設計されています。 公式紹介によると、StableCode は 3 つの異なるモデルを使用して開発者がコードを記述するのに役立つ独自の方法を提供し、それによって開発効率を向上させます。ベースモデルは、まず BigCode スタックデータセット (v1.2) の複数のプログラミング言語を使用してトレーニングされ、その後、Python、Go、Java、Javascript、C、マークダウン、C++ などの一般的な言語を使用してさらにトレーニングされます。合計で、彼らは HPC クラスター上で 5600 億トークンのコードを使用してモデルをトレーニングしました。 基本モデルが構築されると、Stability AI は特定のユースケースに合わせて命令モデルを調整し、複雑なプログラミング タスクの解決を支援します。この結果を達成するために、研究者たちは、Alpaca 形式の約 120,000 個のコード命令/応答ペアで基本モデルをトレーニングしました。 StableCode Instructを使用して、指定された命令に応じてコードを生成します。 StableCode は、コーディングについてさらに学びたい開発者にとって理想的な構成要素であり、ロングコンテキスト ウィンドウ モデルは、ユーザーが単一行および複数行のオートコンプリート提案を使用できるようにするための完璧なアシスタントです。 このモデルは、一度により多くのコード(16,000 トークンのコンテキスト ウィンドウを持つ以前に公開されたオープン モデルの 2 ~ 4 倍)を処理できるように設計されており、ユーザーは最大 5 つの平均サイズの Python ファイルに相当するものを同時に表示または編集できます。より大きな挑戦に挑戦したい初心者にとって理想的な学習ツールになります。 StableCode は Pytorch ディープラーニング ライブラリを使用して、比較的複雑な Python ファイルを完成させます (灰色のテキストは StableCode の予測です) 最後に、StableCode の評価データを見てみましょう。 |
<<: 調査レポート:世界中の企業の75%が職場でのChatGPTの使用を禁止または禁止を検討中
>>: AIGCのビジネス:アクセンチュアが30億ドルを投資した理由
先ほど、DNS 負荷分散の概念をいくつか紹介しました。次に、この負荷分散テクノロジに関連するアルゴリ...
2020年7月11日、世界人工知能会議が終了し、満足のいく回答書が提出されました。人工知能の時代の到...
[[432257]]ソースコードはこちら GitHub: https://github.com/na...
序文と個人的な理解とても良い作品を見つけたので、皆さんと共有したいと思います!占有+世界モデルに関し...
最高人民法院研究室民事部の陳龍野部長は、一部のモバイルアプリケーション(APP)はしばらくの間、パッ...
この記事は公開アカウント「Reading Core Technique」(ID: AI_Discov...
2021 年が始まりました。過去 1 年間で機械学習コミュニティでは多くの出来事がありました。時間...
現在、多くのディープラーニング モデルがモバイル アプリに組み込まれています。デバイス上で機械学習を...
翻訳者 | 李睿レビュー | Chonglou制作:51CTO テクノロジースタック(WeChat ...
AIや5Gなどの新技術がもたらす変化により、顧客サービスシナリオは多様な変化を遂げており、兆レベル...
[51CTO.comよりオリジナル記事] 10月13日、中関村スタートアップストリートで、中関村ス...
この記事は、公開アカウント「Reading the Core」(ID: AI_Discovery)か...
過去15年間、欧州で犯罪者を追う警察は、指紋、DNAデータ、自動車所有者の詳細を相互に共有することが...