Stability AI の画期的な言語モデルである StableLM に挨拶する – TechCult
その他 / / April 20, 2023
スタビリティAI は、AI の世界への最新の贈り物を解き放ったところです。Stability AI の画期的な言語モデルである StableLM をご紹介します。 しかし、StableLM を他の言語モデルと区別するものは何でしょうか? 続きを読んで調べてください。
大手人工知能 (AI) 企業である Stability AI は、StableLM と呼ばれる新しいオープンソース言語モデルをリリースしました。 このモデルには、30 億と 70 億のパラメーターの 2 つのバージョンがあり、その後に、より大きな 150 億から 650 億のパラメーター モデルが続きます。 StableLM は、CC BY-SA-4.0 ライセンスの条件に従って、商用または研究目的で自由に利用できます。
StableLM モデルはテキストとコードを生成でき、さまざまなダウンストリーム アプリケーションを強化します。 モデルは、1.5 兆のコンテンツ トークンを含む、The Pile の 3 倍の新しい実験データセットに基づいて構築されています。 サイズが小さいにもかかわらず、StableLM は会話とコーディングのタスクで驚くほど高いパフォーマンスを発揮し、1,750 億のパラメーターを持つ GPT-3 よりも優れています。
基本モデルに加えて、同社は命令を微調整した一連の研究モデルもリリースしています。 これらのモデルは研究目的のみを目的としており、非営利の CC BY-NC-SA 4.0 ライセンスの下でリリースされています。
Stability AI は、透明性、アクセシビリティ、およびサポート性に強いコミットメントを持っています。 モデルをオープンソース化して透明性を促進し、信頼を育み、日常のユーザーがモデルをローカル デバイスで実行できるようにエッジを設計します。 また、ユーザーを置き換えるのではなく、ユーザーをサポートするモデルを構築します。
StableLM のリリースは、非営利の研究ハブである EleutherAI で以前の言語モデルをオープンソース化した同社の経験に基づいています。 StableLM は、The Pile で構築された実験的なデータセットでトレーニングされていますが、コンテンツの 1.5 兆トークンを含む 3 倍の大きさです。 しかし、新しい AI はこれだけではありません。 イーロン・マスクが TruthGPT の立ち上げ計画を発表
モデルは現在、 GitHub リポジトリ、そして近いうちに完全な技術レポートを公開する予定です。 同社はまた、チームを拡大しており、このテクノロジーへのアクセスを民主化するために、情熱的で経験豊富な LLM を探しています。
毎日新しい AI が市場に登場する中、Google の CEO であるサンダー ピチャイの懸念は次のとおりです。 AI は、展開を誤ると害を及ぼす可能性があります とてつもないアイデアではないようです。 業界が前進するにつれて、物事が手に負えなくなることがないように、規制されていない成長に細心の注意を払う必要があります。
ソース: 安定性 AI ブログ
アレックス・クレイグ
アレックスは、テクノロジーとゲーム コンテンツへの情熱に突き動かされています。 最新のビデオ ゲームをプレイしたり、最新のテクノロジー ニュースをチェックしたり、夢中になったりしています。 似たような考えを持つ他の個人がオンラインにいることから、テクノロジーとゲームに対する Alex の愛情は、 します。
アレックスは、テクノロジーとゲーム コンテンツへの情熱に突き動かされています。 最新のビデオ ゲームをプレイしたり、最新のテクノロジー ニュースをチェックしたり、夢中になったりしています。 似たような考えを持つ他の個人がオンラインにいることから、テクノロジーとゲームに対する Alex の愛情は、 します。