AI企業は「小さな言語モデル」から大きな利益を狙っている

Apple、Microsoft、Meta、Google はいずれも最近、「パラメータ」は少ないものの強力な機能を備えた新しい AI モデルをリリースしました。この動きは、資金的に制約のある企業に AI を使い続けるよう奨励するためのテクノロジー団体による取り組みです。

イラスト：FT

一般的に、パラメータの数が多いほど、AI ソフトウェアのパフォーマンスは向上し、タスクはより複雑で微妙なものになります。今週発表されたOpenAIの最新のGPT-4oモデルとGoogleのGemini 1.5 Proは、1兆を超えるパラメータを持つと推定されています。一方、Meta はオープンソースの Llama モデルの 4000 億パラメータ バージョンをトレーニングしています。

データと著作権責任に関する懸念から、Meta や Google などの大手テクノロジー企業は、数十億のパラメータのみを持つ小規模な言語モデルをリリースするようになりました。これらのモデルは、安価でエネルギー効率が高く、カスタマイズ可能で、トレーニングと実行に必要なエネルギーが少なく、機密データの保存も防止できます。

「高品質をより低コストで手に入れることで、実際に顧客がアクセスできるアプリケーションが増えることになる」と、企業にAIモデルを販売するマイクロソフトのAzure AIプラットフォーム担当コーポレートバイスプレジデント、エリック・ボイド氏は述べた。

Google、Meta、Microsoft、フランスのスタートアップ企業Mistralも小規模な言語モデルをリリースしているが、依然として進歩が見られ、特定のタスクにより重点を置くことができる。

Metaの国際業務担当社長ニック・クレッグ氏は、Llama 3の新しい80億パラメータモデルはGPT-4に匹敵すると述べた。 マイクロソフトによれば、70億のパラメータを持つ同社の小型モデル「Phi-3」は、OpenAIのモデルの旧バージョンであるGPT-3.5よりも性能が優れているという。

マイクロチップは、情報をクラウドに送信するのではなく、デバイス上でローカルにタスクを処理することもできるため、情報がネットワーク内に留まるようにしたいプライバシーを重視する顧客にとって魅力的となる可能性があります。

法律事務所アドルショー・ゴダードのマネージャー、シャーロット・マーシャル氏は、生成AI製品を導入する際に「多くの顧客が直面している課題の1つ」は、データの処理と転送に関する法的要件を遵守することだと語った。彼女は、小規模モデルは企業が規制やコストの懸念を克服する機会を提供すると述べた。

より小型のモデルでは、携帯電話などのデバイスでも AI 機能を実行できます。 Google の「Gemini Nano」モデルは、最新の Pixel スマートフォンと Samsung の最新の S24 スマートフォンに組み込まれています。

Appleはまた、ベストセラーのiPhoneで動作するAIモデルも開発中であることを明らかにした。先月、シリコンバレーの大手企業は、テキストベースのタスクを実行するために設計された小さなフレームワークである OpenELM をリリースしました。

マイクロソフトのボイド氏は、小型モデルは「携帯電話やノートパソコンに至るまで、興味深いアプリケーションにつながるだろう」と述べた。

OpenAIのディレクター、サム・アルトマン氏は11月、同社はさまざまな規模のAIモデルのライセンスを顧客に提供しており、「異なる目的に役立っている」と述べた。 「小型モデルでも十分に対応できるものがあります。とても楽しみです」と彼は語った。

しかし、アルトマン氏は、OpenAIは今後も、推論、計画、タスクの実行能力、そして最終的には人間レベルの知能を達成する能力を含む、スケーラビリティを備えたより大規模なAIモデルの構築に注力していくと付け加えた。

ホアンハイ（FTによると）

出典: https://www.congluan.vn/cac-cong-ty-ai-dang-tim-kiem-loi-nhuan-lon-tu-cac-mo-hinh-ngon-ngu-nho-post296219.html