【2025】サカナ AIとは？開発した最新技術と仕組み・日本語の大規模言語モデルを紹介！

2024年3月にサカナAIが複数技術を掛け合わせる技術を発表しました。
AIを短時間で掛け合わせることを繰り返して進化させることで、従来かかっていた開発に要する時間を大幅に短縮する可能性があるようです。

通常、生成AIの開発には膨大な学習データや高機能な半導体が必要ですが、サカナAIは従来とは異なる技術を用いて生成AIを開発します。

今回はサカナAIが開発した技術「進化的モデルマージ」の仕組みや特徴・構築した日本語モデルなどを詳しく解説します。

この記事の概要目次

そもそもサカナAIとは

サカナAI(Sakana AI)とは、東京にあるAI企業です。
2023年8月に元GoogleのAI研究者であるLlion Jones氏とDavid Ha氏によって設立されました。

サカナAIの名前の由来は日本語の「魚」から来ており、魚の群れのようにそれぞれの能力は異なるものの、1つにすることで大きな存在となり機能するAIの技術を目標としています。

サカナAIは約45億円の資金調達を発表し、NTTグループ・KDDI・ソニーグループなど日本の大手企業からも出資を受けると発表されました。

AIのメリットについてはこちらの記事で解説しています。

【2024】AI（人工知能）とは？活用事例やメリット・AIの作り方を解説

サカナAIが開発した技術は、世界初の大規模言語モデル(LLM)です。
進化的モデルマージと呼ばれる既存の複数のモデルを統合(マージ)し、アルゴリズムを組み合わせた新しいモデルです。

サカナAIは進化的モデルマージを用いて、日本語のモデルと数学に特化しているモデルを統合し、日本語で数学の問題を解答することができる技術を開発しました。

進化的モデルマージは従来の開発のように大量のデータを用いて学習させる必要もないため、短時間かつ低コストで開発することが可能です。

サカナAIが開発した進化的モデルマージの仕組みは以下の通りです。

複数のAIモデルを用意します。
それぞれのモデルは異なる構造や専門領域を持っているのが特徴です。

それぞれのAIモデルを評価します。
評価基準はタスクの性質で異なりますが、精度や速度・効率などが評価されるようです。

評価結果に基づいたAIモデルの組み合わせを生成します。
この時に進化的アルゴリズムを用いて、最適な組み合わせを選びます。

生成されたAIモデルの統合を繰り返します。
最適なAIモデルの統合を見つけるまで続け、高性能なモデルを生成するのです。

サカナAIが開発した進化的モデルマージには以下のような特徴があります。

以下でそれぞれの特徴を詳しく見ていきましょう。

従来のAIモデルを開発する技術では人間がそれぞれのAIモデルの性能を評価し、最適な組み合わせを選択していました。

一方、進化的モデルマージはアルゴリズムなどを用いてAIが自動的に最適な組み合わせを選ぶことができるため、人間の手を使うことなく負担が軽減できます。

従来のAIモデル技術では、同じ構造を持ったAIモデル同士しか組み合わせることができませんでした。
しかし、進化的モデルマージは、異なった構造や専門領域を持つAIモデル同士を組み合わせることが可能です。

そのため、従来のAIモデル融合技術よりさらに幅広い知識を持った高性能なAIモデルを生成することができます。例えば、画像認識のAIモデルと自然言語処理のAIモデルを組み合わせ、画像キャプション生成の処理ができるAIモデルを生成することが可能です。

異なるAIモデルを組み合わせることで、それぞれの弱点を補いながら性能を向上させることも期待できます。

進化的モデルマージは複数のAIモデルを組み合わせることで、過学習を防ぐことが可能です。
過学習とはAIがデータを学習しすぎたため、未知のデータに対して分析する力が下がってしまうことを指します。

従来のAI技術は、過学習しやすいという問題がありました。
しかし、進化的モデルマージは複数のAIモデルを組み合わせて学習することで、データの偏りがなく汎化性の高いAIモデルを生成できるのです。

先述したように、サカナAIは進化的モデルマージを用いた日本語モデルを開発しています。
現在構築されているのは以下の日本語モデルです。