- Home
- 新製品＆新技術ＮＯＷ
- 楽天、日本語に最適化された大規模言語モデル「Ｒａｋｕｔｅｎ ＡＩ ２．０」と小規模言語モデル「Ｒａｋｕｔｅｎ ＡＩ ２．０ ｍｉｎｉ」の提供を開始
楽天、日本語に最適化された大規模言語モデル「Ｒａｋｕｔｅｎ ＡＩ ２．０」と小規模言語モデル「Ｒａｋｕｔｅｎ ＡＩ ２．０ ｍｉｎｉ」の提供を開始
- 2025/2/13 07:52
- 新製品＆新技術ＮＯＷ
■業界最高水準のスコアで効率化を実現
楽天グループ＜４７５５＞（東証プライム）は２月１２日、Ｍｉｘｔｕｒｅ ｏｆ Ｅｘｐｅｒｔｓ（ＭｏＥ）アーキテクチャを採用した新しい日本語大規模言語モデル「Ｒａｋｕｔｅｎ ＡＩ ２．０」と小規模言語モデル「Ｒａｋｕｔｅｎ ＡＩ ２．０ ｍｉｎｉ」の提供を開始したと発表。両モデルは基盤モデルとインストラクションチューニング済モデルとして提供され、楽天の公式Ｈｕｇｇｉｎｇ Ｆａｃｅリポジトリからダウンロードが可能だ。
「Ｒａｋｕｔｅｎ ＡＩ ２．０」のファインチューニングでは、最新の研究成果であるＳｉｍＰＯを活用してアライメントの最適化を実施。日本語版ＭＴ－Ｂｅｎｃｈによる評価では、「Ｒａｋｕｔｅｎ ＡＩ ２．０」インストラクションチューニング済モデルが同程度のアクティブパラメータ数を持つ他のモデルと比較して最高性能を達成した。また、「Ｒａｋｕｔｅｎ ＡＩ ２．０ ｍｉｎｉ」も同サイズのオープンモデルの中で最高性能を示している。
新ＡＩモデルの特徴として、「Ｒａｋｕｔｅｎ ＡＩ ２．０」は８つの７０億パラメータで構築した「エキスパート」と呼ばれるサブモデルで構成され、高品質な日本語と英語の言語データで継続的に学習されている。一方、「Ｒａｋｕｔｅｎ ＡＩ ２．０ ｍｉｎｉ」は１５億パラメータのモデルで、内製の多段階データフィルタリングとアノテーションプロセスを通して構築された高品質かつ広範な日本語・英語のテキストデータで学習されている。両モデルは、コンテンツの要約や質問応答、対話システムの構築など、様々なテキスト生成タスクでの商業利用が可能だ。（情報提供：日本インタビュ新聞社・株式投資情報編集部）
関連記事
ピックアップ記事
-
2025/1/9
タクシー業界の倒産・廃業が過去最多、ドライバー不足が直撃、８２社が撤退■コロナ禍前比２割減、運転手確保が喫緊の課題に ２０２４年、タクシー業界は深刻な危機に直面してい… -
■前月比１９．７ポイント増、昨年同期比でも１１．６ポイント増と大幅上昇 学情＜２３０１＞（東証プ… -
■生成ＡＩ人材が最注目、年収１，０００万円超えも ビジョナル＜４１９４＞（東証プライム）グループ…
