700億サイズの金融業界（銀行・証券・保険領域）特化型の大規模言語モデル（LLM）パラメーターを公開

株式会社GenerativeX（所在地：東京都渋谷区、以下GenerativeX）は、金融業界向けに開発した独自の大規模言語モデル（以下LLM）のファインチューニングパラメーターを公開します。

金融業界においては、様々な定量情報を正確に扱う必要があるため、高性能なLLMが必要不可欠です。しかし、ChatGPTのような性能の高いLLMでは社外へとデータを送信する必要があり、センシティブな情報を扱う金融業界ではLLMの活用が限定的であるという課題がありました。
そこでGenerativeXでは、オープンソースでも最大規模の700億パラメータを誇るMeta社のLlama2モデルに対して、金融業界の知識をファインチューニングにより補完することで、金融領域における高い性能を持ちながらもオンプレミスでの運用が可能な独自のLLM（LoRAアダプター）を開発・公開致しました。