スマホで27B級LLMが動く!PrismMLが「Bonsai 27B」を無料公開
この記事で分かること
スマートフォン上で27Bパラメータの大規模言語モデルを無料で実行できる。PrismMLが公開した「Bonsai 27B」は、端末内で動作するためインターネット接続が不要で、プライバシー面でも有利。具体的な利用シーンとしては、外出先での文章作成や情報整理など、クラウドAPIに依存しないローカルLLMの活用が可能になる。
スマートフォン上で27Bパラメータの大規模言語モデルを無料で実行できる。PrismMLが公開した「Bonsai 27B」は、端末内で動作するためインターネット接続が不要で、プライバシー面でも有利。具体的な利用シーンとしては、外出先での文章作成や情報整理など、クラウドAPIに依存しないローカルLLMの活用が可能になる。