anotherhollow1125/rinna_gpt

オンプレGPTをやりたくて作成。Pythonアプリケーション(ビルド手段内包予定)とTauriから成ります

Rust

6

16 commits

updated Jun 19, 2023

See the code

README

Rinna GPT

rinna gpt demo

RinnaBuild TauriBuild

Rinna社が提供してくださっているrinna/japanese-gpt-neox-3.6b-instruction-sftをローカルでPythonで実行するプログラムを、PyInstallerで実行ファイルとし、Tauriでデスクトップアプリ化したものです。

想定環境

環境はWindows10/11のみになります。

またCPUで演算するため、大容量メモリ(少なくとも32GB)と、高性能なCPUを積んだパソコンでの実行が望ましいです。

なお、Rinna言語モデル自体が7GBほどの容量を持つためCドライブにその分の余裕を持たせてください。

使い方

インストール後、起動するとプロンプト部分に"Wait for Rinna..."と表示されています。これが"Send a message."になったらRinna GPTにメッセージを送れるようになります。

  • 初回は言語モデルをダウンロードするため、起動に時間がかかります。
  • 2回目以降も起動にはなかなか時間がかかります。ゆっくり待ちましょう。

anotherhollow1125/rinna_gpt

オンプレGPTをやりたくて作成。Pythonアプリケーション(ビルド手段内包予定)とTauriから成ります

Rust

6

16 commits

updated Jun 19, 2023

See the code

README

Rinna GPT

rinna gpt demo

RinnaBuild TauriBuild

Rinna社が提供してくださっているrinna/japanese-gpt-neox-3.6b-instruction-sftをローカルでPythonで実行するプログラムを、PyInstallerで実行ファイルとし、Tauriでデスクトップアプリ化したものです。

想定環境

環境はWindows10/11のみになります。

またCPUで演算するため、大容量メモリ(少なくとも32GB)と、高性能なCPUを積んだパソコンでの実行が望ましいです。

なお、Rinna言語モデル自体が7GBほどの容量を持つためCドライブにその分の余裕を持たせてください。

使い方

インストール後、起動するとプロンプト部分に"Wait for Rinna..."と表示されています。これが"Send a message."になったらRinna GPTにメッセージを送れるようになります。

  • 初回は言語モデルをダウンロードするため、起動に時間がかかります。
  • 2回目以降も起動にはなかなか時間がかかります。ゆっくり待ちましょう。