avatar_chat_vqa_app

これはStreamlitでGeminiを使用した音声対話＆VQAアプリです。

使用したい方以下の手順に従ってください。

1. クローン後、以下のリンクからVOICEBOXをダウンロード、もしくは自身の環境に対応したパッケージを同じディレクトリにダウンロードし、起動することでローカル上にサーバーがを立ち上げます。

https://voicevox.hiroshiba.jp/

https://github.com/VOICEVOX/voicevox_engine/releases/tag/0.14.2

例：

#windows/CUDA版
cd windows-nvidia
run.exe --use_gpu

2. 以下のコマンドでapp.pyを実行します。

streamlit run app.py

使用モデル：

"koheiduck/bert-japanese-finetuned-sentiment"　 https://huggingface.co/koheiduck/bert-japanese-finetuned-sentiment

"cl-tohoku/bert-base-japanese-whole-word-masking"　 https://huggingface.co/cl-tohoku/bert-base-japanese-whole-word-masking

音声："VOICEVOX:ナースロボ＿タイプＴ"

立ち絵:【MYCOEIROINK】ナースロボ_タイプT + 立ち絵PSD \nhttps://booth.pm/ja/items/3876977