Chat Assistant | hy clear blog

General

録音ショートカット

背景や3Dモデルを押したときに音声録音を開始する
現在、機能しません

録音ループ

録音をループして常に声による入力を待ち受ける

AIからの呼びかけを許可する

ある程度の待機時間が過ぎたらAIから呼びかける。
2回実行して反応がなければそれ以上呼びかけない

背景画像の設定背景画像の設定をする。

ChatGPT Setting

* ChatGPT API Key

* Chat GPT Model

送信会話数ChatGPTに送信する過去の会話の回数。回数を増やせば文脈を長く保持できるが、Tokenの消費が増える。 AssistantAPIの時は無効

Assistant IDアシスタントのID。通常のcompletionsチャットを行う場合は必要なし。https://platform.openai.com/docs/assistants/overview

感情表現の出力に対応するには以下の文章をInstructionsに追加してください。
『感情を必ず[喜,怒,哀,楽,中]で最初に表示.』

Thread ID会話のスレッドID。初期値は自動で入ります。機器を移行する場合、このIDをコピペすれば同じスレッドでやり取りできます。入力しない場合、新しい会話が始まりそのIDがここに表示されます。

GPT SystemRole TextChatGPTの挙動を変更するプロンプト。毎回送るので長すぎるとTokenの消費が増えます
例：あなたは秘書です。敬語を使わない。顔文字を使用する

AssistantAPIを使うときは適用されません。

3D Model Settings

VRoird Studioで作成したモデルを表示できます。Modelは.VRM形式のみ対応しています。
デフォルトで設定している3Dモデルは VRoid Studio のテンプレートを出力しました。

VOICEVOX

テキストの読み上げに使う音声合成ソフトウェアです。ローカルにdockerでインストールしてテストしています。https://voicevox.hiroshiba.jp

VOICEVOX URL読み上げを行うためのWebAPIのURL。未入力の場合はブラウザの固有の読み上げを使用する。
VOICEVOXの設定でcorsをすべて許可するか、https://dev.hy-clear.comを追加してください

VOICEVOX Speaker IdVOICEVOXのキャラクターとスタイルの指定するId
キャラの一覧

VOICEVOX Volume読み上げ時の音量 0.1ごと

VOICEVOX Speed読み上げ速度 0.1ごと

Function Calling

※実験的な機能です。うまく動作しないかもしれません。

Chatの内容から機能を呼び出すことができます。呼び出す機能を以下のリストからON/OFFできます。データはすべてブラウザに保存しています。 AssistantAPIでは動作しません。

TODO

Todoを追加、表示、削除することをChatGPTに伝えることで操作できます。例: カテゴリーに買い物を追加カテゴリーの一覧を表示買い物に卵を追加買い物の一覧を表示

音声読み上げ

音声読み上げには VOICEVOX を使用しています。
以下のキャラクターを選択できるようにしています。

・VOICEVOX:四国めたん

・VOICEVOX:ずんだもん

・VOICEVOX:春日部つむぎ

・VOICEVOX:雨晴はう

・VOICEVOX:波音リツ

・VOICEVOX:玄野武宏

・VOICEVOX:白上虎太郎

・VOICEVOX:青山龍星

・VOICEVOX:冥鳴ひまり

・VOICEVOX:九州そら

・VOICEVOX:もち子さん

・VOICEVOX:剣崎雌雄

・VOICEVOX:WhiteCUL

・VOICEVOX:後鬼

・VOICEVOX:No.7

・VOICEVOX:ちび式じい

・VOICEVOX:櫻歌ミコ

・VOICEVOX:小夜/SAYO

・VOICEVOX:ナースロボ＿タイプＴ

・VOICEVOX:†聖騎士紅桜†

・VOICEVOX:雀松朱司

・VOICEVOX:麒ヶ島宗麟

・VOICEVOX:春歌ナナ

・VOICEVOX:猫使アル

・VOICEVOX:猫使ビィ

・VOICEVOX:中国うさぎ

・VOICEVOX:栗田まろん

・VOICEVOX:あいえるたん

・VOICEVOX:満別花丸

・VOICEVOX:琴詠ニア

3Dモデル

デフォルトで設定している3Dモデルは VRoid Studio のテンプレートを出力しました

応答

質問への応答はOpenAIのChatGPTで生成しています