About
Works
Publications

Hopper Hug

2024/01/10

人と対話するくまのぬいぐるみ型インタラクティブデバイス

プログラミング実習のグループ課題手作成した。本システム「Hopper Hug」は、スマートフォンを介して人と対話するくまのぬいぐるみ型インタラクティブデバイスである。ユーザの音声をWeb音声認識APIにより認識し、過去の会話履歴やWebカメラ映像をもとに、OpenAIの言語モデル(GPT-3.5やGPT-4-Vision)を用いて返答を生成する。生成された返答は、音声合成サービスVOICEVOXにより音声に変換され、ぬいぐるみから発話される。さらに、人感センサによるハグ機能や、スマートフォンの加速度センサによるヘルプ機能も搭載されており、ユーザの行動に応じた反応が可能である。会話内容は自動で要約され、データベースに記録されるため、ユーザごとに個別で親しみやすい会話が継続できる。

PDF プレビュー

PDFを開く

使用言語

JavaScript
HTML
CSS
PHP
SQL

タグ

#WEBサービス#GPT