画像キャプションAI(BLIP)を用いて、GPTに視覚情報(目)を与えてみました！
1度キャプションとして文字に落としているので、情報は大きく失われますが、AIとのコミニュケーションの幅が広がると思います。
動画はAIと机の上を共有しながら会話しています pic.twitter.com/qf8BsMslhX

— ひまわり (@hmwrikame) March 11, 2023