ニュース

Nov 28, 2023

スタンフォード、Brilliant Labs が ChatGPT スマート グラスを開発

Gli occhiali intelligenti rizzGPT integrano contenuti aumentati e intelligenza artificiale generativa

rizzGPT スマート グラスは、拡張コンテンツと生成 AI テクノロジーを融合します

最終編集日: 2023 年 6 月 5 日

デーモンド・キュアトン

スタンフォード大学の学生研究者は、OpenAI の ChatGPT-4 チャットボットを活用できる拡張現実 (AR) スマート グラスを作成しました。

追加されたプラグインにより、学生はスマート グラス経由で ChatGPT に直接話すことができ、生成人工知能 (AI) と AR オーバーレイを融合できます。

気まずいデートや就職面接に別れを告げましょう ☹️

私たちは rizzGPT — リアルタイム Charisma as a Service (CaaS) を作りました

あなたの会話を聞いて、次に何を言うべきかを正確に教えてくれます 😱

GPT-4、Whisper、Monocle AR グラスを使用して構築

@C51Alix @varunshenoy_ と一緒に pic.twitter.com/HycQGGXT6N

— ブライアン・ハウピン・チェン (@bryanhpchiang) 2023 年 3 月 26 日

ブライアン・ハウピン・チェン、アリックス・クイ、ヴァルン・シェノイ、アドリアノ・ヘルナンデスとりわけ、RizzGPT を作成して実験を主導しました。 このツールは、AI、AR、OpenAI の音声検出ツール Whisper を組み合わせて、会話に対する応答を提供します。 学生は AR メガネと片眼鏡を使って答えを生成しました。

蒋介石氏はツイートした

「気まずいデートや就職面接に別れを告げましょう。私たちはリアルタイムの Charisma as a Service (CaaS) である rizzGPT を作りました。会話を聞いて、次に何を言うべきかを正確に教えてくれます。GPT-4、Whisper、Monocle AR を使用して構築されています」眼鏡"

チェン氏はまた、Brilliant LabsのARソリューションを称賛した。このソリューションは「どんな眼鏡にもクリップで留めることができ、カメラ、マイク、高解像度ディスプレイを備えている」とのことだ。

同氏は、生成 AI プログラムが音声、テキスト、画像を使用したマルチモーダルな認識機能をどのように活用して、「AI があなたの生活で何が起こっているかを理解できるようにする」方法について説明しました。

Chiang 氏はさらに、「このコンテキストは、AI が（ハイパーパーソナライズされた）サポートを提供するための鍵となります。」と付け加えました。

ミームロード本人である @Adriano34554795 をタグ付けするのを忘れました

Monocle AR ガジェットを提供してくれた @brilliantlabsAR に感謝します — どのメガネにも簡単にクリップでき、カメラ、マイク、高解像度ディスプレイを備えています

このプロジェクトはおそらく @varunshenoy_😎 + 🧐+ 🤖 + によって最もよく表現されています… pic.twitter.com/97rVVnVC8I

— ブライアン・ハウピン・チェン (@bryanhpchiang) 2023 年 3 月 26 日

スタンフォード大学の研究チームは、同社の Charisma-as-a-Service (CaaS) には多数のユースケースがあると述べました。 これらは、社会不安を持つ人々の支援、就職面接、人前での講演など、さまざまな用途をカバーする可能性があります。

このツールは Whisper の音声認識ツールを使用し、コンテキストとセマンティクスに基づいて会話に応答します。 AR モノクル技術の開発者である Brilliant Labs も研究に貢献しています。

このニュースは、複数の企業がユーザー エクスペリエンスを合理化するために製品ファミリー全体にわたって ChatGPT バリアントを統合している中で発表されました。

ChatGPT は機械学習 (ML) を使用してインターネットからデータを集約し、画像、音声、ドキュメント、チャット テキストなどのコンテンツを生成します。

OpenAI のソリューションは、AI アプリの Generative Pretrained Transformer (GPT) ファミリから来ています。 NVIDIA、Meta、Microsoft、Google、Unity などの多くの企業が、コンテンツ開発を劇的に向上させるために、自社のソリューションに GPT のバージョンを組み込んでいます。

Moth and Flame、ARuVR、VirtualSpeech などの他の企業は、Generative AI インターフェイスを使用して、オンザフライの仮想現実 (VR) モジュールを提供しています。